본문 바로가기

[한컴 데이터 로더] 문서 계층 구조 기반 청킹은 고정 크기 분할과 무엇이 다른가요?

고정 크기 분할은 글자·토큰 수를 기준으로 문서를 나누지만, 계층 구조 기반 청킹은 제목·본문·표 같은 문서 구조를 함께 고려합니다. 그래서 제목과 본문, 표의 헤더와 값이 분리될 가능성을 줄이고 검색 단계에서 문맥이 유지된 청크를 활용할 수 있습니다. 이를 위해서는 전처리 단계에서 문서 구조를 보존하여 데이터를 추출하는 과정이 필요합니다.

찾으시는 항목이 없나요? 지원센터에서 문제해결에 적합한 도움을 받아 보세요.

구매하신 제품문의는 한컴스토어 로그인 후 제품 문의하기를 통해 질문을 남기실 수 있어요.

Footer

  • 회사개요
  • 오시는 길
  • 신뢰경영
  • 사회공헌
  • IR

한컴 약관

개인정보처리방침이용약관

그룹사 선택

(주)한컴대표자: 변성준, 김연수
사업자등록번호: 107-81-522302012-경기성남-1092
경기도 성남시 분당구 대왕판교로644번길 49 한컴타워 10층
고객 지원: 1566-5192(국내, 평일 9시-18시)support@hancom.com
사업자정보 확인
ISMS-P 인증

[인증범위] 생산성서비스 및 채용서비스
[유효기간] 2025.04.20~2028.04.19

2023 올해의 브랜드 대상ISO27001&27701_인증마크

Copyright Hancom Inc. All rights reserved.