Text Splitter
정해진 글자 수, 토큰 계측 제한, 문장 경계면 혹은 문맥의 의미적 일관성을 기준으로 긴 원천 텍스트를 청크 조각으로 해체하는 컴포넌트입니다.
단순 크기 기준 분할 기법에서 의미 단위 동적 분할 기법으로 전향하는 것만으로도 고가 모델 교체 이상의 RAG 품질 확보를 유도합니다.