RAG Lab초급
Document Chunker
다양한 청킹 전략을 비교하고 최적의 방법을 찾아보세요.
RAG Lab 시리즈
1 / 4
문서 파싱
PDF, TXT, MD, DOCX 파일을 텍스트로 변환하는 과정을 체험합니다.
청킹 전략
고정 크기·문장·재귀·단락·의미 기반 등 5가지 분할 방법을 비교합니다.
오버랩 이해
청크 간 중복 영역이 문맥 보존에 어떤 역할을 하는지 시각적으로 확인합니다.
통계 분석
청크 수, 평균 크기, 토큰 수 등 다양한 통계를 실시간으로 분석합니다.
Document Chunker 로딩 중...
청킹(Chunking)이란?
청킹은 긴 문서를 작은 조각으로 나누는 과정으로, RAG 시스템에서 검색 품질을 좌우하는 핵심 전처리 단계입니다. 너무 큰 청크는 관련 없는 정보를 포함해 검색 정확도를 떨어뜨리고, 너무 작은 청크는 문맥을 잃어 의미가 불완전해집니다.
- • 고정 크기·문장·재귀·단락·의미 기반 청킹 전략별 결과를 비교 체험
- • chunk size·overlap 파라미터를 조정하며 문맥 보존 효과를 실험
- • RAG Lab 시리즈의 첫 단계 — 다음은 Embedding Explorer로 청크를 벡터화