INGESTOR자동 인제스트
자동 인제스트
파이프라인
문서를 넣으면 나머지는 자동.
파싱, 청킹, 임베딩, 저장까지
한 번에 처리합니다.
문서가 추가될 때마다
수동으로 임베딩을 돌리고
계신가요?
Ingestor는 문서 수집부터 벡터 저장까지
전 과정을 자동화합니다.
CDC(Crown)와 연동하면 외부 DB
변경사항도 자동 인제스트됩니다.
FEATURES
핵심 기능
멀티 포맷 지원
PDF, DOCX, HTML, Markdown, 텍스트 등 다양한 문서 포맷을 자동 감지하고 파싱합니다.
PDFDOCXHTMLMarkdown
자동 파이프라인
문서가 추가되면 자동으로 파싱 → 청킹 → 임베딩 → 저장까지 처리합니다. 수동 개입 없이 RAG 인덱스를 최신 상태로 유지합니다.
AutomatedEnd-to-end
Silo 연동
원본 문서는 Silo에 안전하게 보관하고, 추출된 텍스트와 벡터만 검색 인덱스에 반영합니다.
SiloObject Storage
메타데이터 추출
문서 제목, 작성자, 날짜, 페이지 수 등 메타데이터를 자동 추출하여 검색 필터에 활용합니다.
MetadataFiltering
FLOW
인제스트 흐름
문서 입력 (PDF / DOCX / HTML / ...)
Parsing
포맷 감지 · 텍스트 추출 · 메타데이터 수집
Smart Chunker
의미 단위 분할 · 오버랩 · 메타데이터 포함
Bubble Embedding
청크 → 512차원 벡터 변환
Vector Engine
벡터 저장 · HNSW 인덱스 갱신
Silo
원본 문서 보관