文本分块
Chunking
也称文档切片 / 文本切分 / Chunk
把长资料切成较小的段落,方便查找和交给 AI 阅读
怎么理解
一本手册很长,提问时通常不用每次都把整本交给 AI。先按章节、段落等方式切成小块,查询时只取相关部分,这个准备步骤叫文本分块。
举个例子
你查员工手册里的年假规定,系统只取“年假天数”和“申请条件”附近的段落。这样比把所有入职、报销和离职制度一起塞进去更有针对性。
补充说明
切得太碎,可能把条件和结论分开;切得太大,又容易带进无关内容。最好保留标题、出处和相邻段落,方便读完整意思。