开源项目

chunky:RAG文档分块处理工具

GiovanniPasq/chunky

上下文与知识检索增强

概述

chunky 是一个面向 RAG 流程的本地文档预处理工具,供构建检索增强应用的开发者使用。项目本次首次发布,创建于3月6日:它把 PDF 转换为 Markdown、清理文本、检查分块效果并补全元数据,帮助提升进入检索库的语料质量;仓库提供源码、Docker 运行方式与分块检查说明,以 MIT 许可开源。对需要控制 RAG 切分质量的团队,它把格式转换、清洗与检查集中到同一个本地工作区完成。