知识库搭建-文档预处理-数据清洗：基于异步的AI文本批处理系统实践项目背景在构建企业级知识库和RAG（检索增强生成）系统时，文档预处理和数据清洗是至关重要的环节。原始文档往往存在格式不统一、内容冗余、质量参差不齐等问题，这些问题会直接影响到