建立文件到 RAG 索引的摄取流程
- 选择源位置和目标系统,配置最小必要权限及需要处理的文件范围
- 按文件类型运行 partition,抽样检查标题、正文、表格和页码等解析结构
- 选择尊重文档结构的 chunking 策略,并按需添加元数据和向量嵌入
- 把处理后的数据写入检索目标,抽查代表性文档的原文、切块和召回结果
- 对新增或更新文件安排增量处理,并监控连接器失败和解析质量
把企业文件接入、结构化解析并预处理成可供搜索和 RAG 使用的数据
把企业文件接入、结构化解析并预处理成可供搜索和 RAG 使用的数据
Unstructured 面向开发者和企业数据团队,重点是把分散、版式复杂的文件转换成下游 AI 系统能消费的数据。典型流程包括源连接器取数、按文件类型解析、保留文档结构和元数据、分块与可选增强、再通过目标连接器交付。与通用 RAG 框架相比,它更聚焦数据摄取和预处理层;部署方式、连接器、解析策略及可用端点取决于所选平台方案。
提供方: Unstructured Technologies
通过源连接器从文件或业务数据位置摄取资料,并配置处理后送往的目标连接器;具体可用连接器由平台和部署方案决定。
按文件类型选择 partition 解析策略,将文档拆分为标题、正文、表格等结构元素并保留元数据,便于下游定位和处理。
利用解析得到的元素、元数据和标题层级将内容组合成适合检索的 chunks;可选择不同切分策略,而不是只能按固定长度截断。
Workflow Endpoint 可组合分区、分块、嵌入与 enrichment 步骤,为下游检索、知识库或 AI 工作流准备数据;嵌入模型与存储可按集成配置选择。
企业 AI 与数据平台团队
将政策、手册和业务资料接入摄取管道,解析出结构化内容并按章节语义分块,供搜索或 RAG 索引使用;上线前需抽样验证表格、页码和来源追踪。
数据工程师、知识管理与文档运营团队
把多个来源的非结构化文件转换为具有一致结构和元数据的元素,再交给后续搜索、分析或知识图谱系统使用。
可用状态: 当前可用
价格信息: 价格待确认
支持平台: Web, API
不是。它主要负责连接、解析、分块及可选嵌入和数据输出,通常还需要接入下游检索存储、RAG 编排或生成模型。
它可以利用 partition 得到的文档结构元素和元数据来组合 chunks,例如保留标题层级或相邻语义内容;具体策略要按文档类型和检索目标测试。
资料核验于 2026-10-06