徐涛 d4c4d8fa3c feat(document): 实现 Document 类型与 RecursiveCharacterSplitter 分割器 ...

新增 Phase 14 核心模块，为 RAG 管线提供 split → embed 阶段的底层支撑。

新增内容：
- Document 类型（id/content/metadata/mime_type 四字段 + new/from_raw 构造器）
- RecursiveCharacterSplitter（两阶段算法：按 separator 优先级递归分割 + 贪心合并 overlap 滑动窗口）
- Embedding trait（异步向量化抽象，复用 LlmError）+ MockEmbedding（sin-hash 零依赖伪随机实现）
- 19 个 Document 单元测试 + 6 个 Embedding 单元测试
- document_demo 示例（Document → Splitter → MockEmbedding → InMemoryVectorRetriever 端到端演示）

模块注册：
- src/lib.rs: pub mod document + pub use Document
- src/llm.rs: pub mod embedding

设计文档：docs/20-phase14-document-and-embedding.md（1417 行，含背景/调研/方案对比/实施计划）

零新外部依赖，所有长度比较以 Unicode 字符为单位（chars_len），CJK 文本行为正确。

2026-07-09 13:08:35 +08:00

..

agent_session_demo.rs

style(tools, llm): 统一导入顺序与代码格式

2026-07-05 08:19:13 +08:00

context_slot_demo.rs

feat(core): 新增 Phase 10 ContextSlot 多上下文分区管理

2026-07-06 09:46:04 +08:00

conversation_memory_demo.rs

feat(core): 14 个公开枚举标记 #[non_exhaustive]

2026-07-05 19:47:03 +08:00

custom_tool.rs

style(tools, llm): 统一导入顺序与代码格式

2026-07-05 08:19:13 +08:00

document_demo.rs

feat(document): 实现 Document 类型与 RecursiveCharacterSplitter 分割器

2026-07-09 13:08:35 +08:00

end_to_end.rs

fix(examples): 修复 Phase 8 端到端示例审查发现的 6 项问题

2026-07-05 21:00:36 +08:00

knowledge_search_demo.rs

style(tools, llm): 统一导入顺序与代码格式

2026-07-05 08:19:13 +08:00

prompt_composer.rs

feat(core): 14 个公开枚举标记 #[non_exhaustive]

2026-07-05 19:47:03 +08:00

quick_start.rs

fix(examples): 修复 Phase 8 端到端示例审查发现的 6 项问题

2026-07-05 21:00:36 +08:00

simple_visit.rs

feat(llm): 完成 Phase 5 热身准备（Ollama / non_exhaustive / ProviderConfig）

2026-07-05 08:12:40 +08:00

streaming_events_demo.rs

style(tools, llm): 统一导入顺序与代码格式

2026-07-05 08:19:13 +08:00

task_agent_demo.rs

refactor(agent): StepStatus::Completed 切换至 MessageResponse

2026-07-05 19:48:59 +08:00