读取网页并总结
如果你只是想快速读几篇网页、清洗正文并做总结,而不是立刻建设完整检索系统,这个模式会很顺手。
它既适合做快速验证,也能帮助你判断:什么时候临时抓网页已经不够用了,应该升级成正式索引。
读的时候重点看
- 网页正文清洗(噪声处理决定效果上限)
- 总结约束(长度、抽取、引用)
- 何时应该升级成真正的 RAG 索引(而不是临时读网页)
什么时候更适合用它
- 你需要的是快速外部阅读,而不是长期知识库
- 网页数量还不多,人工控制成本仍然可接受
- 你想先验证基于网页的流程值不值得继续工程化
如果你想本地复现
在本地 Cookbook 环境已经准备好后,可以对这个主题对应的示例做结构检查:
make test-notebooks NOTEBOOK=misc/read_web_pages_with_haiku.ipynb