把网页转成 Markdown,开源工具 mdream 做了两套引擎
叮当的工具箱 · 2026-10-10T12:15:24
给 Agent 读网页或者做 RAG 数据清洗,常需要把杂乱的 HTML 压成干净的 Markdown。开源工具 mdream 就是专门干这个的,支持流式转换,能比较完整地保留标题、列表、表格和代码块。 它提供了 Rust 和纯 JavaScript 两套引擎。如果走 Rust 引擎,既能通过 N-API 在 Node.js 里跑,也可以编译成 Wasm 塞进浏览器或者 Edge Runtime,场景适应起来挺灵活。