跳到正文
原文
Reddit · r/MachineLearning· /u/Ok_Cartographer5609·· 3 天前AI 评分30

Chunkr:用 Rust 实现的 chunking 库,速度比 LangChain 等方案快约 20 倍

A chunking lib in Rust that is ~20x faster [P]

AI 导读

开发者推出 Rust 编写的 chunking 库 Chunkr,支持 Character、Recursive、Markdown header、Late chunking、Hierarchical chunking 等策略及原生 PDF 加载。

来源:Reddit · r/MachineLearning · reddit.com