跳到正文
原文
Reddit r/MachineLearning· /u/Ok_Cartographer5609·· 2 小时前AI 评分51

作者发布 Rust 编写的 chunking 库 chunkr,自称比 LangChain 等快约 20 倍

A chunking lib in Rust that is ~20x faster [P]

AI 导读

作者 /u/Ok_Cartographer5609 发布 Rust 编写的 chunking 库 chunkr(https://github.com/d1pankarmedhi/chunkr),支持 Recursive、Markdown header、Late chunking、Hierarchical chunking 等策略及原生 PDF loader。

来源:Reddit r/MachineLearning · reddit.com