全部标签
目录标签

#chunking

公开记录中带有此标签的全部仓库——标签来自其 GitHub 主题或软件包注册表发布的关键词。健康度量遵循与记录其余部分相同的版本化方法论。

24 条记录
标签为“chunking”按健康指数排序
npm
88优秀健康指数
nearform/llm-splitter
Efficient, configurable text chunking utility for LLM vectorization. Returns rich chunk metadata.
JavaScript · HTML★ 21↓ 24K/月2026年9月27日
MIT2026年9月27日 · 指标 2.10.0
Go
86优秀健康指数
folbricht/desync
Alternative casync implementation
Go★ 4362026年10月18日
BSD-3-Clause2026年10月18日 · 指标 2.10.0
npm
86优秀健康指数
harshankur/officeParser
A robust, strictly-typed Node.js and Browser library for parsing office files into a rich Abstract Syntax Tree (AST) and generating high-fidelity output in multiple formats. Parses: docx · pptx · xlsx · odt · odp · ods · pdf · rtf · csv · md · html. Generates: Markdown · HTML · CSV · RTF · PDF · Plain Text · RAG Chunks
Rich Text Format · HTML★ 533↓ 2.9M/月2026年8月27日
MIT2026年8月27日 · 指标 2.10.0
npm · Packagist · crates.io +1
86优秀健康指数
xberg-io/tree-sitter-language-pack
Comprehensive tree-sitter grammar compilation with polyglot bindings — Rust, Python, Node.js, Go, Java, Ruby, Elixir, PHP, C#, WASM, Dart, Kotlin-Android, Swift, Zig, and CLI. 371 languages.
Rust★ 462↓ 1,751/月2026年8月27日
MIT2026年8月27日 · 指标 2.10.0
crates.io
84优秀健康指数
bzsanti/oxidizePdf
Pure Rust PDF library for AI/RAG: structure-aware chunking, no ML, no C deps.
Rust★ 193↓ 36.6K/月2026年10月20日
MIT2026年10月20日 · 指标 2.10.0
PyPI · crates.io · npm
81优秀健康指数
anvai-labs/victor
该仓库未发布描述。
Python★ 5↓ 1,566/月2026年9月15日
Apache-2.02026年9月15日 · 指标 2.10.0
PyPI · crates.io
78良好健康指数
reactor-team/reactor-webrtc
Reactor's owned WebRTC stack (safe Rust API + sys + build pipeline). Shared by the client SDKs and the runtime.
Rust · Python · C++★ 6↓ 12.7K/月2026年10月10日
Apache-2.02026年10月10日 · 指标 2.10.0
NuGet
75良好健康指数
iyulab/FileFlux
.NET RAG document processing library that transforms PDF, DOCX, HWP, and more into optimized chunks via a 5-stage pipeline with Rust-based FFI readers.
C#★ 52026年10月20日
MIT2026年10月20日 · 指标 2.10.0
PyPI
71良好健康指数
bitranox/btx_lib_mail
该仓库未发布描述。
Python★ 0↓ 14.1K/月2026年9月11日
MIT2026年9月11日 · 指标 2.10.0
crates.io
71良好健康指数
nlfiedler/fastcdc-rs
FastCDC implementation in Rust
Rust★ 202↓ 312K/月2026年8月28日
MIT2026年8月28日 · 指标 2.10.0
PyPI
67良好健康指数
isaacus-dev/semchunk
A fast, lightweight and easy-to-use Python library for splitting text into semantically meaningful chunks.
Python★ 6662026年9月10日
MIT2026年9月10日 · 指标 2.10.0
crates.io
63中等健康指数
srijs/rust-gearhash
Fast, SIMD-accelerated hash function for content-defined chunking
Rust★ 31↓ 335.3K/月2026年9月15日
Apache-2.02026年9月15日 · 指标 2.10.0
NuGet
60中等健康指数
iyulab/FluxCurator
Zero-dependency .NET library for RAG text preparation: multilingual cleaning, sensitive data masking, content filtering, and semantic chunking across 14 languages.
C#★ 22026年9月30日
MIT2026年9月30日 · 指标 2.10.0
Packagist
57中等健康指数
EdouardCourty/PHPTextChunker
A fast and memory-efficient PHP text chunker
HTML★ 9↓ 2,581/月2026年8月27日
MIT2026年8月27日 · 指标 2.10.0
crates.io · npm
50中等健康指数
qdrddr/chunk-your-skills
Chunk Skills: Frontmatter; Index of markdown headers 2 nodes; recompose with PageIndex natural page form
Rust · Shell · Python★ 2↓ 853/月2026年9月11日
Apache-2.02026年9月11日 · 指标 2.10.0
crates.io · npm
50中等健康指数
qdrddr/chunk-your-tools
Chunk MCP tools: Tool with required properties; optional Properties and Enums
Rust · Shell · Go★ 2↓ 860/月2026年9月11日
Apache-2.02026年9月11日 · 指标 2.10.0
npm
50中等健康指数
qwertymuzaffar/chunklet
Token-aware text chunking for RAG - exact source offsets, sentence and markdown modes, zero dependencies.
TypeScript★ 0↓ 9,064/月2026年10月20日
MIT2026年10月20日 · 指标 2.10.0
Go
44薄弱健康指数
1Vewton/textsplitter
The Golang package to chunk documents for RAG.
Go★ 12026年9月20日
MIT2026年9月20日 · 指标 2.10.0
PyPI
44薄弱健康指数
OpenVoiceOS/quebra_frases
chunks strings into byte sized pieces
Python★ 12026年9月12日
Apache-2.02026年9月12日 · 指标 2.10.0
Packagist · npm
36薄弱健康指数
kstmostofa/laravel-backfill
该仓库未发布描述。
PHP · Blade★ 1↓ 3,027/月2026年9月24日
MIT2026年9月24日 · 指标 2.10.0
Packagist
35薄弱健康指数
Sammyjo20/laravel-chunkable-jobs
📑 Split Laravel jobs into multiple separate job chunks
PHP★ 83↓ 18.3K/月2026年10月14日
无许可证2026年10月14日 · 指标 2.10.0
PyPI
29存在风险健康指数
scrapedatshi/scrapedatshi-py
该仓库未发布描述。
Python★ 0↓ 244/月2026年9月10日
MIT2026年9月10日 · 指标 2.10.0
npm
25存在风险健康指数
nftstorage/carbites-cli
***Notice: This repository is no longer maintained.***CLI tool for splitting a single CAR into multiple CARs from the comfort of your terminal.
JavaScript★ 7↓ 29/月2026年9月29日
自定义许可证2026年9月29日 · 指标 2.10.0
PyPI
25存在风险健康指数
scrapedatshi/scrapedatshi-mcp
该仓库未发布描述。
Python★ 0↓ 2,606/月2026年9月10日
MIT2026年9月10日 · 指标 2.10.0