全部标签
目录标签

#tiktoken

公开记录中带有此标签的全部仓库——标签来自其 GitHub 主题或软件包注册表发布的关键词。健康度量遵循与记录其余部分相同的版本化方法论。

5 条记录
标签为“tiktoken”按健康指数排序
Go
58中等健康指数
ron2111/omnitoken
Pure-Go LLM tokenizer and tiktoken-compatible token counter for OpenAI BPE, WordPiece, SentencePiece, Gemini, Llama, Mistral, and Hugging Face adapters.
Go★ 62026年7月15日
MIT2026年7月15日 · 指标 1.13.0
Go · npm
55中等健康指数
lancekrogers/tcount
Local-first LLM token counter: exact OpenAI BPE, Claude/Gemini estimates, context-window usage. Zero network. CLI + Go library.
Go★ 2↓ 19/月2026年7月13日
MIT2026年7月13日 · 指标 1.13.0
Go · npm
54中等健康指数
lancekrogers/go-token-counter
Local-first LLM token counter: exact OpenAI BPE, Claude/Gemini estimates, context-window usage. Zero network. CLI + Go library.
Go★ 22026年7月18日
MIT2026年7月18日 · 指标 1.13.0
Packagist
54中等健康指数
mis3085/tiktoken-for-laravel
A tiktoken-php wrapper for Laravel
PHP★ 26↓ 6,281/月2026年7月22日
MIT2026年7月22日 · 指标 1.13.0
PyPI · crates.io
50中等健康指数
marcelroed/gigatoken
Language model tokenization at GB/s
Rust · Python★ 115↓ 2,741/月2026年7月22日
MIT2026年7月22日 · 指标 1.13.0