Katalog-Tag

#wordpiece

Alle Repositories im öffentlichen Register, die dieses Tag tragen — aus ihren GitHub-Topics oder den von ihren Paket-Registries veröffentlichten Schlagwörtern. Die Gesundheit wird nach derselben versionierten Methodik gemessen wie im übrigen Register.

2 Einträge

Getaggt als „wordpiece“Geordnet nach Gesundheitsindex

crates.io

80GutGesundheitsindex

huggingface/tokenizers

💥 Fast State-of-the-Art Tokenizers optimized for Research and Production

Rust · Python★ 10.9K↓ 2.9M/Monat16. Juli 2026

Apache-2.016. Juli 2026 · Metriken 1.13.0

58MittelGesundheitsindex

ron2111/omnitoken

Pure-Go LLM tokenizer and tiktoken-compatible token counter for OpenAI BPE, WordPiece, SentencePiece, Gemini, Llama, Mistral, and Hugging Face adapters.

Go★ 615. Juli 2026

MIT15. Juli 2026 · Metriken 1.13.0