PyPI95卓越健康指数intel/auto-roundA SOTA quantization toolkit for high-accuracy low-bit LLM inference|简洁且高效的量化工具包Python · C++★ 1,609↓ 16K/月2026年9月8日Apache-2.02026年9月8日 · 指标 2.10.0
PyPI71良好健康指数pjordanandrsn/experts4bit-qloraTrain and serve MoE models that do not fit in VRAM: fused 4-bit experts, QLoRA, CPU/NVMe offload, and fast inference on consumer NVIDIA GPUs.Python★ 3↓ 2,064/月2026年9月15日MIT2026年9月15日 · 指标 2.10.0
PyPI67良好健康指数pjordanandrsn/grouped-nf4-gemmTriton kernels for 4-bit MoE inference: grouped NF4/MXFP4 GEMM, INT4 GEMV, FP8 paged attention, and CPU/NVMe expert streaming.Python★ 2↓ 3,717/月2026年9月24日MIT2026年9月24日 · 指标 2.10.0