Усі теги
Тег каталогу

#llm-gateway

Усі репозиторії публічного реєстру з цим тегом — із тем GitHub або ключових слів, які публікують їхні реєстри пакетів. Здоров'я вимірюється за тією ж версіонованою методологією, що й решта реєстру.

28 записів
З тегом «llm-gateway»Упорядковано за індексом здоров'я
Go · npm
97Винятковийіндекс здоров'я
maximhq/bifrost
Fastest enterprise AI gateway (50x faster than LiteLLM) with adaptive load balancer, cluster mode, guardrails, 1000+ models support & <100 µs overhead at 5k RPS.
Go · TypeScript★ 7 60828 серп. 2026 р.
Apache-2.028 серп. 2026 р. · метрики 2.10.0
PyPI · crates.io · npm
95Винятковийіндекс здоров'я
BerriAI/litellm
The fastest, litest AI Gateway. Rust core with Python SDK. Call 100+ LLM APIs in OpenAI (or native) format with cost tracking, guardrails, load balancing, and logging [Bedrock, Azure, OpenAI, Anthropic, OpenAI, VertexAI, vLLM, Nvidia NIM]
Python · TypeScript★ 55.6K4 серп. 2026 р.
Власна ліцензія4 серп. 2026 р. · метрики 2.10.0
npm
94Винятковийіндекс здоров'я
diegosouzapw/OmniRoute
Never stop coding. Free MIT AI gateway: one endpoint, 290+ providers (90+ free), 500+ models — Kimi, Claude, GPT, OpenAI, Gemini, GLM, DeepSeek, MiniMax. Works with Claude Code, Codex, Cursor, OpenCode, Cline & Copilot. Quota-aware auto-fallback, RTK+Caveman compression saves 15-95% tokens, MCP/A2A, Desktop/PWA. Built by 500+ contributors
TypeScript★ 39.9K↓ 196.4K/міс5 серп. 2026 р.
MIT5 серп. 2026 р. · метрики 2.10.0
npm
91Відміннийіндекс здоров'я
decolua/9router
Unlimited FREE AI coding. Connect Claude Code, Codex, Cursor, Cline, Copilot, Antigravity to FREE Claude/GPT/Gemini via 40+ providers. Auto-fallback, RTK -40% tokens, never hit limits.
JavaScript★ 24.7K↓ 183.3K/міс5 серп. 2026 р.
MIT5 серп. 2026 р. · метрики 2.10.0
Go
90Відміннийіндекс здоров'я
enterpilot/gomodel
AI gateway written in Go. Lightweight unified OpenAI-compatible API for OpenAI, Anthropic, Gemini, Groq, xAI & Ollama. LiteLLM alternative with observability, guardrails, streaming, costs and usage tracking.
Go · JavaScript★ 1 01119 лип. 2026 р.
MIT19 лип. 2026 р. · метрики 2.10.0
npm
88Відміннийіндекс здоров'я
Portkey-AI/gateway
A blazing fast AI Gateway with integrated guardrails. Route to 1,600+ LLMs, 50+ AI Guardrails with 1 fast & friendly API.
TypeScript★ 12.8K↓ 2 094/міс27 серп. 2026 р.
MIT27 серп. 2026 р. · метрики 2.10.0
Go
88Відміннийіндекс здоров'я
ferro-labs/ai-gateway
Unified AI Gateway for 30+ LLMs (OpenAI, Anthropic, Bedrock, Azure etc) with Caching, Guardrails, A/B test & cost controls. Go-native Fastest & Scalable AI Gateway LiteLLM & Kong AI Gateway alternative.
Go★ 18317 лип. 2026 р.
Apache-2.017 лип. 2026 р. · метрики 2.10.0
PyPI
86Відміннийіндекс здоров'я
Nayjest/lm-proxy
OpenAI-compatible HTTP LLM proxy / gateway for multi-provider inference (Google, Anthropic, OpenAI, PyTorch). Lightweight, extensible Python/FastAPI—use as library or standalone service.
Python★ 150↓ 1 822/міс26 серп. 2026 р.
MIT26 серп. 2026 р. · метрики 2.10.0
Go · npm
83Відміннийіндекс здоров'я
voidmind-io/voidllm
Privacy-first LLM proxy and AI gateway - load balancing, multi-provider routing, API key management, usage tracking, rate limiting. Self-hosted. Zero knowledge of your prompts.
Go · TypeScript★ 1232 серп. 2026 р.
Власна ліцензія2 серп. 2026 р. · метрики 2.10.0
PyPI
81Відміннийіндекс здоров'я
Oaklight/llm-rosetta
Production-ready LLM API translation layer for Python — bidirectional conversion between OpenAI, Anthropic & Google formats via hub-and-spoke IR. Optional API gateway. Streaming & non-streaming. Zero core deps. Contributions welcome!
Python★ 58↓ 4 817/міс23 лип. 2026 р.
MIT23 лип. 2026 р. · метрики 2.10.0
Go
80Відміннийіндекс здоров'я
r9s-ai/open-next-router
A lightweight, DSL-driven LLM gateway for routing, patching provider quirks, and normalizing APIs across channels
Go★ 265 вер. 2026 р.
MIT5 вер. 2026 р. · метрики 2.10.0
Go
77Добрийіндекс здоров'я
dativo-io/talon
Open-source AI governance gateway for EU teams: enforce PII, cost, model, data residency, and tool policies for LLMs and AI agents with signed evidence.
Go★ 1017 лип. 2026 р.
Apache-2.017 лип. 2026 р. · метрики 2.10.0
crates.io · npm
77Добрийіндекс здоров'я
soapbucket/sbproxy
Self-hosted AI gateway and LLM proxy. OpenAI-compatible API for OpenAI, Anthropic, Gemini, Bedrock and 60+ providers, or serve vLLM/llama.cpp on your GPUs. Keys, budgets, guardrails, semantic cache, MCP
Rust★ 4730 лип. 2026 р.
Apache-2.030 лип. 2026 р. · метрики 2.10.0
npm · crates.io · PyPI
75Добрийіндекс здоров'я
Fast-Editor/Lynkr
Streamline your workflow with Lynkr, a CLI tool that acts as an HTTP proxy for efficient code interactions using Claude Code CLI.
JavaScript · Rust · Makefile★ 538↓ 2 446/міс28 лип. 2026 р.
Apache-2.028 лип. 2026 р. · метрики 2.10.0
Go
73Добрийіндекс здоров'я
gumieri/nenya
A lightweight, highly secure AI API Gateway/Proxy written in Go. Acts as transparent middleware between local AI coding clients (OpenCode/Pi/Cursor) and upstream LLM providers (Gemini, DeepSeek, Zhipu z.ai).
Go★ 2524 лип. 2026 р.
Apache-2.024 лип. 2026 р. · метрики 2.10.0
Go
73Добрийіндекс здоров'я
wyolet/relay
High-throughput, self-hostable LLM router in Go. BYO provider keys, k8s-native, key pooling + batch + usage observability.
Go★ 2822 серп. 2026 р.
Apache-2.022 серп. 2026 р. · метрики 2.10.0
npm
73Добрийіндекс здоров'я
yuhp/opencode-models-discovery
A universal OpenCode plugin for dynamic model discovery with flexible configuration for OpenAI-compatible providers.
TypeScript★ 75↓ 15.9K/міс15 лип. 2026 р.
MIT15 лип. 2026 р. · метрики 2.10.0
Go
67Добрийіндекс здоров'я
lansespirit/clipal
Minimal LLM API reverse proxy for Claude Code, Codex CLI & Gemini CLI — YAML routing, hot reload, and automatic provider failover. 极简 LLM API 反向代理:面向 Claude Code / Codex CLI / Gemini CLI,支持 YAML 配置、多上游优先级与自动故障转移。
Go · JavaScript★ 14317 лип. 2026 р.
Без ліцензії17 лип. 2026 р. · метрики 2.10.0
npm
63Помірнийіндекс здоров'я
MikeyPetrillo/Agent402
500+ pay-per-call web tools + skill packs for AI agents — every one tested, priced, and settled on-chain. Paid in USDC over x402 on 8 chains, or free via proof-of-work on the pure-CPU tools. Self-hostable, MCP-native, deterministic. Plus the open x402 index (Find / Route / Leaderboard).
JavaScript★ 5↓ 7 099/міс16 лип. 2026 р.
MIT16 лип. 2026 р. · метрики 2.10.0
Go
62Помірнийіндекс здоров'я
PAIArtCom/Clipal
Minimal LLM API reverse proxy for Claude Code, Codex CLI & Gemini CLI — YAML routing, hot reload, and automatic provider failover. 极简 LLM API 反向代理:面向 Claude Code / Codex CLI / Gemini CLI,支持 YAML 配置、多上游优先级与自动故障转移。
Go · JavaScript★ 14317 лип. 2026 р.
Без ліцензії17 лип. 2026 р. · метрики 2.10.0
npm
56Помірнийіндекс здоров'я
hedging8563/tokenlab-mcp-server
OpenAPI-generated MCP server for TokenLab text, image, video, music, 3D, audio, files, embeddings, rerank, translation, and async tasks.
JavaScript★ 0↓ 3 331/міс5 серп. 2026 р.
MIT5 серп. 2026 р. · метрики 2.10.0
PyPI · npm
56Помірнийіндекс здоров'я
yamantaka520/Bastet-Agent-OS
Local-first control plane for AI-agent teams — orchestrates Claude Code, Codex, Grok, agy & Hermes into gated workflows that fix their own failures, with per-run metering, an append-only audit log, and team memory. Apache-2.0.
Python · TypeScript★ 2↓ 4 607/міс25 серп. 2026 р.
Apache-2.025 серп. 2026 р. · метрики 2.10.0
npm
50Помірнийіндекс здоров'я
PunkTechnologies/punk-sdk
Public TypeScript SDK and integration examples for Punk, the adaptive runtime for production AI agents.
TypeScript★ 1↓ 4 631/міс3 вер. 2026 р.
Apache-2.03 вер. 2026 р. · метрики 2.10.0
npm
50Помірнийіндекс здоров'я
xk1ko/aigloo
Self-hosted AI gateway. Route, translate and track requests across providers, with access keys, budgets, and a built-in dashboard.
TypeScript★ 4↓ 3 711/міс25 лип. 2026 р.
MIT25 лип. 2026 р. · метрики 2.10.0
Go
44Слабкийіндекс здоров'я
gonotelm-lab/multimodal
Unified Go client for multi-modal generation across multiple AI vendors (text, image, audio, video).
Go★ 018 серп. 2026 р.
Apache-2.018 серп. 2026 р. · метрики 2.10.0
Go · npm
42Слабкийіндекс здоров'я
sanhaji182/lintasan
High-performance LLM gateway in Go. 35x less RAM than Node.js version.
Go · Svelte★ 422 лип. 2026 р.
MIT22 лип. 2026 р. · метрики 2.10.0
Go · npm
42Слабкийіндекс здоров'я
sanhaji182/lintasan-go
High-performance LLM gateway in Go. 35x less RAM than Node.js version.
Go · Svelte★ 418 лип. 2026 р.
MIT18 лип. 2026 р. · метрики 2.10.0
Go · npm
41Слабкийіндекс здоров'я
aurorallm/aurora
The Fastest enterprise AI gateway — route LLM traffic across OpenAI, Anthropic, Gemini, Groq & 30+ providers via a single API. Self-hosted, no vendor lock-in. ( 55x faster than litellm )
Go · TypeScript★ 419 лип. 2026 р.
Apache-2.019 лип. 2026 р. · метрики 2.10.0