Усі теги
Тег каталогу

#llm-observability

Усі репозиторії публічного реєстру з цим тегом — із тем GitHub або ключових слів, які публікують їхні реєстри пакетів. Здоров'я вимірюється за тією ж версіонованою методологією, що й решта реєстру.

32 записи
З тегом «llm-observability»Упорядковано за індексом здоров'я
PyPI · npm
99Винятковийіндекс здоров'я
pydantic/logfire
AI observability platform for production LLM and agent systems.
Python★ 4 442↓ 14.6M/міс27 серп. 2026 р.
MIT27 серп. 2026 р. · метрики 2.10.0
npm · PyPI
98Винятковийіндекс здоров'я
comet-ml/opik
Debug, evaluate, and monitor your LLM applications, RAG systems, and agentic workflows with comprehensive tracing, automated evaluations, and production-ready dashboards.
Python · TypeScript★ 22.1K↓ 175.4K/міс16 вер. 2026 р.
Apache-2.016 вер. 2026 р. · метрики 2.10.0
Go · npm
97Винятковийіндекс здоров'я
maximhq/bifrost
Fastest enterprise AI gateway (50x faster than LiteLLM) with adaptive load balancer, cluster mode, guardrails, 1000+ models support & <100 µs overhead at 5k RPS.
Go · TypeScript★ 7 60828 серп. 2026 р.
Apache-2.028 серп. 2026 р. · метрики 2.10.0
npm · crates.io
96Винятковийіндекс здоров'я
langfuse/langfuse
🪢 Open source agent evals & observability: Trace, evaluate, and improve LLM applications with one open platform.
TypeScript★ 34.7K↓ 7.2M/міс16 вер. 2026 р.
Власна ліцензія16 вер. 2026 р. · метрики 2.10.0
PyPI · npm · Go
94Винятковийіндекс здоров'я
openlit/openlit
Open-source observability & evaluation platform for AI agents and coding agents. Trace LLMs, tools, prompts, costs & agent workflows with OpenTelemetry.
TypeScript · Python · Go★ 2 770↓ 342.5K/міс17 вер. 2026 р.
Apache-2.017 вер. 2026 р. · метрики 2.10.0
npm
93Винятковийіндекс здоров'я
VoltAgent/voltagent
AI Agent Engineering Platform built on an Open Source TypeScript AI Agent Framework
TypeScript★ 10.6K↓ 218.6K/міс15 вер. 2026 р.
MIT15 вер. 2026 р. · метрики 2.10.0
npm
93Винятковийіндекс здоров'я
latitude-dev/latitude-llm
Latitude is the open-source AI monitoring platform.
TypeScript · Python★ 4 60428 серп. 2026 р.
MIT28 серп. 2026 р. · метрики 2.10.0
PyPI
91Відміннийіндекс здоров'я
JudgmentLabs/judgeval
The Continuous-Improvement Stack for Agents. Our environment data and evals power agent improvement and monitoring.
Python★ 1 063↓ 233.1K/міс17 вер. 2026 р.
Apache-2.017 вер. 2026 р. · метрики 2.10.0
npm · PyPI · crates.io
90Відміннийіндекс здоров'я
FailproofAI/failproofai
Observability and enforcement for AI agent harnesses. Capture every run and runtime reliability with policy enforcement. 40 built-in policies, a local dashboard, no account required with a generous free cloud plan
MDX · TypeScript · Python★ 2 451↓ 9 921/міс9 вер. 2026 р.
Власна ліцензія9 вер. 2026 р. · метрики 2.10.0
PyPI · npm
90Відміннийіндекс здоров'я
vivekchand/clawmetry
See your agent think. Zero-config observability & governance for 26 AI agent runtimes: Claude Code, Cursor, OpenAI Codex, GitHub Copilot, Gemini CLI, Cline, OpenHands, Aider, Goose, OpenClaw, NVIDIA NemoClaw & more. Live token costs, sessions, tool calls, crons.
Python★ 408↓ 19.6K/міс8 вер. 2026 р.
MIT8 вер. 2026 р. · метрики 2.10.0
Hex · npm
83Відміннийіндекс здоров'я
ccarvalho-eng/aludel
Phoenix-native LLM evaluation, prompt testing, model comparison, red teaming, and observability for Elixir
Elixir · JavaScript · HTML★ 36↓ 1 387/міс9 вер. 2026 р.
Apache-2.09 вер. 2026 р. · метрики 2.10.0
PyPI · npm
81Відміннийіндекс здоров'я
douglasmonsky/codex-usage-tracker
Local-first MCP tools and dashboard for investigating Codex token usage, credits, costs, caching, and thread patterns.
Python★ 196↓ 439/міс13 вер. 2026 р.
MIT13 вер. 2026 р. · метрики 2.10.0
Go
81Відміннийіндекс здоров'я
nudgebee/node-agent
Per-node observability agent for Kubernetes and Linux hosts. Gathers container and host metrics, logs, and L7 traffic via eBPF; exports to Prometheus and OpenTelemetry. Includes LLM API observability.
Go★ 013 вер. 2026 р.
Apache-2.013 вер. 2026 р. · метрики 2.10.0
PyPI
80Відміннийіндекс здоров'я
Mandark-droid/genai_otel_instrument
GenAI OpenTelemetry Auto-Instrumentation Library A comprehensive wrapper for automatic instrumentation of LLM/GenAI applications Supports all major LLM providers and MCP (Model Context Protocol) tool calls
Python★ 3↓ 1 768/міс21 жовт. 2026 р.
Apache-2.021 жовт. 2026 р. · метрики 2.10.0
PyPI · npm
80Відміннийіндекс здоров'я
ShekharBhardwaj/AgenticLedger
Local-first flight recorder for AI agents: every LLM call, tool call, cost, and loop captured by a transparent proxy. Zero code changes.
Python · TypeScript★ 5↓ 4 061/міс23 серп. 2026 р.
MIT23 серп. 2026 р. · метрики 2.10.0
PyPI · npm
80Відміннийіндекс здоров'я
alizahidraja/isnad
Grade every agent, scraper and model in a claim's chain — provenance, trust scoring and audit evidence for LLM pipelines
Python★ 53↓ 2 089/міс21 жовт. 2026 р.
Apache-2.021 жовт. 2026 р. · метрики 2.10.0
PyPI · npm
78Добрийіндекс здоров'я
FiredMosquito831/my-claude-code
My Claude Code (MCC) is a local multi-provider LLM proxy, model router and control plane for Claude Code, Codex, OpenCode, Gemini CLI and other AI coding agents — 57 providers, fallback routing, credential health, a native web-search tool proxy, and exhaustive analytics with cost provenance in one local dashboard.
Python★ 9↓ 2 672/міс25 вер. 2026 р.
Власна ліцензія25 вер. 2026 р. · метрики 2.10.0
npm · PyPI
78Добрийіндекс здоров'я
dunetrace/dunetrace
The runtime reliability layer for AI agents.
Python★ 64↓ 250/міс9 вер. 2026 р.
Власна ліцензія9 вер. 2026 р. · метрики 2.10.0
npm · PyPI · Go
78Добрийіндекс здоров'я
memoturn/memoturn
Open-source AI engineering platform — LLM observability, evals, metrics, prompt management, playground, and datasets. OpenTelemetry-native, self-hostable. Because "it worked when I tried it" is not an eval.
TypeScript★ 1↓ 646/міс3 жовт. 2026 р.
Apache-2.03 жовт. 2026 р. · метрики 2.10.0
npm · PyPI · Go
75Добрийіндекс здоров'я
superbasedapp/observer
Local-first control plane for AI coding agents — launch browser terminals, run and remotely control sessions, and track files, tokens & cost across Claude Code, Codex, Cursor, Gemini CLI and 20+ more. 100% local, no telemetry.
Go · TypeScript★ 44↓ 5 136/міс11 вер. 2026 р.
Власна ліцензія11 вер. 2026 р. · метрики 2.10.0
PyPI
73Добрийіндекс здоров'я
Secure-Vector/securevector-ai-threat-monitor
Security & Observability for AI Agents — audit every tool call, enforce allow/block policies, catch prompt injection and data leaks. Local-first; works with Claude Code, Codex, Copilot CLI, OpenClaw, LangChain, and all major LLM APIs.
Python · JavaScript★ 149 вер. 2026 р.
Власна ліцензія9 вер. 2026 р. · метрики 2.10.0
PyPI
73Добрийіндекс здоров'я
phierceweb/pf-core
Python foundation for LLM apps whose prompts and spend you can actually see — versioned prompts, every call recorded and replayable, budgets, evals, jobs.
Python★ 2↓ 1 160/міс5 вер. 2026 р.
MIT5 вер. 2026 р. · метрики 2.10.0
npm
71Добрийіндекс здоров'я
cendorhq/cendor-sdk-js
A governed agent SDK for TypeScript - cost budgets, tamper-evident audit, and PII redaction built into the loop.
TypeScript★ 0↓ 320/міс21 жовт. 2026 р.
Apache-2.021 жовт. 2026 р. · метрики 2.10.0
Go
69Добрийіндекс здоров'я
FullFran/claudeops-tui
Local TUI to track Claude Code usage, costs, and tasks (Go + Bubbletea + SQLite)
Go★ 215 вер. 2026 р.
MIT15 вер. 2026 р. · метрики 2.10.0
npm
69Добрийіндекс здоров'я
productdevbook/nitroping-sdk
TypeScript SDK for the NitroPing audit log — batching client, error capture, Hono/Express/Nitro adapters, and GenAI cost tracing.
TypeScript★ 24↓ 553/міс11 вер. 2026 р.
MIT11 вер. 2026 р. · метрики 2.10.0
Go
62Помірнийіндекс здоров'я
fgn/go-langfuse
Langfuse client for Go, built on OpenTelemetry
Go★ 013 вер. 2026 р.
Apache-2.013 вер. 2026 р. · метрики 2.10.0
npm
62Помірнийіндекс здоров'я
inferock/inferock-bench
Local LLM cost-tracking proxy for OpenAI, Anthropic, Gemini, and pinned OpenRouter calls with token usage, failure, and billing-integrity receipts.
TypeScript★ 141↓ 4 462/міс14 вер. 2026 р.
Власна ліцензія14 вер. 2026 р. · метрики 2.10.0
npm
60Помірнийіндекс здоров'я
Medhovarsh/forkmind
🧠 Local-first LLM state branching & debugging. Capture, visualize, branch, and regression-test LLM calls as a DAG. Free & local via Ollama, any OpenAI-compatible API, MCP for agents. Zero config.
JavaScript★ 3↓ 717/міс13 вер. 2026 р.
MIT13 вер. 2026 р. · метрики 2.10.0
npm
60Помірнийіндекс здоров'я
TaewoooPark/Agent-Blackbox
Local-first flight recorder for coding agents : replay every run as a live session map, score the context bill, and write the fix back into AGENTS.md — no API key, one npx command.
TypeScript★ 74↓ 130/міс12 вер. 2026 р.
MIT12 вер. 2026 р. · метрики 2.10.0
PyPI · npm
51Помірнийіндекс здоров'я
aetna000/atflows
AtFlows is a local observability tool for LLM applications. Point your SDK at it, see your costs, tokens, and latency in real-time.
JavaScript · TypeScript · Svelte★ 225 вер. 2026 р.
Apache-2.025 вер. 2026 р. · метрики 2.10.0