全部标签
目录标签

#llm-observability

公开记录中带有此标签的全部仓库——标签来自其 GitHub 主题或软件包注册表发布的关键词。健康度量遵循与记录其余部分相同的版本化方法论。

20 条记录
标签为“llm-observability”按健康指数排序
PyPI · npm
99卓越健康指数
pydantic/logfire
AI observability platform for production LLM and agent systems.
Python★ 4,442↓ 14.6M/月2026年8月27日
MIT2026年8月27日 · 指标 2.10.0
Go · npm
97卓越健康指数
maximhq/bifrost
Fastest enterprise AI gateway (50x faster than LiteLLM) with adaptive load balancer, cluster mode, guardrails, 1000+ models support & <100 µs overhead at 5k RPS.
Go · TypeScript★ 7,6082026年8月28日
Apache-2.02026年8月28日 · 指标 2.10.0
npm · PyPI
96卓越健康指数
comet-ml/opik
Debug, evaluate, and monitor your LLM applications, RAG systems, and agentic workflows with comprehensive tracing, automated evaluations, and production-ready dashboards.
Python · TypeScript★ 21.1K↓ 111.9K/月2026年8月5日
Apache-2.02026年8月5日 · 指标 2.10.0
npm
94卓越健康指数
langfuse/langfuse
🪢 Open source AI engineering platform: LLM evals, observability, metrics, prompt management, playground, datasets. Integrates with OpenTelemetry, LangChain, OpenAI SDK, LiteLLM, and more. 🍊YC W23
TypeScript★ 32.5K2026年8月5日
自定义许可证2026年8月5日 · 指标 2.10.0
npm
93卓越健康指数
latitude-dev/latitude-llm
Latitude is the open-source AI monitoring platform.
TypeScript · Python★ 4,6042026年8月28日
MIT2026年8月28日 · 指标 2.10.0
PyPI
92优秀健康指数
JudgmentLabs/judgeval
The Continuous-Improvement Stack for Agents. Our environment data and evals power agent improvement and monitoring.
Python★ 1,057↓ 233.1K/月2026年8月13日
Apache-2.02026年8月13日 · 指标 2.10.0
PyPI · npm
81优秀健康指数
douglasmonsky/codex-usage-tracker
Local-first MCP tools and dashboard for investigating Codex token usage, credits, costs, caching, and thread patterns.
Python · TypeScript★ 187↓ 5,494/月2026年7月25日
MIT2026年7月25日 · 指标 2.10.0
PyPI
80优秀健康指数
Mandark-droid/genai_otel_instrument
GenAI OpenTelemetry Auto-Instrumentation Library A comprehensive wrapper for automatic instrumentation of LLM/GenAI applications Supports all major LLM providers and MCP (Model Context Protocol) tool calls
Python★ 3↓ 4,343/月2026年9月5日
Apache-2.02026年9月5日 · 指标 2.10.0
PyPI · npm
80优秀健康指数
ShekharBhardwaj/AgenticLedger
Local-first flight recorder for AI agents: every LLM call, tool call, cost, and loop captured by a transparent proxy. Zero code changes.
Python · TypeScript★ 5↓ 4,061/月2026年8月23日
MIT2026年8月23日 · 指标 2.10.0
Go
80优秀健康指数
nudgebee/node-agent
Per-node observability agent for Kubernetes and Linux hosts. Gathers container and host metrics, logs, and L7 traffic via eBPF; exports to Prometheus and OpenTelemetry. Includes LLM API observability.
Go★ 02026年7月22日
Apache-2.02026年7月22日 · 指标 2.10.0
PyPI
77良好健康指数
alizahidraja/isnad
Grade every agent, scraper and model in a claim's chain — provenance, trust scoring and audit evidence for LLM pipelines
Python★ 37↓ 4,204/月2026年8月29日
Apache-2.02026年8月29日 · 指标 2.10.0
PyPI
73良好健康指数
phierceweb/pf-core
Python foundation for LLM apps whose prompts and spend you can actually see — versioned prompts, every call recorded and replayable, budgets, evals, jobs.
Python★ 2↓ 1,160/月2026年9月5日
MIT2026年9月5日 · 指标 2.10.0
npm
71良好健康指数
cendorhq/cendor-sdk-js
A governed agent SDK for TypeScript - cost budgets, tamper-evident audit, and PII redaction built into the loop.
TypeScript★ 0↓ 1,684/月2026年8月29日
Apache-2.02026年8月29日 · 指标 2.10.0
PyPI
65良好健康指数
dunetrace/dunetrace
Real-time monitoring of production AI agents.
Python★ 572026年7月16日
自定义许可证2026年7月16日 · 指标 2.10.0
Go
63中等健康指数
fgn/go-langfuse
Langfuse client for Go, built on OpenTelemetry
Go★ 02026年7月22日
Apache-2.02026年7月22日 · 指标 2.10.0
npm
62中等健康指数
Medhovarsh/forkmind
🧠 Local-first LLM state branching & debugging. Capture, visualize, branch, and regression-test LLM calls as a DAG. Free & local via Ollama, any OpenAI-compatible API, MCP for agents. Zero config.
JavaScript★ 2↓ 2,178/月2026年7月24日
MIT2026年7月24日 · 指标 2.10.0
npm
59中等健康指数
TaewoooPark/Agent-Blackbox
Local-first flight recorder for coding agents : replay every run as a live session map, score the context bill, and write the fix back into AGENTS.md — no API key, one npx command.
TypeScript★ 57↓ 3,988/月2026年7月21日
MIT2026年7月21日 · 指标 2.10.0
Go · npm
56中等健康指数
marmutapp/superbased-observer
Local-first cost & token tracking for Claude Code, Cursor, Codex & 23 more AI coding agents — proxy-accurate per-model spend, an MCP server your agent can query, and an opt-in team rollup. 100% local, no telemetry.
Go · TypeScript★ 312026年7月19日
自定义许可证2026年7月19日 · 指标 2.10.0
npm
54中等健康指数
inferock/inferock-bench
Local LLM cost-tracking proxy for OpenAI, Anthropic, Gemini, and pinned OpenRouter calls with token usage, failure, and billing-integrity receipts.
TypeScript★ 123↓ 6,119/月2026年7月29日
自定义许可证2026年7月29日 · 指标 2.10.0
npm
50中等健康指数
PunkTechnologies/punk-sdk
Public TypeScript SDK and integration examples for Punk, the adaptive runtime for production AI agents.
TypeScript★ 1↓ 4,631/月2026年9月3日
Apache-2.02026年9月3日 · 指标 2.10.0