telemetry.dev — это платформа наблюдаемости для ИИ-агентов на базе OpenTelemetry, обеспечивающая сквозную трассировку вызовов моделей, инструментов и MCP-серверов.
Назначение продукта и его официальное позиционирование
telemetry.dev обеспечивает наблюдаемость и мониторинг производительности для приложений на базе ИИ и автономных агентов. Построенная на стандартах OpenTelemetry система объединяет вызовы моделей, события извлечения данных и выполнение инструментов в единые трейсы, позволяя инженерным командам оценивать ход выполнения, выявлять тайм-ауты инструментов и диагностировать сбои в работе.
Платформа отслеживает потребление токенов, показатели задержки и метрики затрат с детализацией по поставщикам моделей, сессиям, фреймворкам и пользователям. Помимо визуализации трейсов, telemetry.dev включает оповещения по электронной почте о превышении бюджета и зацикливании агентов, средства контроля захвата промптов на уровне окружений и MCP-сервер только для чтения для автоматического анализа телеметрии.
Сценарии, подтверждённые официальными источниками
Команды разработчиков трассируют сложные рабочие процессы агентов, включающие многоэтапные ответы моделей и выполнение инструментов, для выявления узких мест в задержке и обнаружения неудачных вызовов.
Разработчики анализируют количество спанов, частоту сбоев и задержку p95 для инструментов MCP на клиентских и серверных интерфейсах для поддержания надежности инструментов.
Технические руководители отслеживают объемы токенов во входных, кэшированных и выходных данных для оценки затрат на модели различных провайдеров и пользователей.
Описанный в документации процесс, если он доступен
Определите фреймворк приложения, провайдеров моделей и среду выполнения с помощью промпта для ИИ-агента разработки или официального руководства по настройке.
Установите подходящий SDK для TypeScript или Python, пакет для конкретного фреймворка или настройте существующий экспортер OpenTelemetry OTLP/HTTP.
Сконфигурируйте API-ключ проекта и необходимые параметры конечной точки телеметрии в целевом окружении.
Выполняйте запросы к ИИ для передачи спанов, журналов и метрик напрямую в панель управления телеметрией.
telemetry.dev моделирует выполнение приложений генеративного ИИ, группируя отдельные операции в структурированные трейсы. Каждый трейс фиксирует сквозной путь выполнения агента или запроса, сопоставляя отдельные промпты моделей, сгенерированные ответы, шаги извлечения данных и вызовы инструментов. Подробные метаданные показывают длительность каждого шага, количество токенов для кэшированных и некэшированных входных данных, а также состояния ошибок, что помогает инженерам выявлять задержки и сбои интеграций.
Платформа предоставляет специализированную наблюдаемость для систем Model Context Protocol. Она отслеживает выполнение инструментов как с клиентской, так и с серверной стороны, агрегируя такие метрики, как количество спанов, задержка p95 и процент сбоев по методам инструментов. Кроме того, telemetry.dev предоставляет конечную точку MCP-сервера только для чтения, позволяя внешним агентам для разработки или анализа программно исследовать трейсы и отчеты об ошибках.
Проверки на собственных материалах и рабочих процессах
Какие источники и когда были проверены
Ответы на основе карточки продукта с проверенными источниками
telemetry.dev — это платформа наблюдаемости для ИИ-приложений и агентов на базе OpenTelemetry, которая отслеживает вызовы моделей, выполнение инструментов, операции извлечения данных, задержки, ошибки и затраты на токены.
Приложения могут передавать трейсы с помощью официальных SDK для TypeScript и Python, пакетов интеграции для OpenAI и Vercel AI SDK или любого экспортера с поддержкой OTLP/HTTP.
Да, захват промптов можно отключить для отдельных окружений перед сохранением данных, что предотвращает запись содержимого промптов и сгенерированных ответов.
Платформа отправляет уведомления по электронной почте при достижении лимитов бюджета, бесконечных циклах агентов, аномалиях расходов и операционных ошибках моделей или инструментов.
telemetry.dev отслеживает спаны инструментов MCP, частоту сбоев и задержку p95, а также предлагает MCP-сервер только для чтения, позволяющий ИИ-агентам запрашивать данные телеметрии.
