Jockey by TwelveLabs
Jockey от TwelveLabs — это уровень ИИ-агентов для понимания видео, который индексирует, ищет, систематизирует и редактирует медиатеки с помощью диалоговых интерфейсов и API для разработчиков.
Jockey от TwelveLabs — это уровень ИИ-агентов для понимания видео, который индексирует, ищет, систематизирует и редактирует медиатеки с помощью диалоговых интерфейсов и API для разработчиков.
Назначение продукта и его официальное позиционирование
Jockey от TwelveLabs выступает в роли агентного уровня, предназначенного для смыслового анализа медиаданных и оркестрации рабочих процессов в библиотеках видео и изображений. Работая поверх модели индексирования Marengo и модели понимания естественного языка Pegasus, он семантически интерпретирует видеоряд, устраняя необходимость в ручной расстановке тегов, организации папок или традиционных схемах именования файлов.
Инструмент позволяет пользователям находить точные цитаты или визуальные моменты с помощью естественного языка, автоматически организовывать контент в коллекции по темам или персонажам и монтировать новые ролики с прямым экспортом в файлы MP4. Разработчики также могут взаимодействовать с системой через API и SDK для извлечения структурированных метаданных JSON с покадрово точными временными метками.
Сценарии, подтверждённые официальными источниками
Видеомонтажеры и создатели контента выполняют поиск по обширным медиакаталогам с помощью описательных фраз, чтобы находить реплики или сцены и быстро формировать черновые нарезки лучших моментов.
Маркетинговые команды классифицируют архивы рекламных роликов по формату, авторам и хукам, чтобы оценивать удержание аудитории на первых секундах и фиксировать появление действующих лиц или логотипов.
Разработчики приложений задают схемы JSON через API для загрузки видеофайлов и получения покадрово точных структурированных данных с временными метками для диплинкинга при воспроизведении.
Описанный в документации процесс, если он доступен
Подключите Jockey через поддерживаемые интеграции, такие как Claude, ChatGPT, либо через REST API и SDK TwelveLabs.
Загружайте видео и фотографии напрямую или передавайте публичные ссылки, указывающие на целевые медиаматериалы.
Отправляйте запросы на естественном языке для поиска нужных фрагментов, систематизации коллекций или передачи команд агенту на монтаж и экспорт медиа.
Jockey функционирует как операционный агентный слой, координирующий базовые видеомодели TwelveLabs. В то время как модель Marengo формирует единые мультимодальные эмбеддинги для видео, аудио, изображений и текста, а Pegasus интерпретирует сюжетную линию и контекст, Jockey берет на себя выполнение высокоуровневых задач по запросам пользователей.
Вместо пассивного поиска агент обеспечивает полный цикл работы с медиа. Пользователи могут поручить ему отобрать подходящие кадры, выстроить фрагменты в хронологическом или тематическом порядке, выполнить обрезку с покадровой точностью и срендерить готовую нарезку в формате MP4.
Проверки на собственных материалах и рабочих процессах
Какие источники и когда были проверены
Ответы на основе карточки продукта с проверенными источниками
Jockey поддерживает видеофайлы форматов MP4, MOV, AVI, MKV и WebM, а также файлы изображений JPEG, PNG, HEIC, HEIF, WebP, BMP и GIF.
Jockey не применяет классическое распознавание лиц и не создает биометрических баз данных; группировка людей по медиаматериалам выполняется на основе мультимодальных визуальных, динамических и контекстных признаков.
Запуск процедуры удаления через настройки учетной записи безвозвратно стирает оригинальные файлы, сгенерированные индексы, связанные метаданные и зафиксированную историю использования.
Jockey функционирует как уровень оркестрации поверх моделей TwelveLabs: Marengo, отвечающей за смысловое индексирование медиа, и Pegasus, выполняющей понимание видео на естественном языке.
Пользователи могут взаимодействовать с Jockey напрямую внутри сред Claude и ChatGPT либо создавать собственные интеграции с использованием API и SDK TwelveLabs.