ElevenLabs Realtime propose des modèles parole-à-parole de bout en bout, v1 Mini et v1 Max, qui associent reconnaissance vocale, gestion des tours de parole et synthèse vocale à une API WebSocket compatible avec OpenAI.
Fonction du produit et positionnement officiel
ElevenLabs Realtime est une suite de modèles parole-à-parole conçue pour les agents vocaux conversationnels interactifs. Son architecture unifie la reconnaissance vocale, la logique de gestion des tours de parole, le traitement par modèle de langage et la synthèse vocale au sein d'un système de bout en bout conçu pour préserver le rythme conversationnel malgré les interruptions.
Le système est disponible selon deux configurations de modèle : v1 Mini, destiné aux interactions expressives et fluides, et v1 Max, destiné au raisonnement structuré et à l'exécution automatisée d'outils. Les utilisateurs peuvent déployer ces modèles dans l'environnement sans code ElevenAgents ou via une API WebSocket compatible avec les gestionnaires Realtime d'OpenAI.
Cas d’usage étayés par les sources officielles
v1 Mini prend en charge les personnages interactifs, les assistants vocaux et les tuteurs de langues ou de matières nécessitant un rythme de dialogue naturel et une expression vocale.
v1 Max traite les demandes complexes, la planification automatisée et les dialogues de qualification tout en maintenant le flux conversationnel et en appelant des outils externes.
Le parcours documenté, lorsqu’il est disponible
Initialisez un nouvel agent dans l'interface ElevenAgents ou configurez une connexion de session à l'aide de l'API Realtime.
Choisissez le modèle v1 Mini pour le flux conversationnel ou le modèle v1 Max pour le raisonnement et l'appel d'outils.
Sélectionnez une voix parmi plus de 17 500 options et configurez les paramètres linguistiques dans l'ensemble pris en charge de plus de 90 langues et accents.
Participez à des conversations vocales en direct via des canaux WebSocket et surveillez les journaux d'interactions auditables dans le tableau de bord de gestion.
ElevenLabs Realtime intègre la reconnaissance vocale, la gestion des tours de parole, la compréhension du langage et la génération vocale dans un pipeline unique de bout en bout. Cette configuration évite d'enchaîner des services externes distincts pour la transcription, l'inférence et la synthèse vocale, permettant aux agents de répondre naturellement aux interventions rapides dans une conversation.
Les développeurs peuvent accéder au système via ElevenAgents ou par programmation au moyen de connexions WebSocket utilisant l'API Realtime. Comme l'API correspond au protocole Realtime et aux événements client d'OpenAI, les gestionnaires client, outils de journalisation et configurations de SDK existants peuvent être transférés en modifiant le point de terminaison de destination et la chaîne du modèle.
Vérifications à effectuer avec vos contenus et votre flux de travail
Sources vérifiées et date de la vérification
Réponses fondées sur la fiche produit dont les sources ont été vérifiées
Eleven Realtime est une famille de modèles parole-à-parole de bout en bout qui associe reconnaissance vocale, gestion des tours de parole, modélisation du langage et synthèse vocale dans un système conversationnel unique.
v1 Mini est optimisé pour les dialogues expressifs et un rythme de conversation naturel, tandis que v1 Max est conçu pour les tâches complexes, le raisonnement et l'appel d'outils pendant les interactions professionnelles.
Eleven Realtime fournit une API compatible avec OpenAI qui partage les mêmes événements client et serveur, permettant aux développeurs de changer le point de terminaison et le nom du modèle tout en conservant leurs gestionnaires et outils existants.
La plateforme donne accès à plus de 17 500 voix couvrant plusieurs styles et prend en charge les conversations vocales en temps réel dans plus de 90 langues et accents régionaux.
La plateforme chiffre les données en transit et au repos, prend en charge les conformités SOC 2 Type II, ISO 27001, ISO 42001, HIPAA, PCI DSS de niveau 1 et RGPD, et propose des options de résidence des données dans l'UE et de rétention nulle.
