Direction de script et contrôle acoustique
Eleven v4 introduit des commandes au niveau du script permettant aux créateurs de diriger le ton émotionnel et d'insérer des éléments audio environnementaux directement dans le texte. Les utilisateurs peuvent placer des balises telles que des chuchotements, des rires ou des effets sonores physiques au sein des dialogues, que le modèle interprète de manière contextuelle.
Afin de préserver la cohérence au sein des productions complexes, le raccord contextuel maintient l'élocution et le rythme de l'orateur sur des scripts étendus, tandis que la régénération vocale garantit la stabilité de la voix sans dérive entre les prises.
- Balises de direction intégrées au script pour une élocution expressive et des effets sonores intégrés
- Raccord contextuel conçu pour réduire les coupures audibles sur les contenus audio longs
- Régénération vocale conçue pour préserver la stabilité de l'orateur à travers plusieurs tentatives
- Prise en charge d'un dictionnaire de prononciation utilisant des définitions phonétiques et de l'API pour les termes techniques et les noms
Streaming en temps réel avec Eleven v4 Turbo
Eleven v4 Turbo est conçu pour les systèmes conversationnels interactifs, fonctionnant avec une latence d'inférence médiane rapportée d'environ 100 millisecondes et un délai médian avant la première parole d'environ 150 millisecondes.
Le modèle prend en charge le streaming bidirectionnel, ce qui permet de soumettre du texte généré progressivement par un grand modèle de langage externe pendant que l'audio est diffusé avant même que la phrase complète ne soit finalisée.
- Latence d'inférence médiane d'environ 100 ms et délai avant la première parole d'environ 150 ms
- Streaming bidirectionnel pour une intégration directe dans les boucles d'agents conversationnels
- Compatibilité avec le clonage vocal professionnel pour préserver les voix de marque à travers les répliques
- Prise en charge multilingue avec accents natifs dans des langues comme le japonais, l'espagnol et le portugais