Tavus è un’azienda di ricerca sull’IA generativa per il video che consente agli sviluppatori di creare esperienze video con gemelli digitali tramite API facili da usare. Sta rivoluzionando il modo in cui interagiamo con l’IA creando la Conversational Video Interface, o CVI, più veloce al mondo per i gemelli digitali IA. La sua tecnologia permette conversazioni coinvolgenti in tempo reale con repliche IA, aprendo nuove possibilità nell’automazione del marketing, nell’e-commerce, nella formazione aziendale, nelle relazioni con i clienti e nell’intrattenimento.
Quando Cartesia ha incontrato i fondatori di Tavus, stavano già spingendo i limiti delle prestazioni IA. Tavus aveva incontrato difficoltà con la scalabilità automatica e i ritardi di rete nella configurazione esistente.
La collaborazione con Cartesia ha cambiato la situazione. Il modello Sonic, con la sua latenza costantemente inferiore a 90 ms, ha permesso a Tavus di semplificare l’infrastruttura rispettando requisiti di prestazione rigorosi. Gli utenti hanno apprezzato la qualità e alcuni hanno chiesto espressamente Cartesia come motore di sintesi vocale preferito.
Leggi qui l’annuncio del CEO Hassaan. Gli sviluppatori possono integrare facilmente la tecnologia di Tavus usando la sua documentazione API completa.
La sfida
Tavus voleva costruire una piattaforma capace di offrire conversazioni video naturali in tempo reale con gemelli digitali IA. Questo obiettivo ambizioso richiedeva di superare diverse sfide tecniche:
- Raggiungere una latenza ultrabassa per interazioni fluide
- Generare in tempo reale voci naturali di alta qualità
- Creare repliche IA convincenti, capaci di vedere, ascoltare e rispondere in modo naturale
- Sviluppare un sistema scalabile per gestire più utenti simultanei
La soluzione
Tavus ha scelto il modello Sonic di Cartesia come base del proprio sistema di generazione vocale. Le capacità dei modelli a spazio di stato di Sonic rispondevano perfettamente all’esigenza di generare voci di alta qualità a bassa latenza:
- Latenza ultrabassa: la latenza inferiore a 90 ms di Sonic permette a Tavus di raggiungere tempi di risposta complessivi inferiori a 1 secondo, creando esperienze realmente conversazionali.
- Qualità vocale naturale: la generazione vocale avanzata di Sonic produce un parlato realistico, essenziale per creare gemelli digitali IA convincenti.
- Progettazione e clonazione vocale: le funzionalità di clonazione istantanea e progettazione vocale di Sonic consentono a Tavus di creare una voce unica per ogni replica IA, aumentando la personalizzazione della piattaforma.
- Supporto multilingue: grazie al supporto di più lingue, Sonic permette a Tavus di espandere la piattaforma a livello globale.
- Scalabilità: l’infrastruttura di Cartesia soddisfa facilmente l’esigenza di Tavus di gestire più utenti simultanei, garantendo prestazioni fluide durante i picchi di utilizzo.
I risultati
Integrando il modello Sonic di Cartesia, Tavus ha ottenuto risultati notevoli:
- Latenza inferiore a 1 secondo: la CVI funziona ora con una latenza complessiva inferiore a 1 secondo, creando un flusso di conversazione naturale.
- Maggiore realismo: gli utenti riferiscono che le conversazioni con i gemelli digitali IA risultano incredibilmente realistiche e coinvolgenti.
- Più casi d’uso: Tavus ha distribuito con successo la propria tecnologia in diversi settori, tra cui istruzione, formazione aziendale e intrattenimento.
- Scalabilità: la piattaforma gestisce senza difficoltà più utenti simultanei, aprendo la strada a un’adozione diffusa.
Tavus continua a spingere i confini dell’interazione con l’IA e prevede di estendere la tecnologia CVI a nuovi mercati e casi d’uso.
Il modello Sonic di Cartesia ha cambiato le regole del gioco per la nostra Conversational Video Interface. La sua latenza ultrabassa di 90 ms e la generazione vocale di alta qualità ci hanno permesso di creare conversazioni in tempo reale davvero coinvolgenti con gemelli digitali IA. Le voci naturali e le capacità di progettazione vocale hanno portato il nostro prodotto a un nuovo livello.
Quello che Tavus sta facendo nell’interazione tra IA e persone è sorprendente. Il suo team ha un talento straordinario nel superare i limiti e siamo entusiasti di alimentare la sua Conversational Video Interface con Sonic. Vedere i gemelli digitali partecipare a conversazioni naturali in tempo reale sembra un passo nel futuro. È un percorso entusiasmante e siamo onorati di farne parte.