Googles Durchbruch in der Sprachsynthese ermöglicht Kommunikation für alle

Hochwertige Sprachsynthese aus kurzen Proben

Die Forscher integrierten ihr Stimmenübertragungsmodul in ein Text-zu-Sprache-System und demonstrierten dessen Wirksamkeit bei der Wiederherstellung von Stimmen für Sprecher, die ihre typische Sprache vor der Verschlechterung aufgezeichnet hatten. Bemerkenswerterweise produzierte das Modell qualitativ hochwertige Sprache mit starker Stimmtreue, selbst bei atypischen Eingabeproben. Das Modul nimmt ein 2- bis 14-Sekunden-Spektrogramm und extrahiert akustisch-phonetische und prosodische Stimmmerkmale. Diese werden an andere Schichten als Einbettungsvektor weitergegeben.

Fallstudien und praktische Anwendungen

In einer Fallstudie stellte der taube Google-Forscher Dimitri Kanevsky 12 Sekunden seiner atypischen Stimme als Referenz zur Verfügung. Das Modell synthetisierte ein Transkript von Kanevskys ursprünglichem Video. Kollegen bewerteten die Ähnlichkeit der Ausgangsstimme mit seiner eigenen im Durchschnitt mit 8,1 von 10 Punkten. Eine weitere Studie konzentrierte sich auf Aubrie Lee, eine Google-Mitarbeiterin mit Muskeldystrophie, die nie eine typische Stimme hatte. Mit 14 Sekunden von Lees atypischer Referenzstimme synthetisierte das Modell das Transkript ihres Videos. Lee selbst bewertete die Ähnlichkeit mit 8 von 10 Punkten.

Multilinguale Fähigkeiten und globale Reichweite

Die Forscher zeigten auch die Fähigkeit des Modells, Stimmen in andere Sprachen, einschließlich Französisch, Spanisch, Italienisch, Arabisch, Deutsch, Russisch, Hindi und Norwegisch, zu übersetzen. Audiodateien sind auf der GitHub-Seite des Projekts verfügbar.

Adressierung potenziellen Missbrauchs und zukünftige Verfügbarkeit

Um Missbrauch zu verhindern, verwendet Google sein SynthID-Wasserzeichensystem. Dieses bettet nicht wahrnehmbare Informationen in die synthetisierte Audiodatei ein, wodurch die Identifizierung potenziell manipulierter Inhalte ermöglicht wird. Google merkt an, dass das Missbrauchsrisiko für Menschen, die nie eine typische Sprache hatten, geringer ist, da die synthetische Natur der Ausgabe offensichtlich wäre. Vor kurzem verzögerte Microsoft die Veröffentlichung eines ähnlichen leistungsstarken Sprachsynthesemodells aufgrund des Mangels an einem zuverlässigen Kennzeichnungssystem. Google hat noch keine Pläne angekündigt, ihr neues System öffentlich zu veröffentlichen.

Schlussfolgerung

Die Entwicklung des Null-Schuss-Stimmenübertragungsmoduls von Google für Text-zu-Sprache-Systeme stellt einen bedeutenden Fortschritt im Bereich der Sprachsynthese dar. Diese Technologie hat das Potenzial, die Lebensqualität von Menschen mit Sprachstörungen erheblich zu verbessern, indem sie ihnen eine Stimme gibt, die sie verloren haben oder nie hatten. Die schnelle und qualitativ hochwertige Produktion von synthetischer Sprache aus kurzen Audio-Referenzproben zeigt die Effektivität und Vielseitigkeit dieses neuen Ansatzes.

Bibliografie

1. https://the-decoder.com/google-gives-people-back-the-voice-they-never-had/
2. https://support.google.com/voice/answer/159519?hl=en
3. https://support.google.com/voice/thread/183992776/google-voice-number-taken?hl=en
4. https://www.reddit.com/r/Googlevoice/comments/113l17r/google_voice_suspended_no_remedy/
5. https://www.vrt.be/vrtnws/en/2019/07/10/google-employees-are-eavesdropping-even-in-flemish-living-rooms/
6. https://www.mass.gov/news/google-voice-scams
7. https://www.reconciliation.org.au/reconciliation/support-a-voice-to-parliament/
8. https://allaboutcookies.org/google-voice-scams
9. https://www.youtube.com/watch?v=pDhukTKM1ac
10. https://www.googlenestcommunity.com/t5/Home-Automation/Broadcast-messages-are-no-longer-longer-voice-messages/m-p/493619