Nvidia präsentiert Fugatto: Ein neues KI-Modell für die Audiobearbeitung

Nvidias Fugatto: Ein KI-Modell für die Audiowelt von Morgen

Der Grafikkartenhersteller Nvidia hat mit Fugatto ein neues KI-Modell vorgestellt, das die Welt der Audiobearbeitung und -synthese revolutionieren könnte. Fugatto, kurz für "Foundational Generative Audio Transformer Opus 1", ist ein generatives KI-Modell, das mithilfe von Textbefehlen (Prompts) oder Audio-Eingaben eine Vielzahl von Audioinhalten erstellen und manipulieren kann. Die Technologie wurde mit öffentlich verfügbaren, unter Open-Source-Lizenzen stehenden Daten trainiert.

Die Möglichkeiten von Fugatto scheinen vielfältig: Von der Erzeugung von realistischen Soundeffekten wie dem Vorbeifahren eines Zuges bis hin zur Transformation von Klaviermusik in Gesang reicht das Spektrum. Das KI-Modell kann auch bestehende Audioaufnahmen modifizieren, beispielsweise um den Akzent oder die Stimmung einer Stimme zu verändern oder Instrumente zu einem Musikstück hinzuzufügen. Sogar das Isolieren einzelner Stimmen aus einem Song und das Generieren neuer Stimmen, die vorgegebene Texte sprechen, soll möglich sein. Nvidia sieht Anwendungsgebiete in der Musikproduktion, der Entwicklung von Videospielen und für kreative Projekte von Privatnutzern.

Die Technologie hinter Fugatto

Fugatto basiert auf einem Transformer-Modell, einer Architektur, die sich in der Verarbeitung natürlicher Sprache bewährt hat und nun für Audiodaten adaptiert wurde. Das Modell wurde mit einem umfangreichen Datensatz trainiert, um komplexe Audiomuster zu erlernen und auf unterschiedliche Eingaben reagieren zu können. Die Steuerung erfolgt über Textprompts oder durch die Eingabe von Audiodateien, die als Vorlage für die gewünschten Modifikationen dienen.

Potenziale und Risiken

Nvidias Fugatto eröffnet neue Möglichkeiten für die kreative Arbeit mit Audio. Musiker könnten mit dem KI-Modell schnell Songideen ausprobieren und verschiedene Arrangements testen. In der Werbebranche könnten Voiceovers mit unterschiedlichen Akzenten und Stimmungen generiert werden, um Werbekampagnen zielgruppenspezifisch anzupassen. Spieleentwickler könnten dynamische Soundtracks erstellen, die sich an die Handlung im Spiel anpassen.

Gleichzeitig wirft die Technologie Fragen nach möglichen Missbrauchsszenarien auf. Die Fähigkeit, Stimmen zu verändern und Texte generieren zu lassen, birgt das Risiko von Deepfakes und Manipulationen. Nvidia ist sich dieser Risiken bewusst und diskutiert intern noch über die Veröffentlichung der Technologie. Derzeit gibt es keine konkreten Pläne, Fugatto öffentlich zugänglich zu machen.

Fugatto im Kontext der KI-Entwicklung

Fugatto ist ein weiteres Beispiel für den rasanten Fortschritt im Bereich der generativen KI. Ähnliche Audio-KI-Modelle werden auch von anderen Unternehmen wie Runway, Meta und OpenAI entwickelt. Der Fokus von Fugatto auf die Transformation bestehender Audioaufnahmen stellt jedoch ein Unterscheidungsmerkmal dar. Die zukünftige Entwicklung und der mögliche Einfluss von Fugatto auf die Audiobranche bleiben abzuwarten.

Bibliographie: - t3n: Fugatto: Nvidia stellt neues Audio-KI-Modell vor. [https://t3n.de/news/fugatto-nvidia-stellt-neues-audio-ki-modell-vor-1659959/](https://t3n.de/news/fugatto-nvidia-stellt-neues-audio-ki-modell-vor-1659959/) - Stadt Bremerhaven: NVIDIA stellt Fugatto vor: Generatives KI-Modell für Audio jeglicher Spielarten. [https://stadt-bremerhaven.de/nvidia-stellt-fugatto-vor-generatives-ki-modell-fuer-audio-jeglicher-spielarten/](https://stadt-bremerhaven.de/nvidia-stellt-fugatto-vor-generatives-ki-modell-fuer-audio-jeglicher-spielarten/) - Klamm: Nvidia stellt revolutionäres KI-Modell ‚Fugatto‘ vor. [https://www.klamm.de/news/nvidia-stellt-revolutionaeres-ki-modell-fugatto-vor-67N20241125213955.html](https://www.klamm.de/news/nvidia-stellt-revolutionaeres-ki-modell-fugatto-vor-67N20241125213955.html) - Cryptopolitan: Nvidia AI-Tool zum Erstellen von Musik und Bearbeiten von Stimmen. [https://www.cryptopolitan.com/de/nvidia-ai-tool-zum-erstellen-von-musik-und-bearbeiten-von-stimmen/](https://www.cryptopolitan.com/de/nvidia-ai-tool-zum-erstellen-von-musik-und-bearbeiten-von-stimmen/) - MarketScreener: Nvidia stellt das KI-Modell Fugatto für Audiosynthese und -transformation vor. [https://de.marketscreener.com/kurs/aktie/NVIDIA-CORPORATION-57355629/news/Nvidia-stellt-das-KI-Modell-Fugatto-fur-Audiosynthese-und-transformation-vor-48450495/](https://de.marketscreener.com/kurs/aktie/NVIDIA-CORPORATION-57355629/news/Nvidia-stellt-das-KI-Modell-Fugatto-fur-Audiosynthese-und-transformation-vor-48450495/) - Finanznachrichten: Fugatto: Nvidia stellt neues Audio-KI-Modell vor. [https://www.finanznachrichten.de/nachrichten-2024-11/63909925-fugatto-nvidia-stellt-neues-audio-ki-modell-vor-397.htm](https://www.finanznachrichten.de/nachrichten-2024-11/63909925-fugatto-nvidia-stellt-neues-audio-ki-modell-vor-397.htm) - Agentur.rocks: Nvidias Fugatto: Revolutionäre KI kreiert nie gehörte Klänge. [https://agentur.rocks/nvidias-fugatto-revolutionaere-ki-kreiert-nie-gehoerte-klaenge/](https://agentur.rocks/nvidias-fugatto-revolutionaere-ki-kreiert-nie-gehoerte-klaenge/) - Klamm: Nvidia sprengt Grenzen: Fugatto-Plattform revolutioniert generative KI. [https://www.klamm.de/news/nvidia-sprengt-grenzen-fugatto-plattform-revolutioniert-generative-ki-67N20241125215511.html](https://www.klamm.de/news/nvidia-sprengt-grenzen-fugatto-plattform-revolutioniert-generative-ki-67N20241125215511.html) - Sysprofile: Nvidia stellt Fugatto vor: Generatives KI-Modell für Audio jeglicher Spielarten. [https://forum.sysprofile.de/nvidia-stellt-fugatto-vor-generatives-ki-modell-fuer-audio-jeglicher-spielarten.t536481/](https://forum.sysprofile.de/nvidia-stellt-fugatto-vor-generatives-ki-modell-fuer-audio-jeglicher-spielarten.t536481/) - Heise: Neue KI von Nvidia: Fugatto kann Musik generieren und Stimmen Akzent verleihen. [https://www.heise.de/newsticker/?wt_ref=https%3A%2F%2Fwww.heise.de%2Fnewsticker%2F&wt_t=1525305600070](https://www.heise.de/newsticker/?wt_ref=https%3A%2F%2Fwww.heise.de%2Fnewsticker%2F&wt_t=1525305600070)