Nvidias G-Assist erweitert Funktionen durch neuen Plugin-Builder für individuelle PC-Automatisierungen

Nvidias G-Assist: KI-gesteuerte PC-Automatisierung durch Plugin-Builder

Nvidia erweitert sein KI-Tool G-Assist um einen Plugin-Builder. Damit eröffnet das Unternehmen Nutzern die Möglichkeit, eigene PC-Automatisierungen zu erstellen und diese per Sprachbefehl oder Texteingabe zu steuern. Ursprünglich als experimentelles Tool zur Überwachung und Optimierung von Systemeinstellungen konzipiert, ermöglicht G-Assist nun die Erweiterung seiner Funktionalität durch die Erstellung individueller Plugins.

Die Erweiterung von G-Assist basiert auf JSON-basierten Konfigurationsdateien, deren Logik in Python geschrieben wird. Diese Dateien werden lokal gespeichert und vom G-Assist-System automatisch erkannt. Der Zugriff erfolgt direkt über das Nvidia-Overlay, ohne dass Nutzer ihre aktuelle Anwendung verlassen müssen.

Der Assistent führt ein leichtgewichtiges Sprachmodell lokal auf RTX-GPUs aus, wodurch die Inferenz ohne Cloud-Verbindung ermöglicht wird. Die Integration in agentenbasierte Systeme wie Langflow ist ebenfalls möglich, wodurch G-Assist als Teil größerer Automatisierungsworkflows eingesetzt werden kann.

Beispiel-Plugins demonstrieren die Steuerung von Apps und Peripheriegeräten

Nvidia stellt eine Reihe von Beispiel-Plugins zur Verfügung. Darunter befinden sich Tools zur Steuerung der Musikwiedergabe und Lautstärke über Spotify, zur Abfrage von Googles cloudbasiertem Sprachmodell Gemini für Websuchen und Konversationen, zum Zugriff auf Twitch-Streamdaten sowie zur Anzeige von Wetter- oder Börseninformationen.

Auch die Steuerung ausgewählter Peripheriegeräte ist mit G-Assist möglich. Nutzer können beispielsweise per Sprach- oder Texteingabe Lüfterprofile, RGB-Beleuchtung oder Benchmarking-Tools für Geräte von Logitech G, Corsair, MSI und Nanoleaf anpassen.

Offene Ressourcen für Entwickler

Die benötigten Dateien, Dokumentationen und Beispielerweiterungen sind über ein öffentliches GitHub-Repository verfügbar. Für Entwickler, die eigene Erweiterungen erstellen möchten, verweist Nvidia auf mehrere frei verfügbare API-Verzeichnisse, darunter publicapis.dev, free-apis.github.io, apilist.fun und APILayer.

Von der Systemsteuerung zur Community-Plattform

Vor der Einführung des Plugin-Systems war G-Assist ein geschlossenes Tool, das auf die Systemsteuerung von RTX-PCs beschränkt war. Durch die Erweiterungsmöglichkeit über Community-basierte Plugins verlagert Nvidia nun mehr Gestaltungsmöglichkeiten auf die Community. Das Tool richtet sich jedoch weiterhin an technisch versierte Nutzer und ist auf aktuelle Nvidia-Hardware beschränkt.

Bibliographie:

1. https://blogs.nvidia.com/blog/rtx-ai-garage-g-assist-plugin-builder/
2. https://the-decoder.com/nvidias-g-assist-adds-a-plug-in-builder-so-you-can-create-your-own-pc-ai-automations/
3. https://www.tomshardware.com/tech-industry/artificial-intelligence/nvidia-introduces-g-assist-plug-in-builder-allowing-its-ai-to-integrate-with-llms-and-software
4. https://www.theverge.com/news/654221/nvidia-g-assist-plugins-spotify-twitch-apps
5. https://github.com/NVIDIA/G-Assist
6. https://www.nvidia.com/en-us/software/nvidia-app/g-assist/
7. https://www.facebook.com/THEDECODERAI/posts/1-nvidia-is-expanding-its-g-assist-ai-tool-with-a-plug-in-builder-enabling-users/641912161995196/
8. https://www.pcgamer.com/software/ai/anyone-can-now-make-plugins-for-nvidias-promising-g-assist-ai-overlay-with-options-available-for-spotify-twitch-and-more/
9. https://www.neowin.net/news/nvidia-project-g-assist-gets-chatgpt-integration-to-let-gamers-build-custom-plugins/
10. https://testingbuddies.de/ai-mit-g-assist-plug-ins-leicht-individualisieren