Skip to content

Nvidias G-Assist soll mit KI den PC in natürlicher Sprache fernsteuern

Image description
Nvidia

Kurz & Knapp

  • Nvidia erweitert sein KI-Werkzeug G-Assist um einen Plug-in-Builder, mit dem Nutzer eigene Sprachbefehle und Automatisierungen zur PC-Steuerung entwickeln können – per Sprache oder Texteingabe.
  • Die Plug-ins basieren auf lokal gespeicherten JSON- und Python-Dateien und funktionieren ohne Cloudverbindung direkt über das Nvidia-Overlay. Unterstützt werden Aufgaben wie Musiksteuerung, Wetterabfragen oder die Kontrolle von RGB-Beleuchtung.
  • Nvidia stellt Beispiel-Plug-ins, Anleitungen und ein GitHub-Repository bereit. Zielgruppe sind technisch erfahrene Nutzer mit RTX-Grafikkarten, die eigene Automatisierungen auf Basis frei zugänglicher APIs entwickeln möchten.

Nvidia stellt mit G-Assist und einem Plug-in-Builder neue Werkzeuge zur KI-gestützten PC-Steuerung vor. Entwickler können eigene Sprachbefehle und Automatisierungen programmieren.

G-Assist war bisher ein experimenteller Assistent zur Steuerung, Überwachung und Optimierung von Systemfunktionen. Mit dem Plug-in-Builder können Nutzer nun eigene Befehle und Automationen erstellen – per Sprache oder Texteingabe.

Lokales Sprachmodell steuert PC-Funktionen

Erweiterungen für G-Assist basieren auf einfachen Konfigurationsdateien im JSON-Format. Die Logik wird in Python geschrieben. Die Dateien werden lokal abgelegt und automatisch von G-Assist erkannt. Der Zugriff erfolgt direkt über das Nvidia-Overlay, ohne dass Anwendungen verlassen werden müssen.

Das System nutzt ein kleines Sprachmodell, das lokal auf RTX-GPUs läuft. Die Inferenz erfolgt daher ohne Cloudverbindung. Zudem lässt sich G-Assist in agentenbasierte Systeme wie Langflow einbinden und als Teil größerer Automatisierungspipelines verwenden.

Nvidia liefert mehrere Beispiel-Plug-ins mit, etwa für die Steuerung von Musikwiedergabe und Lautstärke über Spotify, den Zugriff auf Googles Cloud-KI Gemini für Konversations- und Websuche, die Abfrage von Twitch-Streams oder die Ausgabe von Wetterdaten und Börsenkursen.

Auch die Steuerung unterstützter Peripheriegeräte wird ermöglicht, etwa zur Anpassung von Lüfterprofilen, RGB-Beleuchtung oder Benchmark-Aufrufen bei Geräten von Logitech G, Corsair, MSI oder Nanoleaf.

Die notwendigen Dateien, Anleitungen und Beispielerweiterungen stellt Nvidia über ein öffentlich zugängliches GitHub-Repository bereit. Für die Entwicklung verweist Nvidia auf frei zugängliche API-Sammlungen, die sich für eigene Erweiterungen nutzen lassen, etwa publicapis.dev, free-apis.github.io, apilist.fun und APILayer.

Vor der Einführung des Plug-in-Systems war G-Assist ein geschlossenes Werkzeug zur Systemsteuerung auf RTX-PCs. Mit der nun möglichen Erweiterung durch Nutzer verlagert Nvidia die Gestaltungsmöglichkeiten stärker an die Community. Die Zielgruppe bleibt jedoch technisch versiert und auf aktuelle Nvidia-Hardware beschränkt.

Quelle: Nvidia

KI-News ohne Hype
Von Menschen kuratiert.

  • Mehr als 20 Prozent Launch-Rabatt.
  • Lesen ohne Ablenkung – keine Google-Werbebanner.
  • Zugang zum Kommentarsystem und Austausch mit der Community.
  • Wöchentlicher KI-Newsletter.
  • 6× jährlich: „KI Radar“ – Deep-Dives zu den wichtigsten KI-Themen.
  • Bis zu 25 % Rabatt auf KI Pro Online-Events.
  • Zugang zum kompletten Archiv der letzten zehn Jahre.
  • Die neuesten KI‑Infos von The Decoder – klar und auf den Punkt.
The Decoder abonnieren