Nvidia präsentiert mit Nemotron-4 4B Instruct ein kompaktes Sprachmodell, das die Konversationsfähigkeiten von Spielfiguren verbessern soll. Das Modell läuft direkt auf GeForce RTX-Grafikkarten und soll für natürlichere Interaktionen in Spielen sorgen.
Nvidia hat ein neues Sprachmodell namens Nemotron-4 4B Instruct vorgestellt, das speziell für den Einsatz in Computerspielen entwickelt wurde. Das Modell ist Teil der Nvidia ACE-Technologie und soll die Konversationsfähigkeiten von Spielfiguren verbessern, indem es Anweisungen von Spielern intuitiver versteht und natürlicher darauf reagiert. Eine Besonderheit ist, dass das Modell direkt auf GeForce RTX-Grafikkarten läuft.
Das neue Sprachmodell wird derzeit in "Mecha BREAK" demonstriert, einem Mehrspieler-Mech-Spiel des Entwicklers Amazing Seasun Games. In einer auf der Gamescom gezeigten Demo interagieren Spieler mit einem Mechaniker-NPC, der ihnen bei der Auswahl und Anpassung von Mechs hilft. Neben dem Sprachmodell kommen dabei weitere KI-Technologien zum Einsatz: Nvidia Audio2Face-3D und OpenAIs Whisper für Gesichtsanimation und Spracherkennung, sowie ElevenLabs für die Sprachausgabe aus der Cloud.
Kleine Sprachmodelle für Spiele könnten auf über 100 Millionen GeForce-Karten laufen
Nemotron-4 4B Instruct ist als Nvidia NIM-Microservice verfügbar. Das Modell ist für geringen Speicherverbrauch und schnelle Reaktionszeiten optimiert. Nvidia betont, dass Entwickler damit von über 100 Millionen GeForce RTX-PCs und -Laptops profitieren könnten.
Auch andere Unternehmen setzen auf Nvidias digitale Assistenten-Technologien. Der Spieleentwickler Perfect World Games erweitert seine Nvidia ACE-Demo "Legends" um KI-gestützte Sichtfunktionen. Dabei kann ein Spielcharakter namens Yun Ni Spieler und Objekte in der realen Welt über die Computerkamera erkennen. Die Technologie basiert auf GPT-4o und fügt dem Spielerlebnis eine Augmented-Reality-Komponente hinzu.
