CES: NVIDIA ACE und führende Spieleentwickler bringen KI-NPCs in die nächste Dimension

NVIDIAs ACE (Avatar Cloud Engine) ist eine beeindruckende Technologie, die bisher noch nicht in Aktion gesehen wurde. Mit der neuesten Ankündigung von Team Green kommen wir dieser jedoch näher. Das Unternehmen hat heute seine Produktions-Microservices für die ACE-Technologie vorgestellt. Diese ermöglichen es Spieleentwicklern, Tools-Entwicklern und App-Entwicklern, KI-Modelle nahtlos in Avatare oder NPCs zu integrieren. Dadurch können sie Gaming- und App-Erfahrungen der nächsten Generation schaffen.

ACE wurde bereits vielfach diskutiert. Im Jahr 2023 hat NVIDIA die Technologie mit der Einführung von NeMo SteerLM erweitert, was Entwicklern ermöglicht, mit anpassbaren Attributen für digitale Avatare zu experimentieren. Die jüngste Kooperation mit Inworld AI erweitert diese NPCs weiter, um kontextbewusst zu agieren.

Um das Jahr 2024 einzuläuten, hat NVIDIA im Rahmen seiner ACE-Microservices-Partnerschaften mit verschiedenen Entwicklern zusammengearbeitet, um die KI-gesteuerten NPCs mithilfe von Audio2Face (A2F) und Riva Automatic Speech Recognition (ASR) zu verbessern. Zu den beteiligten Entwicklern zählen Ubisoft, Tencent, UneeQ, Ourpalm, NetEase Games, miHoYo, Convai, Charisma AI sowie das zuvor erwähnte Inworld. In einer Demonstration von NVIDIA wird gezeigt, wie Convais hochentwickelte LLM + RAG-Modelle für Text-to-Speech genutzt werden, um äußerst überzeugende Interaktionen mit NPCs in Spielen zu schaffen. Die NPCs reagieren nicht nur auf den Spieler selbst, basierend auf dem Tonfall seiner Sprache, sondern interagieren auch mit anderen NPCs in ihrer Umgebung, abhängig von dem Text, den sie gerade vom Spieler erhalten haben.

Noch einmal, wenn wir es aus der Perspektive des Gamings betrachten, könnte dies einige wirklich innovative Erfahrungen schaffen, die bisher noch nicht gesehen wurden. Wir sind gespannt darauf zu sehen, wie dies in einem hochwertigen AAA-Spiel umgesetzt wird. Mit den ACE-Microservices kommen wir der Realisierung dieses Ziels einen Schritt näher.