Unreal Engine 5: Neue Geforce-Techdemo zeigt Zukunft von Echtzeit-Charakteren
Nvidia nutzt die GTC/GDC, um neue Technologiedemos für seine Geforce-RTX-Grafikkarten zu präsentieren und zeigt dabei die Zukunft von Spielecharakteren.
Letztes Jahr demonstrierten Nvidia und seine Technologiepartner bereits zweimal die beeindruckende Avatar Cloud Engine (ACE), mit der man NPCs in Spielen mehr Leben einhauchen möchte. Auf der GTC/GDC geht es nun mit einer neuen Techdemo weiter.
Covert Protocol
Die ACE umfasst mittlerweile neue Animations- und Sprachfunktionen, die noch natürlichere Unterhaltungen und emotionale Ausdrücke ermöglichen sollen. Mit den neuen Cloud-APIs für automatische Spracherkennung (ASR), Text-to-Speech (TTS), neuronale maschinelle Übersetzung (NMT) und Audio2Face (A2F) sollen Entwickler intelligente Avatare problemlos implementieren und über Anwendungen hinweg skalieren können.
Auf diesem Feld arbeitet Nvidia unter anderem mit Inworld zusammen, das Ergebnis ist eine neue Technologiedemo namens Covert Protocol. Sie setzt auf die Unreal Engine 5, wobei Inworlds SDK zum einen MetaHuman von Epic integriert, als auch Nvidia ACE-Technologien wie ASR und A2F. Der Quellcode der Demo soll bald für andere Entwickler geöffnet werden. In der Techdemo, zu dem es ein Video gibt, werden die Raytracing-Hintergründe natürlich am liebsten von RTX-Grafikkarten gerendert.
In der Demo übernimmt der Spieler die Rolle eines Privatdetektivs, der sich mit anderen Charakteren unterhält und auf der Basis der Gespräche Aufgaben abschließt. Die Interaktionen mit den NPCs geschieht in Echtzeit und ist wichtiger Teil des Spielerlebnisses. Jeder "Run" in der Covert-Protocol-Techdemo soll einzigartig sein und zu unterschiedlichen Resultaten führen. Das Ausmaß an KI-gesteuerter Interaktivität und Handlungsfreiheit soll neue Möglichkeiten "für emergentes Gameplay eröffnen, bei dem die Spieler schnell denken und ihre Strategien in Echtzeit anpassen müssen, um die Feinheiten der Spielwelt zu meistern". Gerade Rollenspiele könnten davon profitieren.
Lippen-Synchro und Gesichtsanimationen
Nvidia hat neben Covert Protocol noch zwei weitere Beispiele für ACE bzw. Audio2Face im Angebot. So setzt World of Jade Dynasty von Perfect World Games als kommendes MMORPG auf die Unreal Engine 5. Ein Video zeigt die offline gerenderte Audio2Face-Technologie von Nvidia, die präzise Lippen-Synchronisation sowohl auf Chinesisch als auch auf Englisch generiert und es den Drehbuchautoren ermöglichen soll, problemlos neuen vertonten Inhalt zu World of Jade Dynasty hinzuzufügen.
Unawake von RealityArts Studio und Toplitz Productions nutzt Audio2Face, um die Gesichtsanimationen der Charaktere während des Spiels und in hochauflösenden Filmsequenzen zu erstellen. Bisher steht das Action-Rollenspiel auf Basis der Unreal Engine 5 für das zweite Quartal 2024 an. Nvidia bestätigte DLSS 3 mit Frame Generation zum Release.
Wie finden Sie die gezeigte Technologie für lebensechte Charaktere? Nutzen Sie die Kommentarfunktion und teilen Sie uns Ihre Meinung mit. Zum Kommentieren müssten Sie auf PCGH.de oder im Extreme-Forum eingeloggt sein. Sollten Sie noch keinen Account haben, könnten Sie über eine Registrierung nachdenken, die viele Vorteile mit sich bringt. Beachten Sie beim Kommentieren aber bitte die gültigen Forenregeln.
Und die Animationen haben nicht das Niveau der In Game Cutscenes von Red Dead Redemtion 2.
Da kann man argumentieren, das die Techdemo Echtzeit Gesprächsszenen sind.
Ja gut, RDR2 ist aber vor 5 Jahren für die Playsi 4 erschienen.
Wie schon geschrieben wurde: der Weg scheint noch weit zu sein...
Hab's mir jetzt nochmal angesehen. Sie beschreiben, wie toll die AI auf ihre Umwelt reagiert, zeigen aber nichts davon.
Die Interaktion, die zu sehen sind, sind halt auf Creation Engine Niveau.
Ich verstehe es nicht.
Die Antworten werden halt erzeugt, aber das was gezeigt wird ist weitgehend emotionslos.
Die Charaktere in der Demo waren näher an Starfield, als an Fotorealismus.
Nicht so beeindruckend.