NVIDIA ACEが実際のゲームで初デモ、Mecha BREAKにAIを搭載したインタラクションをもたらす

NVIDIAは、ACEテクノロジーを実際のゲームで初めてデモし、『メカBREAK』におけるAIを活用したインタラクションを紹介しました。

『メカBREAK』がNVIDIA ACEに対応し、AIを使ったプレイヤーとゲーム内キャラクターのリアルなインタラクションを実現

Gamescom 2024において、NVIDIAは再びACE技術のデモを行うが、今回のデモは、Covert ProtocolやRamen Shopのような手作りの体験ではなく、実際のゲームである。

これは、4B（40億パラメータ）のNIMを持つネモトロン-4として知られるゲームキャラクター用の最新の小型言語モデルを使用することで可能になります。

小さくて複雑でないモデルは、ゲーミングPCのようなプラットフォームで簡単に実行でき、従来のLLM（大規模言語モデル）に対して迅速な応答を提供します。

Nemotron-4 4B NIMモデルは、Amazing Seasun Gamesの最初のタイトル「Mecha BREAK」に統合されていることが示されました。

デモでは、Nemotron-4だけでなく、ダイナミックなフェイシャルアニメーションを提供するために使用されるAudio2Face-3D NIMも活用されています。

これら以外にも、音声認識を提供するWhisperや、リアルな音声を提供するElevenlabs（クラウド上で動作）など、ゲーム内に統合されたサードパーティ製モデルもある。

ACEとデジタル・ヒューマン・テクノロジー、初のゲーム「Mecha BREAK」で披露 NVIDIA ACEは、デジタル・ヒューマンに命を吹き込む、デジタル・ヒューマン・テクノロジーの革命的なスイートです。ACEは、Computex 2023のラーメン屋のデモでデビューしましたが、ACEは急速に進化しています。
Gamescom 2024では、Amazing Seasun Gamesが開発した新しいマルチプレイヤー・メカ・ゲームであるMecha BREAKで、そのキャラクターに生命を吹き込み、GeForce RTX AI PC上でよりダイナミックで没入感のあるゲームプレイ体験を提供するために、その最初のデジタル・ヒューマン・スモール言語モデルがデモされていることを発表しました。Kingsoft Corporationのゲーム子会社であるAmazing Seasun Gamesによって開発されたMecha BREAKは、ACEを搭載したゲーム・インタラクションの最初のショーケースとして、NVIDIA Nemotron-4 4B Instruct NIMをデバイス上で動作させています。
そして、これはほんの始まりに過ぎず、より多くの開発者がNVIDIA ACE技術をゲームやアプリケーションに取り入れています。世界的なゲームパブリッシャーであり開発者であるPerfect World Gamesは、NVIDIA ACEとデジタルヒューマン技術のデモである「Legends」を、新しいAIを搭載したビジョン機能で進化させています。このデモでは、ChatGPT-4oを搭載したコンピュータのカメラを使って、ユン・ニーというキャラクターがゲーマーを見たり、現実世界の人や物を識別したりすることができ、ゲームプレイ体験に拡張現実レイヤーを追加しています。これらの機能は、PCゲームの没入感とアクセシビリティの新たなレベルを解き放ちます。
NVIDIA GeForceより