NVIDIAは、ACEテクノロジーを実際のゲームで初めてデモし、『メカBREAK』におけるAIを活用したインタラクションを紹介しました。
『メカBREAK』がNVIDIA ACEに対応し、AIを使ったプレイヤーとゲーム内キャラクターのリアルなインタラクションを実現
Gamescom 2024において、NVIDIAは再びACE技術のデモを行うが、今回のデモは、Covert ProtocolやRamen Shopのような手作りの体験ではなく、実際のゲームである。
これは、4B（40億パラメータ）のNIMを持つネモトロン-4として知られるゲームキャラクター用の最新の小型言語モデルを使用することで可能になります。
小さくて複雑でないモデルは、ゲーミングPCのようなプラットフォームで簡単に実行でき、従来のLLM（大規模言語モデル）に対して迅速な応答を提供します。
Nemotron-4 4B NIMモデルは、Amazing Seasun Gamesの最初のタイトル「Mecha BREAK」に統合されていることが示されました。
デモでは、Nemotron-4だけでなく、ダイナミックなフェイシャルアニメーションを提供するために使用されるAudio2Face-3D NIMも活用されています。
これら以外にも、音声認識を提供するWhisperや、リアルな音声を提供するElevenlabs（クラウド上で動作）など、ゲーム内に統合されたサードパーティ製モデルもある。
ACEとデジタル・ヒューマン・テクノロジー、初のゲーム「Mecha BREAK」で披露 NVIDIA ACEは、デジタル・ヒューマンに命を吹き込む、デジタル・ヒューマン・テクノロジーの革命的なスイートです。ACEは、Computex 2023のラーメン屋のデモでデビューしましたが、ACEは急速に進化しています。
Gamescom 2024では、Amazing Seasun Gamesが開発した新しいマルチプレイヤー・メカ・ゲームであるMecha BREAKで、そのキャラクターに生命を吹き込み、GeForce RTX AI PC上でよりダイナミックで没入感のあるゲームプレイ体験を提供するために、その最初のデジタル・ヒューマン・スモール言語モデルがデモされていることを発表しました。Kingsoft Corporationのゲーム子会社であるAmazing Seasun Gamesによって開発されたMecha BREAKは、ACEを搭載したゲーム・インタラクションの最初のショーケースとして、NVIDIA Nemotron-4 4B Instruct NIMをデバイス上で動作させています。
そして、これはほんの始まりに過ぎず、より多くの開発者がNVIDIA ACE技術をゲームやアプリケーションに取り入れています。世界的なゲームパブリッシャーであり開発者であるPerfect World Gamesは、NVIDIA ACEとデジタルヒューマン技術のデモである「Legends」を、新しいAIを搭載したビジョン機能で進化させています。このデモでは、ChatGPT-4oを搭載したコンピュータのカメラを使って、ユン・ニーというキャラクターがゲーマーを見たり、現実世界の人や物を識別したりすることができ、ゲームプレイ体験に拡張現実レイヤーを追加しています。これらの機能は、PCゲームの没入感とアクセシビリティの新たなレベルを解き放ちます。
NVIDIA GeForceより
ゲームに話を戻すと、Mecha BREAKはプレイヤーが選択できる様々なメカによる6対6の戦闘が特徴だ。
各メカはそれぞれ異なるロードアウトとアビリティを持っているので、アクションに参加する前に正しい選択をすることが重要だ。
そこで、ハンガーベイにいるエンジニアのキャラクターが登場し、ミッションの目標や好みのメカの選択など、さまざまなことでプレイヤーをサポートしてくれる。
NVIDIA ACEテクノロジーとNIMモデルは、このゲームのこの部分に適用されており、音声認識を通じてキャラクターと対話し、外出先でも生き生きとした応答性の高い会話をすることができます。
NVIDIAは、Gamescom 2024の期間中、メカBREAKとの統合とともに、ACEのデモ一式を展示する予定です。また、今後のゲームタイトルにおけるNPCのAI統合にも期待したい。
解説：
いよいよゲーム内にLLMが組み込まれる
4Bというかなりパラメーターの少ないLLMのようですが、特定のゲームに出てくる人格をエミュレートするだけならこれでも十分なのでしょうね。
いよいよ、ゲームもAIをフル活用する時代に入ってきたなという感じです。
そして、実際のゲームに組み込まれるのか、Geforce以外はどうなるのか気になるところです。
この辺りでゲーム体験に差がついてくるとAMDとIntelはますます苦しくなるのではないでしょうか。
4年で1000倍になるといわれているAIに乗り遅れると数年後致命的な差になって表れてくるというのがいよいよ表面化してきているように感じます。
スタート地点ではほとんどわからないくらいの差しかありませんが、数年後に技術が発展すると次々に差をつけられていくというのは恐ろしい状況なのかなと思います。
ぜひとも競合他社にも頑張ってほしいところですが、元記事の話を見る限り追従するのは難しいように思います。