NVIDIA、ローカルで動く基盤モデルでPCデスクトップ上に表情のあるキャラクターを表示。アプリの使い方や文章の要約などをしてくれる「Project R2X」発表

今回は「NVIDIA、ローカルで動く基盤モデルでPCデスクトップ上に表情のあるキャラクターを表示。アプリの使い方や文章の要約などをしてくれる「Project R2X」発表」についてご紹介します。

関連ワード (参加者、生成、音声等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


NVIDIAは現在ラスベガスで開催中のイベント「CES 2025」において、PCのデスクトップ画面上にローカルマシン上で稼働する生成AIによるキャラクターが表示され、アプリの使い方指南やドキュメントの要約、オンライン会議への参加などをしてくれるAIエージェント「Project R2X」を発表しました。

figProject R2Xのデモ動画から

表情などが生成AIでアニメーション化

Project R2Xのキャラクターは、同社のGPUを搭載した「NVIDIA RTX AI PC」の上で稼働する基盤モデル「NVIDIA NIMマイクロサービス」を用いた生成AIによって実現されています。

自然言語を用いた音声で人間と対話でき、唇や舌の動きなどの表情はNVIDIA Audio2Face-3Dモデルによってアニメーション化されています。

アプリの使い方指南、PDFの内容を解釈して回答

デモ動画ではまず、人間がPhotoshopを使って画像内の人物のジャケットを革ジャンに変換する方法を質問。キャラクターが音声で教えてくれました。

fig

キャラクターの上にPDFファイルをドラッグ&ドロップして読み込ませた上で、ドキュメントの内容について質問をすると、内容に基づいて答えてくれます。

fig

情報を追加してAIの知識を増やせる

Notionの情報をキャラクター(AIエージェント)に入力することで、キャラクターの知識を増やせることもデモ動画で示されました。

fig

PCに接続されたカメラの映像も認識。これは何? という問いに、赤と白のカップでスターバックスのもののようだと的確に答えます。

fig

オンライン会議にも参加。ラスベガスの見所などについての質問に、まるで人間の参加者のように答えました。

fig

下記がProject R2Xのデモ動画です。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
Appleの紛失防止「AirTag」の「持ち物を探す」機能は、既にSafariからアクセスできる サービス開始は3月か?
-
2021-01-16 17:35
データ連携・活用に必須のデータセキュリティ最新動向を知るセミナー開催
IT関連
2024-02-02 17:14
Switch/PS 4/Steam向け「大逆転裁判1&2」発売へ 謎解きまで自動の「ストーリーモード」新搭載
くらテク
2021-04-23 08:59
ポケモンカードやFunko Popなどをライブストリームで販売するWhatnotが54.4億円を調達
ネットサービス
2021-05-27 11:16
うどん×粒あん×かまぼこ 老舗が共闘、オンラインツアー
IT関連
2021-06-04 11:29
空中に浮かぶ映像に触れ、裏側に回り込める技術 愛工大が開発 :Innovative Tech
イラスト・デザイン
2021-03-20 20:39
「顧客の需要を先取りする」–ベライゾンが語る、ダイナミックな変革の軌跡
IT関連
2022-10-05 20:17
上っ面の業務自動化ではなく、本質的な自動化に必要なこと
IT関連
2022-06-10 13:44
グリー、ライブ配信を軸に仮想空間「メタバース」事業に参入 3年で約100億円を投資
企業・業界動向
2021-08-08 16:51
SAPジャパン、中堅企業向けのパッケージプログラム–「SAP S/4HANA Cloud」導入を支援
IT関連
2022-07-08 08:27
第5回:「営業部門の立場に立ったMA活用」のシナリオとは
IT関連
2021-06-21 10:12
Google Cloudの売上高が堅調な伸び–Alphabet決算、予想上回る
IT関連
2021-02-03 22:57
輸出可能な商品を一覧表示–小林順蔵商店、日本酒の輸出見積もりを支援する新システム
IT関連
2023-02-11 23:59
マイクロソフト、投票機メーカーHartと提携–「ElectionGuard」で投票をセキュアに
IT関連
2021-06-08 09:08