音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech

今回は「音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech」についてご紹介します。

関連ワード (抽出、新規性、頭部等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 米マサチューセッツ大学アマースト校、米Adobe Research、中国Huya Incによる研究チームが開発した「」は、音声に合った顔と頭の動きを生成する深層学習フレームワークだ。音声信号と顔の静止画像から、音声と同期した表情と頭部のアニメーションを生成する。実際の顔写真やアニメキャラクター、手描きスケッチまで、さまざまな顔に対応可能だ。

 今回の手法は、音声とアニメーションの中間表現として、入力した顔画像から唇、顎、眉毛、鼻、頭のポーズなどの顔のランドマークを予測し、抽出したランドマークと音声信号で学習する。顔の表情と頭部の動きは別々に学習し、後で統合する仕組みだ。

 アニメーション合成に用いる手法としては、写実的な顔に対しては画像から画像へ変換する学習ネットワーク、非写実的な顔に対しては画像を歪ませる手法の2つのアルゴリズムを採用している。

 出力するアニメーションは、静止画像の顔を自然に動かし、あたかも話しているかのように錯覚させる。最先端の手法と比較しても、より表現力豊かで品質の高いアニメーションを実現したとしている。

Copyright © ITmedia, Inc. All Rights Reserved.

抽出(ちゅうしゅつ)の意味 - goo国語辞書

抽出(ちゅうしゅつ)とは。意味や解説、類語。[名](スル)1 多くの中からある特定のものを抜き出すこと。「名簿から該当者を無作為に抽出する」2 液体または固体の中から特定の物質を溶媒に溶かして取り出すこと。「花から精油を抽出する」 - goo国語辞書は30万4千件語以上を収録。政治・経済・医学・ITなど、最新用語の追加も定期的に行っています。

抽出 - Wikipedia

抽出(ちゅうしゅつ、extraction)とは、人類最古の化学的分離操作法で、植物など原料中に含まれている成分を選択的に分離する操作を指す。 固液抽出は、種子や葉など固体の混合物から、溶媒に溶出する成分を抽出する。液液抽出

抽出とは - コトバンク

化学辞典 第2版 - 抽出の用語解説 - 液体または固体試料に溶媒を加え,試料中の特定物質を選択的に溶媒相に移してほかの物質より分離すること.一般に,固体では抽出速度が遅いので,たとえばソックスレー抽出器などを用いた連続抽出が採用される.液-液抽出はきわめて広い応用範...

抽出(チュウシュツ)とは何? Weblio辞書

「抽出」の意味は 多くの中からある特定のものを抜き出すこと。Weblio国語辞典では「抽出」の意味や使い方、用例、類似表現などを解説しています。

「抽出」の類義語や言い換え-Weblio類語辞典

抽出の言い換えや別の言い方。・意義素類語潜在的であるか潜在的な状態から発達するか、進化する抽出家具についている箱状の容器引出し ・ 抽き出し ・ ドロア ・ 抽斗 ・ 抽出し ・ 引出 ・ 引き出し何かを取り出す動作(特に努力や力...

Weblio和英辞書 - 「抽出」の英語・英語例文・英語表現

「抽出」は英語でどう表現する?【単語】an abstraction...【例文】BEVERAGE EXTRACTION PACK...【その他の表現】sampling... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「抽出する」の類義語や言い換え | 一部を抜き取る・部分的に ...

抽出するの言い換えや別の言い方。・意義素類語全体のうちの一部分だけをそのまま抜き出すこと一部を抜き取る ・ 部分的に抜き取る ・ 抽出する ・ 抜粋する ・ 抜き書きする ・ 抄出する原材料などから必要な成分などを作り出すこと採り出す...

抽出の英訳|英辞郎 on the WEB

抽出 される. 句動. fall out. 自動. percolate (パーコレーターでコーヒーが). 単語帳への登録は「英辞郎 on the WEB Pro」でご利用ください。. 20,000件まで登録できます。.

Weblio和英辞書 -「抽出する」の英語・英語例文・英語表現

「抽出する」は英語でどう表現する?【単語】extract... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「スライサー」はデータ抽出の救世主!

 · クリック1つでデータを抽出する 「部署名」のスライサーを使ってデータを抽出してみましょう。「部署名」のスライサーには、「部署名」の列 ...

COMMENTS


Recommended

TITLE
CATEGORY
DATE
IBM、433量子ビット搭載の量子プロセッサー「Osprey」を発表
IT関連
2022-11-12 05:58
「Linux」で独自の音楽ストリーミングサーバーを構築するには
IT関連
2024-04-19 23:12
「OpenSSL 3.0.7」がリリース–脆弱性の評価は「緊急」から「重要」に引き下げ
IT関連
2022-11-03 22:16
DNP、自治体向け「メタバース役所」共同利用モデルを提供開始
IT関連
2024-08-01 17:45
クラシックカメラみたいな「チェキ」登場、コンタクトシートをモチーフにしたフィルムも
くらテク
2021-04-08 20:43
デジタルを活用したGX/SXで経済社会の変革を進めよ
IT関連
2023-01-06 18:06
急速に進む日本でのAI活用、米国に追いつき新たなフェーズに–PwC Japan調査
IT関連
2022-05-21 13:44
ポケモンGOに「ゼルネアス」「イベルタル」降臨 5日は伝説レイド大量発生も
くらテク
2021-05-02 02:14
LINE WORKS、freee人事労務との連携アプリに「申請承認機能」を追加
IT関連
2024-02-28 09:07
凸版印刷、子どもの個性に合った絵本を選定する新サービス–自治体や書店に提供
IT関連
2022-11-24 14:12
事実上無限にスケールする「Amazon Aurora DSQL」プレビュー公開/AIエージェント「Jules」Googleが発表/「Devin」ついに正式サービス開始ほか、2024年12月の人気記事
編集後記
2025-01-10 12:02
鴻池運輸、AI-OCR活用し倉庫内検品作業のミスを防止–スマホで読み取り
IT関連
2025-02-15 03:10
好調な四半期決算にもかかわらずSalesforceの株価は6.3%下落
ソフトウェア
2021-02-28 02:48
iPad上でWindows 3.1が動作、DOS用ゲームが遊べる「iDOS 2」アプリを利用しインストール
ソフトウェア
2021-07-15 20:55