音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech

今回は「音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech」についてご紹介します。

関連ワード (抽出、新規性、頭部等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 米マサチューセッツ大学アマースト校、米Adobe Research、中国Huya Incによる研究チームが開発した「」は、音声に合った顔と頭の動きを生成する深層学習フレームワークだ。音声信号と顔の静止画像から、音声と同期した表情と頭部のアニメーションを生成する。実際の顔写真やアニメキャラクター、手描きスケッチまで、さまざまな顔に対応可能だ。

 今回の手法は、音声とアニメーションの中間表現として、入力した顔画像から唇、顎、眉毛、鼻、頭のポーズなどの顔のランドマークを予測し、抽出したランドマークと音声信号で学習する。顔の表情と頭部の動きは別々に学習し、後で統合する仕組みだ。

 アニメーション合成に用いる手法としては、写実的な顔に対しては画像から画像へ変換する学習ネットワーク、非写実的な顔に対しては画像を歪ませる手法の2つのアルゴリズムを採用している。

 出力するアニメーションは、静止画像の顔を自然に動かし、あたかも話しているかのように錯覚させる。最先端の手法と比較しても、より表現力豊かで品質の高いアニメーションを実現したとしている。

Copyright © ITmedia, Inc. All Rights Reserved.

抽出(ちゅうしゅつ)の意味 - goo国語辞書

抽出(ちゅうしゅつ)とは。意味や解説、類語。[名](スル)1 多くの中からある特定のものを抜き出すこと。「名簿から該当者を無作為に抽出する」2 液体または固体の中から特定の物質を溶媒に溶かして取り出すこと。「花から精油を抽出する」 - goo国語辞書は30万4千件語以上を収録。政治・経済・医学・ITなど、最新用語の追加も定期的に行っています。

抽出 - Wikipedia

抽出(ちゅうしゅつ、extraction)とは、人類最古の化学的分離操作法で、植物など原料中に含まれている成分を選択的に分離する操作を指す。 固液抽出は、種子や葉など固体の混合物から、溶媒に溶出する成分を抽出する。液液抽出

抽出とは - コトバンク

化学辞典 第2版 - 抽出の用語解説 - 液体または固体試料に溶媒を加え,試料中の特定物質を選択的に溶媒相に移してほかの物質より分離すること.一般に,固体では抽出速度が遅いので,たとえばソックスレー抽出器などを用いた連続抽出が採用される.液-液抽出はきわめて広い応用範...

抽出(チュウシュツ)とは何? Weblio辞書

「抽出」の意味は 多くの中からある特定のものを抜き出すこと。Weblio国語辞典では「抽出」の意味や使い方、用例、類似表現などを解説しています。

「抽出」の類義語や言い換え-Weblio類語辞典

抽出の言い換えや別の言い方。・意義素類語潜在的であるか潜在的な状態から発達するか、進化する抽出家具についている箱状の容器引出し ・ 抽き出し ・ ドロア ・ 抽斗 ・ 抽出し ・ 引出 ・ 引き出し何かを取り出す動作(特に努力や力...

Weblio和英辞書 - 「抽出」の英語・英語例文・英語表現

「抽出」は英語でどう表現する?【単語】an abstraction...【例文】BEVERAGE EXTRACTION PACK...【その他の表現】sampling... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「抽出する」の類義語や言い換え | 一部を抜き取る・部分的に ...

抽出するの言い換えや別の言い方。・意義素類語全体のうちの一部分だけをそのまま抜き出すこと一部を抜き取る ・ 部分的に抜き取る ・ 抽出する ・ 抜粋する ・ 抜き書きする ・ 抄出する原材料などから必要な成分などを作り出すこと採り出す...

抽出の英訳|英辞郎 on the WEB

抽出 される. 句動. fall out. 自動. percolate (パーコレーターでコーヒーが). 単語帳への登録は「英辞郎 on the WEB Pro」でご利用ください。. 20,000件まで登録できます。.

Weblio和英辞書 -「抽出する」の英語・英語例文・英語表現

「抽出する」は英語でどう表現する?【単語】extract... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「スライサー」はデータ抽出の救世主!

 · クリック1つでデータを抽出する 「部署名」のスライサーを使ってデータを抽出してみましょう。「部署名」のスライサーには、「部署名」の列 ...

COMMENTS


Recommended

TITLE
CATEGORY
DATE
鉄建建設、3Dセンサーで鉄道工事の線路内侵入を自動検知
IT関連
2022-12-02 01:38
ランサムウェア攻撃が2021年に急増–ベライゾン調査
IT関連
2022-06-07 10:24
北海道銀行、個人・法人向けFAQに検索システム「Helpfeel」導入
IT関連
2024-04-16 08:45
AWS、WebアプリケーションからAmazon S3にアクセスできるUIコンポーネント「Storage Browser for S3」、オープンソースとして公開
AWS
2024-09-09 05:35
ダイバーシティとインクルージョンの促進に注力する投資会社Kapor Capitalが約133億円調達
パブリック / ダイバーシティ
2021-03-02 17:13
「ファミコン」の操作ボタンがカプセルトイに シークレットあり 
くらテク
2021-06-25 13:54
田中精密工業、EVなどへの対応強化で生産シミュレーションソフトを導入
IT関連
2024-08-22 10:03
ワークスアプリ、チャットボットのFAQを「ChatGPT」で自動生成
IT関連
2023-08-19 22:13
ピュア・ストレージ、モジュラー構成をさらに進めた「FlashBlade//S」などを発表
IT関連
2022-06-11 04:52
「あの頃は経費精算が面倒だった」と懐かしめる社会に–コンカー三村社長
IT関連
2022-11-10 07:26
アクセンチュアとSAP、福島・会津で中小製造業向けのデジタルICT共通基盤を構築
IT関連
2021-04-12 21:09
気分に合わせてパーツの組み合わせ変更できるメガネを販売するPair Eyewearが約13.3億円調達
ネットサービス
2021-04-03 19:37
夜になると自動でブルーライトをカットする液晶テレビ、東芝が発売
くらテク
2021-02-19 21:03
New Relic、自社プラットフォームを「NVIDIA NIM」推論マイクロサービスと統合
IT関連
2024-06-27 23:10