音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech

今回は「音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech」についてご紹介します。

関連ワード (抽出、新規性、頭部等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 米マサチューセッツ大学アマースト校、米Adobe Research、中国Huya Incによる研究チームが開発した「」は、音声に合った顔と頭の動きを生成する深層学習フレームワークだ。音声信号と顔の静止画像から、音声と同期した表情と頭部のアニメーションを生成する。実際の顔写真やアニメキャラクター、手描きスケッチまで、さまざまな顔に対応可能だ。

 今回の手法は、音声とアニメーションの中間表現として、入力した顔画像から唇、顎、眉毛、鼻、頭のポーズなどの顔のランドマークを予測し、抽出したランドマークと音声信号で学習する。顔の表情と頭部の動きは別々に学習し、後で統合する仕組みだ。

 アニメーション合成に用いる手法としては、写実的な顔に対しては画像から画像へ変換する学習ネットワーク、非写実的な顔に対しては画像を歪ませる手法の2つのアルゴリズムを採用している。

 出力するアニメーションは、静止画像の顔を自然に動かし、あたかも話しているかのように錯覚させる。最先端の手法と比較しても、より表現力豊かで品質の高いアニメーションを実現したとしている。

Copyright © ITmedia, Inc. All Rights Reserved.

抽出(ちゅうしゅつ)の意味 - goo国語辞書

抽出(ちゅうしゅつ)とは。意味や解説、類語。[名](スル)1 多くの中からある特定のものを抜き出すこと。「名簿から該当者を無作為に抽出する」2 液体または固体の中から特定の物質を溶媒に溶かして取り出すこと。「花から精油を抽出する」 - goo国語辞書は30万4千件語以上を収録。政治・経済・医学・ITなど、最新用語の追加も定期的に行っています。

抽出 - Wikipedia

抽出(ちゅうしゅつ、extraction)とは、人類最古の化学的分離操作法で、植物など原料中に含まれている成分を選択的に分離する操作を指す。 固液抽出は、種子や葉など固体の混合物から、溶媒に溶出する成分を抽出する。液液抽出

抽出とは - コトバンク

化学辞典 第2版 - 抽出の用語解説 - 液体または固体試料に溶媒を加え,試料中の特定物質を選択的に溶媒相に移してほかの物質より分離すること.一般に,固体では抽出速度が遅いので,たとえばソックスレー抽出器などを用いた連続抽出が採用される.液-液抽出はきわめて広い応用範...

抽出(チュウシュツ)とは何? Weblio辞書

「抽出」の意味は 多くの中からある特定のものを抜き出すこと。Weblio国語辞典では「抽出」の意味や使い方、用例、類似表現などを解説しています。

「抽出」の類義語や言い換え-Weblio類語辞典

抽出の言い換えや別の言い方。・意義素類語潜在的であるか潜在的な状態から発達するか、進化する抽出家具についている箱状の容器引出し ・ 抽き出し ・ ドロア ・ 抽斗 ・ 抽出し ・ 引出 ・ 引き出し何かを取り出す動作(特に努力や力...

Weblio和英辞書 - 「抽出」の英語・英語例文・英語表現

「抽出」は英語でどう表現する?【単語】an abstraction...【例文】BEVERAGE EXTRACTION PACK...【その他の表現】sampling... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「抽出する」の類義語や言い換え | 一部を抜き取る・部分的に ...

抽出するの言い換えや別の言い方。・意義素類語全体のうちの一部分だけをそのまま抜き出すこと一部を抜き取る ・ 部分的に抜き取る ・ 抽出する ・ 抜粋する ・ 抜き書きする ・ 抄出する原材料などから必要な成分などを作り出すこと採り出す...

抽出の英訳|英辞郎 on the WEB

抽出 される. 句動. fall out. 自動. percolate (パーコレーターでコーヒーが). 単語帳への登録は「英辞郎 on the WEB Pro」でご利用ください。. 20,000件まで登録できます。.

Weblio和英辞書 -「抽出する」の英語・英語例文・英語表現

「抽出する」は英語でどう表現する?【単語】extract... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「スライサー」はデータ抽出の救世主!

 · クリック1つでデータを抽出する 「部署名」のスライサーを使ってデータを抽出してみましょう。「部署名」のスライサーには、「部署名」の列 ...

COMMENTS


Recommended

TITLE
CATEGORY
DATE
五輪関係者の健康管理アプリ、仕様見直しへ 海外客の受け入れ見送りで
クラウドユーザー
2021-03-31 19:37
企業の6割がサイバーリスクに対して受動的なアプローチ–ウィズセキュア調査
IT関連
2023-04-06 07:46
パッケージマネージャ「Homebrew 4.0」正式リリース、より高速に。Git cloneからJSONによるパッケージ管理へ切り替え
Apple
2023-02-20 04:11
Next.js 14発表。Server Actionsが正式版に、Turbopackはもうすぐ完成、部分的プリレンダリング機能がプレビュー。Next.js Conf 2023
JavaScript
2023-11-06 20:16
芝パークホテル、宿泊予約の管理業務にRPA導入–バックオフィス業務を効率化
IT関連
2021-03-22 21:26
日本IBM、メインフレーム新製品「IBM z16」発表–リアルタイムAI推論や耐量子暗号技術に対応
IT関連
2022-04-08 14:26
本物のクラウドと従来型サービスを誤解していないか–ガートナーが流行解説
IT関連
2022-11-04 06:52
NTTデータ、全銀ネットの障害対応を説明–根本原因にめども「包括的な点検が必要」
IT関連
2023-11-08 11:01
神戸製鋼所、日本IBMおよびキンドリルとDXパートナーシップを締結
IT関連
2022-04-23 05:08
エムティーアイ、経費/交通費精算をデジタル化–申請にかかる時間が約7割減
IT関連
2022-03-19 01:46
Box、仮想ホワイトボードツール「Box Canvas」を正式リリース
IT関連
2023-04-29 15:33
長引くテレワーク、オフィス復帰には“出勤練習”が必要に?
IT関連
2021-07-03 19:18
日本オラクル、基幹システムのクラウド化を加速する事業戦略を表明
IT関連
2021-07-09 15:48
AI悪用の誤情報が今後2年で最大の世界的リスクに–WEF
IT関連
2024-01-21 22:27