音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech

今回は「音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech」についてご紹介します。

関連ワード (抽出、新規性、頭部等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 米マサチューセッツ大学アマースト校、米Adobe Research、中国Huya Incによる研究チームが開発した「」は、音声に合った顔と頭の動きを生成する深層学習フレームワークだ。音声信号と顔の静止画像から、音声と同期した表情と頭部のアニメーションを生成する。実際の顔写真やアニメキャラクター、手描きスケッチまで、さまざまな顔に対応可能だ。

 今回の手法は、音声とアニメーションの中間表現として、入力した顔画像から唇、顎、眉毛、鼻、頭のポーズなどの顔のランドマークを予測し、抽出したランドマークと音声信号で学習する。顔の表情と頭部の動きは別々に学習し、後で統合する仕組みだ。

 アニメーション合成に用いる手法としては、写実的な顔に対しては画像から画像へ変換する学習ネットワーク、非写実的な顔に対しては画像を歪ませる手法の2つのアルゴリズムを採用している。

 出力するアニメーションは、静止画像の顔を自然に動かし、あたかも話しているかのように錯覚させる。最先端の手法と比較しても、より表現力豊かで品質の高いアニメーションを実現したとしている。

Copyright © ITmedia, Inc. All Rights Reserved.

抽出(ちゅうしゅつ)の意味 - goo国語辞書

抽出(ちゅうしゅつ)とは。意味や解説、類語。[名](スル)1 多くの中からある特定のものを抜き出すこと。「名簿から該当者を無作為に抽出する」2 液体または固体の中から特定の物質を溶媒に溶かして取り出すこと。「花から精油を抽出する」 - goo国語辞書は30万4千件語以上を収録。政治・経済・医学・ITなど、最新用語の追加も定期的に行っています。

抽出 - Wikipedia

抽出(ちゅうしゅつ、extraction)とは、人類最古の化学的分離操作法で、植物など原料中に含まれている成分を選択的に分離する操作を指す。 固液抽出は、種子や葉など固体の混合物から、溶媒に溶出する成分を抽出する。液液抽出

抽出とは - コトバンク

化学辞典 第2版 - 抽出の用語解説 - 液体または固体試料に溶媒を加え,試料中の特定物質を選択的に溶媒相に移してほかの物質より分離すること.一般に,固体では抽出速度が遅いので,たとえばソックスレー抽出器などを用いた連続抽出が採用される.液-液抽出はきわめて広い応用範...

抽出(チュウシュツ)とは何? Weblio辞書

「抽出」の意味は 多くの中からある特定のものを抜き出すこと。Weblio国語辞典では「抽出」の意味や使い方、用例、類似表現などを解説しています。

「抽出」の類義語や言い換え-Weblio類語辞典

抽出の言い換えや別の言い方。・意義素類語潜在的であるか潜在的な状態から発達するか、進化する抽出家具についている箱状の容器引出し ・ 抽き出し ・ ドロア ・ 抽斗 ・ 抽出し ・ 引出 ・ 引き出し何かを取り出す動作(特に努力や力...

Weblio和英辞書 - 「抽出」の英語・英語例文・英語表現

「抽出」は英語でどう表現する?【単語】an abstraction...【例文】BEVERAGE EXTRACTION PACK...【その他の表現】sampling... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「抽出する」の類義語や言い換え | 一部を抜き取る・部分的に ...

抽出するの言い換えや別の言い方。・意義素類語全体のうちの一部分だけをそのまま抜き出すこと一部を抜き取る ・ 部分的に抜き取る ・ 抽出する ・ 抜粋する ・ 抜き書きする ・ 抄出する原材料などから必要な成分などを作り出すこと採り出す...

抽出の英訳|英辞郎 on the WEB

抽出 される. 句動. fall out. 自動. percolate (パーコレーターでコーヒーが). 単語帳への登録は「英辞郎 on the WEB Pro」でご利用ください。. 20,000件まで登録できます。.

Weblio和英辞書 -「抽出する」の英語・英語例文・英語表現

「抽出する」は英語でどう表現する?【単語】extract... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「スライサー」はデータ抽出の救世主!

 · クリック1つでデータを抽出する 「部署名」のスライサーを使ってデータを抽出してみましょう。「部署名」のスライサーには、「部署名」の列 ...

COMMENTS


Recommended

TITLE
CATEGORY
DATE
AI活用でランサムウェアの早期検知に挑むマイクロソフト
IT関連
2022-06-30 10:44
Denodo、2024年の重要施策やパートナー戦略を発表
IT関連
2024-02-01 17:58
日立製作所の中西会長が退任、東原社長が会長職を兼務
IT関連
2021-05-13 08:34
セントラル短資FX、顧客取引システムを刷新–処理速度を10倍以上高速化
IT関連
2023-12-14 11:21
AI導入を成功に導くための準備–押さえるべき3つの重要な視点
IT関連
2024-07-24 22:19
ICANN、プライベートネットワークで使うための公式トップレベルドメイン「.INTERNAL」を提案
ネットワーク
2024-01-31 16:37
インテック、化粧品メーカー伊勢半の基幹システムを刷新–DXへ一歩踏み出す
IT関連
2021-05-11 17:23
Next.js 13登場、動的なWebサイトの実現を強化。複数ページでの動的データの共有や、ステートを維持した共通ナビゲーションの構築など容易に。Next.js Conf 2022
JavaScript
2022-10-27 05:09
日立ハイテク、AIで半導体製造装置の生産計画立案を自動化
IT関連
2023-05-26 11:15
OpenAI、安全対策の最新情報を公開–従業員の内部告発を受け
IT関連
2024-07-25 05:28
米国株・最高値、日経平均は逆行安–日本株「買い場」と考える理由
IT関連
2021-07-26 17:12
[速報]オラクル、シングルラックでOracle Cloudと同等の機能を備えたハードウェアを開発中。Oracle CloudWorld 2022
Oracle
2022-10-20 02:39
[速報]VMware Cloud Universal発表、マルチクラウドの料金支払いをVMwareが一本化へ
VMware
2021-04-01 08:03
家庭用性感染症検査キットを提供しSTI検査の敷居を下げる米TBD Health
IT関連
2022-02-02 03:26