音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech

今回は「音声に合わせ顔の動きを深層学習で作成 Adobeなど「MakeItTalk」開発 :Innovative Tech」についてご紹介します。

関連ワード (抽出、新規性、頭部等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 米マサチューセッツ大学アマースト校、米Adobe Research、中国Huya Incによる研究チームが開発した「」は、音声に合った顔と頭の動きを生成する深層学習フレームワークだ。音声信号と顔の静止画像から、音声と同期した表情と頭部のアニメーションを生成する。実際の顔写真やアニメキャラクター、手描きスケッチまで、さまざまな顔に対応可能だ。

 今回の手法は、音声とアニメーションの中間表現として、入力した顔画像から唇、顎、眉毛、鼻、頭のポーズなどの顔のランドマークを予測し、抽出したランドマークと音声信号で学習する。顔の表情と頭部の動きは別々に学習し、後で統合する仕組みだ。

 アニメーション合成に用いる手法としては、写実的な顔に対しては画像から画像へ変換する学習ネットワーク、非写実的な顔に対しては画像を歪ませる手法の2つのアルゴリズムを採用している。

 出力するアニメーションは、静止画像の顔を自然に動かし、あたかも話しているかのように錯覚させる。最先端の手法と比較しても、より表現力豊かで品質の高いアニメーションを実現したとしている。

Copyright © ITmedia, Inc. All Rights Reserved.

抽出(ちゅうしゅつ)の意味 - goo国語辞書

抽出(ちゅうしゅつ)とは。意味や解説、類語。[名](スル)1 多くの中からある特定のものを抜き出すこと。「名簿から該当者を無作為に抽出する」2 液体または固体の中から特定の物質を溶媒に溶かして取り出すこと。「花から精油を抽出する」 - goo国語辞書は30万4千件語以上を収録。政治・経済・医学・ITなど、最新用語の追加も定期的に行っています。

抽出 - Wikipedia

抽出(ちゅうしゅつ、extraction)とは、人類最古の化学的分離操作法で、植物など原料中に含まれている成分を選択的に分離する操作を指す。 固液抽出は、種子や葉など固体の混合物から、溶媒に溶出する成分を抽出する。液液抽出

抽出とは - コトバンク

化学辞典 第2版 - 抽出の用語解説 - 液体または固体試料に溶媒を加え,試料中の特定物質を選択的に溶媒相に移してほかの物質より分離すること.一般に,固体では抽出速度が遅いので,たとえばソックスレー抽出器などを用いた連続抽出が採用される.液-液抽出はきわめて広い応用範...

抽出(チュウシュツ)とは何? Weblio辞書

「抽出」の意味は 多くの中からある特定のものを抜き出すこと。Weblio国語辞典では「抽出」の意味や使い方、用例、類似表現などを解説しています。

「抽出」の類義語や言い換え-Weblio類語辞典

抽出の言い換えや別の言い方。・意義素類語潜在的であるか潜在的な状態から発達するか、進化する抽出家具についている箱状の容器引出し ・ 抽き出し ・ ドロア ・ 抽斗 ・ 抽出し ・ 引出 ・ 引き出し何かを取り出す動作(特に努力や力...

Weblio和英辞書 - 「抽出」の英語・英語例文・英語表現

「抽出」は英語でどう表現する?【単語】an abstraction...【例文】BEVERAGE EXTRACTION PACK...【その他の表現】sampling... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「抽出する」の類義語や言い換え | 一部を抜き取る・部分的に ...

抽出するの言い換えや別の言い方。・意義素類語全体のうちの一部分だけをそのまま抜き出すこと一部を抜き取る ・ 部分的に抜き取る ・ 抽出する ・ 抜粋する ・ 抜き書きする ・ 抄出する原材料などから必要な成分などを作り出すこと採り出す...

抽出の英訳|英辞郎 on the WEB

抽出 される. 句動. fall out. 自動. percolate (パーコレーターでコーヒーが). 単語帳への登録は「英辞郎 on the WEB Pro」でご利用ください。. 20,000件まで登録できます。.

Weblio和英辞書 -「抽出する」の英語・英語例文・英語表現

「抽出する」は英語でどう表現する?【単語】extract... - 1000万語以上収録!英訳・英文・英単語の使い分けならWeblio英和・和英辞書

「スライサー」はデータ抽出の救世主!

 · クリック1つでデータを抽出する 「部署名」のスライサーを使ってデータを抽出してみましょう。「部署名」のスライサーには、「部署名」の列 ...

COMMENTS


Recommended

TITLE
CATEGORY
DATE
Trellix、2022年の10大セキュリティ事件を発表–第1位は大手外食チェーンの営業秘密の持ち出し
IT関連
2022-12-16 23:39
NEC、PC向けの顔認証機能をクラウドサービスで提供開始
IT関連
2021-07-20 02:48
Linuxを標的とする新たなステルス型マルウェア「Shikitega」が発見
IT関連
2022-09-09 07:16
ONE WEDGE、サーバーレス開発支援「Serverless ONE」を提供–文科省も業務活用
IT関連
2021-02-04 19:00
ドンキの格安小型ノートPCに新モデル メモリ8GBで3万2780円
製品動向
2021-04-21 15:31
IPA、ウェブサイトの脆弱性対策ガイドを8年ぶりに改訂
IT関連
2021-03-31 10:11
エディオン、Uber Eatsで家電のデリバリー 国内初
企業・業界動向
2021-03-26 01:34
防災ソリューションにおける具体的なセキュリティ対策
IT関連
2021-02-03 20:33
【コラム】いずれメタバースは、あなたをモニターし行動を操作する世話役AI「ELF」で埋め尽くされる
IT関連
2022-01-24 14:06
GitHub CopilotがAppleのXcodeに対応。「GitHub Copilot for Xcode」パブリックプレビュー
GitHub
2024-11-06 16:27
不動産売却プラットフォーム「いえうり」のNon Brokersが仲介手数料無料で家が買える「チョク買い」サービス開始
IT関連
2022-02-11 06:34
マイクロソフト、「iPad」向けの「Office」アプリをリリース
IT関連
2021-02-18 01:50
セキュリティを強化した企業や政府機関向け新型AndroidスマホをブラジルのSikurが発表
IT関連
2022-03-06 19:13
日本IBMが2021年のパートナー事業で投資拡大–構築/サービス分野のパートナーに注力
IT関連
2021-02-18 11:44