人が弾くピアノに合わせて演奏する仮想バイオリニスト 他者演奏の音声から演奏の動きと音を自動作成 :Innovative Tech

今回は「人が弾くピアノに合わせて演奏する仮想バイオリニスト 他者演奏の音声から演奏の動きと音を自動作成 :Innovative Tech」についてご紹介します。

関連ワード (分間、前提、生成等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、It Media News様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 中央研究院資訊科学研究所とKoKo Labによる中国研究チームが開発した「」は、人の演奏とセッションするバーチャルミュージシャンを作り出すフレームワークだ。人が弾くピアノのテンポに合わせて、バーチャルミュージシャンがバイオリンを演奏する。

 今回の手法では、演奏の音声だけを手掛かりにバーチャルミュージシャンの動きとサウンドを生成し、人間と共演させる。

 演奏する楽曲には、基準となるピアノとバイオリントラックが含まれていることを前提とする。演奏者はリファレンス音源用として、事前にピアノパートのみを録音しておく。ライブ演奏時は、マイクでピアノ音をモニタリングし、リファレンストラック上のどこを演奏しているかをモニター。分析結果からバイオリンパートがどのように演奏されるべきかを推定し、バーチャルミュージシャンの体の動きとサウンドを生成する。

 演奏の動きは、バイオリン演奏のミュージックビデオデータセットを用い、モーションデータを収集し生成モデルを学習させている。生成されたスケルトンデータは、3次元の人間用リギングモデルと、バイオリン本体と弓から構成するバイオリンモデルに割り当てる。

 デモでは、観客120人が参加したライブコンサートで、ベートーベンのバイオリン・ソナタ第5番「春」を演奏。約10分間に及ぶ演奏の全てで安定して動作し、観客からは高評価を得たという。

 。

Copyright © ITmedia, Inc. All Rights Reserved.

デリヘル情報 デリヘル1分間!

全国のデリヘルを地域別に検索できるデリヘル情報サイト。自宅やホテルに出張できる派遣型ヘルスをご紹介しています。ホテヘルなどの風俗も一緒に検索できます。

フリーメールアドレス発行のクイックメール(15分間 ...

メールの送信は1分間に1通しか送れませんので、返信メールを送った場合には1分間経過した後に返信メールをお送りください。(SPAM送信対策) クッキー及びJAVAscriptを使用しております、クッキー及びJavaScriptがご利用になれない ...

【10分間】サッカー長友選手も行う体幹トレーニング!10 …

サッカー日本代表の長友佑都選手もが行っている体幹トレーニングです!体幹(軸)がしっかりしてくるとトレーニングをより効果的に行えるようになったり、スポーツのパフォーマンスの向上なども見込めます。10分間がしんどいと感じたら、少し時間を短くしたり種目を減らすなど工夫してやってみてください。◆今回行ったトレーニング⇩①...

子どもと一緒にできる4分間トレーニング#コアキッズ体操 ...

◆身体のお悩みは鍼灸院RootsKOBEへhttps://roots-kobe.com◆ツイッター↓トバン https://twitter.com/toban_Fitnessにしくんhttps://twitter.com/Nissy_Fitness◆インスタ↓トバン https://www.instagram.c...

30Minutes Networking - BIGLOBE

3分間ネットワーキングが「3分間ネットワーク基礎講座」シリーズとして書籍化されました since 11th March 2002 30 Minutes NetWorking [Roads to Node] 管理人:aji-ssz(at)selene.is.dream.jp ...

アクセス | 筑波山ケーブルカー&ロープウェイ

電車・バスで行く 上記のほか、茨城空港からは「関東鉄道 茨城空港-つくば線 つくばセンター行」で … 続きを読む →

30分間HTML入門 -- ごく簡単なHTMLの説明 - KANZAKI

 · HTMLは決して難しいものではありません。基本的なことがらなら、30分で概要を理解することだって可能です。そして、その基本だけで、十分ウェブページを書くことができるのです(ここでは、より広い可能性を持つXHTMLの書き方に準じて説明します)。

3分間電話の日 | SmartNews 今日は何の日

 · 1月30日は「3分間電話の日」。1970(昭和45)年1月30日、公衆電話の市内通話電話料金が「3分10円」に定められたことに由来する。それまでは1通話10円で、時間は無制限だったため、公衆電話での長話を制限するために ...

3 Minutes Networking - BIGLOBE

3分間ネットワーキングが「3分間ネットワーク基礎講座」シリーズとして書籍化されました 特別講座 特別第1回 ネットワークインタフェース層 RFC1149 特別第2回 telnetオプション Randomly-Lose 特別第3回 IP over SFSS 特別第47回 レイヤ3&4 ...

東海道分間絵図 - 国立国会図書館デジタルコレクション

縮尺は三分一町(12,000分の1)と明示されており、表題の「分間」は何分何間の略で、今日の縮尺という語に相当する 目次・巻号 ↓ 東海道分間絵図 ・ 第1帖 [23] ・ 第2帖 [23] ・ 第3帖 [28] ・ 第4 ・ 第5帖 [22] 書誌情報 簡易表示 永続的 ...

COMMENTS


Recommended

TITLE
CATEGORY
DATE
富士ソフト、AI開発を効率化する「自動アノテーションサービス」を提供
IT関連
2024-03-15 23:13
グーグルがスマホのカメラだけで心拍数と呼吸数を測定できる機能を3月より順次提供開始
ヘルステック
2021-02-07 10:15
オーシャンテックを育てるOcean Solutions Acceleratorが2021年から後期段階のスタートアップも対象に
EnviroTech
2021-04-11 11:53
GitHub.comにSBOM生成ツールが登場。誰でも無償でSBOMファイル作成、パブリックリポジトリならユーザーでも自由に作成可能
GitHub
2023-04-10 01:32
災害時にEV無償貸与 宮城・山元町と宮城三菱自販が協定
IT関連
2021-01-19 18:27
医療業界がランサムウェア攻撃の標的に–TXOne、OT領域における脅威動向を解説
IT関連
2024-02-08 22:57
PDFを「Excel」スプレッドシートに変換するには
IT関連
2022-08-16 13:09
クラウドサービス利用で考えること–ビジネスと融合したITとスピードの視点
IT関連
2021-05-28 03:31
リモートセンシング技術のスカイマティクスが13億円のシリーズB調達、セールス・マーケティング・人材採用を強化
IT関連
2022-03-03 06:44
5Gを“塗って吸収” 電波の反射を抑える塗料 用途は「通信設備の軽量化」?
くわしく
2021-06-24 12:04
都内でも“国立”は再開 緊急事態宣言の対応割れた博物館、美術館
くらテク
2021-05-11 04:20
AIで泳ぎの映像を自動編集、スイミング上達に活用 ルネサンスが水泳教室で新サービス
ロボット・AI
2021-02-09 07:15
DXプロジェクトを進める中堅企業3社の現場が語る工夫と悩み
IT関連
2022-09-13 03:58
日本企業のクラウド利用率、2020年から4ポイント増の22%–ガートナー調査
IT関連
2021-06-16 15:55