| 講演抄録／キーワード |
| 講演名 |
2010-12-16 14:15
楽曲を演奏しているように見える動画の自動生成
○山本知大・水井健太・岡部 誠・尾内理紀夫（電通大） |
| 抄録 |
（和） |
本研究は，入力された音楽に合わせてウェブ上の動画を自動的に切り貼りすることで，音楽をあたかも演奏しているような動画を自動生成する手法を提案する．この手法を実現するための先駆けとして，今回はバイオリンソロの演奏を想定し実装，実験を行う．従来，複数の動画を切り貼りして新しい動画を自動生成する手法は多数存在するが，楽曲演奏と映像を，音符単位の細かさで同期させて自動生成された動画はなかった．提案手法は，入力音楽を適切な長さの断片に分割し，データベース内の動画を検索し各断片に割り当てることで動画を生成する．本手法によって，音楽を聴覚だけでなく，視覚的にも楽しむための支援を試みる． |
| （英） |
We propose the method to automatically synthesize a video, where a player looks like playing a user-specified music. Our current target performance is violin solo. We first create a video database of violin solo performance. For each video, we analyze its music and extract the timing of each note. Given an input music, we divide it into fragments and analyze timings of notes. For each fragment, the timing information is used to search for an appropriate video from the database. We render the final animation applying time warping. We demonstrate our method can synthesize a fake performance video of various types of violin solo music. |
| キーワード |
（和） |
音楽 / 動画処理 / 動的時間伸縮法 / / / / / |
| （英） |
music / audio and visual processing / Dynamic time warping / / / / / |
| 文献情報 |
映情学技報, vol. 34, no. 54, ME2010-168, pp. 21-24, 2010年12月. |
| 資料番号 |
ME2010-168 |
| 発行日 |
2010-12-09 (ME) |
| ISSN |
Print edition: ISSN 1342-6893 |
| PDFダウンロード |
|