| 講演抄録／キーワード |
| 講演名 |
2022-03-08 09:54
CGアバターを利用するライブストリーミングを想定した効果音付与システムの試作
○村上 輝・伊藤彰教（東京工科大） |
| 抄録 |
（和） |
本研究ではCGアバターを利用したライブストリーミングを想定し，動作に反応してリアルタイムに効果音を再生するツールのプロトタイプ制作を実施した．3本のVTuberのライブストリーミングについて動作に着目して分析し，7種類の繰り返される動作や特徴的な動作を確認した．その1つである小さく左手を振る動作についての分析によって，この動作はz軸回転が一定周期で発生し，角速度はおおよそ0を中心に周期的に変化していることが確認された．結果をもとに動作検出に応じた効果音再生システムのプロトタイプをVIVE Pro 2を使用して制作した．作成したプロトタイプによって，動作に伴った効果の再生を確認した．また，HoloLens 2へ一部機能の移植を実施し考察した． |
| （英） |
In this study, we created a prototype of a tool that plays sound effects in real time in response to the actions of a CG avatar. We analyzed three VTuber live streams focusing on the actions and confirmed seven types of repeated actions and characteristic actions. The analysis of one of the movements, a small wave of the left hand, showed that the z-axis rotation occurred with a fixed period, and the angular velocity changed periodically around 0. Based on the results, we created a prototype that detects the motion and plays a sound effect using VIVE Pro 2. Using the prototype, we confirmed that the sound effect was played back along with the movement. We also ported some of the functions to HoloLens 2 and discussed them. |
| キーワード |
（和） |
CGアバター / VTuber / モーションキャプチャー / Unity / 効果音 / / / |
| （英） |
CG Avatar / VTuber / Motion Capture / Unity / Sound Effect / / / |
| 文献情報 |
映情学技報, vol. 46, pp. 17-20, 2022年3月. |
| 資料番号 |
|
| 発行日 |
2022-03-01 (AIT) |
| ISSN |
Print edition: ISSN 1342-6893 Online edition: ISSN 2424-1970 |
| PDFダウンロード |
|