2020年度実習テーマ：
オンライン映像情報によるAI合成器の制御

受入部門

技術本部 研究開発統括部 第1研究開発部 音源グループ

実習内容

オンライン映像情報によるAI合成器の制御

VOCALOID:AIとインターフェースとしての映像情報の入力を組み合わせて、創造的な音楽制作が可能な歌唱表現の制御方法を研究します。VOCALOID:AIはAI技術を用いた歌声合成器であり、訓練データの歌手の特徴をよく再現した自然な歌声を合成することができます。一方で、AI歌手と人間のクリエイターとが協力して創造的な音楽制作を実現するためには、人間からAI歌手に音楽的な意図を伝達する必要があります。本テーマでは、カメラ映像から抽出できる情報を映像情報として用い、音楽的意図を伝達する方法を研究します。

面接選考日程

1/6（水）15:30～18:00

実習期間

2/8（月）～2/19（金）

実習場所

ご自宅

望ましい学科系列

情報系、理系全般

望ましい専門知識

• 深層学習等のAI技術を使った画像処理、認識技術に関する知識および技術を活用した経験
• 歌唱あるいは楽器演奏経験
• デジタル信号処理技術

テーマ別質問

映像という手段で音楽を意図どおりに操るにはどのような映像が適しているでしょうか。またその映像のどんな情報を活用すべきでしょうか。