即興演奏システムJamSketchにおける 旋律生成手法の改善

2023年人工知能学会全国大会

Transcript

1. 即興演奏システム 即興演奏システムJamSketch JamSketchにおける における 旋律生成手法の改善 旋律生成手法の改善 ◦北原 鉄朗（日本大学文理学部） JamSketch とは 旋律の大まかな形（旋律概形）を描くと、即座に それに沿った旋律を生成する即興演奏システム 昨年度（JSAI2022）の発表内容 旋律生成部を CNN で作り直す 旋律 概形 旋律 ch time conv. conv. time ch deconv. time deconv. ch 問題点 & 解決に向けて 非専門家は、ザックリすぎる 旋律概形を描きがち（左図） (i) 旋律概形をシステムが作り直す (ii) 旋律概形をシステムが生成・表示し、 ユーザがなぞれるようにする 提案手法 旋律概形をVAEで学習 旋律概形 conv. ch time LSTM LSTM time ch deconv. 旋律概形 エンコーダ デコーダ 潜在空間 使い方 (i) ユーザが描いたザックリした旋律概形を入力して旋律概形を再生成する (ii) 潜在空間の1点をランダムに決めて、旋律概形を生成する 実行例 （抜粋） (i) (ii) 問題点 (i) 元の旋律概形とかなり変わる • ユーザの描いたものに沿った とは言えなくなっている • 「概形→旋律」の学習方法を 改めた方がいい可能性も (ii) ユーザが描くのに適したもの が生成できているかは疑問 • 概形の粒度の調整が必要