Share
Embed
SIGMUS124-Yamamoto
2019年8月28日に開催された第124回情報処理学会音楽情報科学研究会(夏のシンポジウム)での発表スライドです.
Yuya Yamamoto
August 28, 2019
Transcript
56 slides
-
Վ͍͍͢ɾՎ͍ʹ͍͘ 歌いやすい歌と歌いにくい歌がある たとえば・・・ Վ͍͍͢ۂ ある⽇〜森の中〜 くまさんに〜出会った〜♪ 花咲く森の道〜♪ くまさんに出会った〜♪ (⾼くないしわかりやすいメロ
ディ!歌いやすいね!) さっきまで俺⼀⼈ あんた思い出してたとき シャイなハートにルージュの⾊が ただ浮かぶ〜♪ (⾼いし急に⾶ぶとこあるし なんだこのメロディ!歌いにくい!) 歌いにくい曲 例:森のくまさん(童謡) 例:勝⼿にシンドバッドBメロ (サザンオールスターズ) -
˞Πϝʔδ Վ͍ʹ͘͞ͷԽ Վ͍ʹ͘͞ ͷࢉग़ .*%*σʔλ ೖྗ ͪ͜Β Վ͍͢͞ɾՎ͍ʹ͘͞ʹΑΔָۂݕࡧ Վ͍͍͢
ԻҬΊ ͷͼͷͼͨ͠ ϝϩσΟ ՎএۂਪનγεςϜ ར༻ ʮࣗʹ߹͏Վʯ͕୳ͤΔΑ͏ʹͳΔʂʁ 難易度:6 ⾳域⾼い Bメロが複雑 -
˞Πϝʔδ Վ͍ʹ͘͞ͷԽ Վ͍ʹ͘͞ ͷࢉग़ .*%*σʔλ ೖྗ ͪ͜Β Վ͍͢͞ɾՎ͍ʹ͘͞ʹΑΔָۂݕࡧ Վ͍͍͢
ԻҬΊ ͷͼͷͼͨ͠ ϝϩσΟ ՎএۂਪનγεςϜ ʮࣗʹ߹͏Վʯ͕୳ͤΔΑ͏ʹͳΔʂʁ 難易度:6 ⾳域⾼い Bメロが複雑 Ͳ͏ͬͯՎ͍ʹ͘͞Λ ࢉग़͢Δ͔ʁ ར༻ -
ָثԋͷқʹؔ͢Δݚڀ • ϐΞϊͷԋқ<$IJV> <4FCBTUJFO> • Ϊλʔͷԋқ<ా > <ᜊ౻ > •
͍ͣΕָේσʔλ͔Βқʹد༩͢ΔಛΛࡦఆ͢Δ͜ͱʹΑΓ ָۂͷқఆΛ࣮ݱ͍ͯ͠Δ ؔ࿈ݚڀ -
ָثԋʹൺݚڀࣄྫ͕গͳ͍ • ͓͡͞ΜͷՎ͍ʹ͍͘Վ<ଜඌ > • ͓͡͞ΜʹͱͬͯϝϩσΟʹର͢ΔՎࢺͷׂΓͯΞΫηϯτϙΠϯτΛ ͍ͯ͠ΔָۂՎ͍͍͢ • Վ͍ܧ͕ΕΔՎএڭࡐͷಛ<ླ >
΄͔ • ఆྔతͳੳ·Ͱ͍ͯ͠ͳ͍ 㱺Վ͍ʹ͘͞ͷఆྔతͳԻָతཁҼʹ͍ͭͯΑΓ͡Δඞཁ͋Γ Վএͷқʹؔͯ͠ -
ͳΔ͘ଟ͘ͷࢀՃऀ͕ͯ͢Վ͑ΔΑ͏ҎԼͷۂΛબఆ ࣮ݧ༻ָۂ 楽曲名 アーティスト名 テンポ (BPM) Lemon ⽶津⽞師 87
ultra soul Bʼz 126 キセキ GReeeeN 92 チェリー スピッツ 97 世界に⼀つだけの花 SMAP 100 前前前世 RADWIMPS 190 天体観測 BUMP OF CHICKEN 165 恋 星野源 158 粉雪 レミオロメン 87 ⼩さな恋のうた MONGOL800 220 -
ͲͷΑ͏ʹ͔͔ͬͨ͠ͷ߲ メロディが複雑 テンポが速い ⾳の跳躍がある 肺活量を求められる (息継ぎタイミングの間隔・ ロングトーン) ⾃分の⾳域に合っていない 歌詞が発⾳しづらい
リズムが複雑 特殊奏法がある リズムが細かい その他(⾃由回答) [⼭本 2019],[⾼⼭ 2013]などを参考に項⽬を考え設定 -
༻͍ΔԻָಛྔ 特徴量名 この特徴量が ⼤きいと? ⾳⾼平均 曲の⾳域が 全体的に⾼い ⾳⾼メジアン 曲の⾳域が
全体的に⾼い 最⾼⾳ 最も⾼い⾳が ⾼くなる 最低⾳ 最も低い⾳が ⾼くなる ⾳域区間⻑ ⾳域が広い Weighted Pitch Count Sum 無理のある ⾳域が⻑く続く ピッチ エントロピー 幅広い⾳域で 満遍ない⾳⾼ 特徴量名 この特徴量が ⼤きいと? 跳躍進⾏割合 急な⾳の上下 が多い 上⾏跳躍進⾏ 割合 急な⾳の 上がりが多い 下⾏跳躍進⾏ 割合 急な⾳の 下がりが多い 旋律進⾏⽅向 変化割合 ジグザグな メロディライン Leaping Register 裏声と地声の ⾏き来が激しい Moving with Same Direction メロディが せわしく感じる 特徴量名 この特徴量が ⼤きいと? テンポ 速い タイの数 シンコペー ションが多い ⾳価変化割合 ⾳の⻑さが よく変わる ⾳価 エントロピー ⾳の⻑さの 種類が多い ⾳価平均 ⾳の⻑さが 全体的に⻑い ⾳価密度 ⾳が詰まって いる -
ָۂ͕Ͳͷఔ͍͔͠ • ૬ؔੳɿқͱ૬͕ؔ͋Δಛྔʹݸਓࠩ͋Δ͔ʁ • ॏճؼੳɿқࢉग़Ϟσϧ ָۂ͕ͲͷΑ͏ʹ͍͔͠ • ָۂɾ͠͞ͷ࣭߲ͷੳ
• Իָಛྔͱ࣭߲ͷؔੑ ੳख๏ -
ָۂ͕Ͳͷఔ͍͔͠ • ૬ؔੳɿқͱ૬͕ؔ͋Δಛྔʹݸਓࠩ͋Δ͔ʁ • ॏճؼੳɿқࢉग़Ϟσϧ ָۂ͕ͲͷΑ͏ʹ͍͔͠ • ָۂɾ͠͞ͷ࣭߲ͷੳ
• Իָಛྔͱ࣭߲ͷؔੑ ੳख๏ -
ੳ ॏճؼੳ ࢀՃऀ͝ͱʹॏճؼϞσϧΛߏங • తɿָۂͷՎএқࢉग़Λߦ͏ϞσϧΛߏங • Ϟσϧͷ֓ཁ • తมɿқධՁɼઆ໌มɿԻָಛྔ
• આ໌มͷબɿ"*$Λج४ͱ͢ΔεςοϓϫΠζ๏ • ݕূํ๏ɿϞσϧͷܾఆͱબ͞Εͨઆ໌มΛ֬ೝ -
• ܾఆ͕Ҏ্ͱͳͬͨ ࢀՃऀ໊த໊ • ͦΕͧΕͷқධՁʹ ૬͕ؔΈΒΕͨಛྔ͕ આ໌มʹબ ੳ݁Ռ 参加者
No. 選択された変数, ()内は回帰係数 切⽚ 決定係 数 1 旋律⽅向変化割合(2.262), BPM(0.017), 最⾼⾳(0.178), ピッチエントロピー(1.514) -13.29 0.528 2 下降跳躍割合(4.817), LR(0.085), 上向跳躍割合(9.698), ⾳価平均(- 1.846) 2.83 0.765 3 WPCS(0.359), BPM(0.299), ⾳⾼平均(0.447), 下降跳躍割合(11.28), LR(0.054) -30.53 0.753 4 旋律⽅向変化割合(3.193), ⾳域(-0.202), タイの数(-0.061) 7.345 0.337 5 旋律⽅向変化割合(2.735), 下降跳躍割合(6.249) 3.789 0.456 6 タイの数(-0.143), ピッチエントロピー(2.897) LR(0.098), 最⾼⾳(- 0.151), ⾳価エントロピー (0.723) 8.51 0.737 7 LR(0.048), BPM(0.011), 下降跳躍割合(5.178) 1.967 0.421 8 ⾳⾼平均(0.254), ⾳価エントロピー(2.198) -13.51 0.485 9 ピッチエントロピー(1.681), タイの数(-0.055) 1.883 0.178 10 ⾳価密度(0.035), ⾳価平均(3.558), 最⾼⾳(0.179), ⾳価エントロピー (1.409) -18.38 0.507 11 最⾼⾳(0.196) -8.201 0.237 12 下降跳躍割合(15.66), ⾳域(-0.436), ピッチエントロピー(4.516) -1.653 0.512 -
ָۂ͕Ͳͷఔ͍͔͠ • ૬ؔੳɿқͱ૬͕ؔ͋Δಛྔʹݸਓࠩ͋Δ͔ʁ • ॏճؼੳɿқࢉग़Ϟσϧ ָۂ͕ͲͷΑ͏ʹ͍͔͠ • ָۂɾ͠͞ͷ࣭߲ͷੳ
• Իָಛྔͱ࣭߲ͷؔੑ ੳख๏ -
ੳ ݁Ռ ʵָۂͷΫϥελੳʵ "ɿಛචͨ͠ཧ༝ͳ͠ ේྫ ੈքʹͻͱ͚ͭͩͷՖ αϏ 簡単で難しい理由が特にない 世界にひとつだけの花
粉雪Aメロ 簡単ではないが,特筆した理由なし? ultra soul Aメロ 前前前世 Aメロ チェリーBメロ -
ੳ ݁Ռ ʵָۂͷΫϥελੳʵ #ɿԻҬ͕߹͍ͬͯͳ͍ ේྫ VMUSBTPVMαϏ ԻҬNJE$dIJ$ͱɼஉʹߴ͍ ⾼い キセキ
チェリー サビ Ultrasoul サビ 低い ⼩さな恋のうた Bメロ -
ੳ ݁Ռ ʵָۂͷΫϥελੳʵ $ɿ༂ਐߦཱ͕ͭ ේྫᶃ ఱମ؍ଌ#ϝϩ ༂ਐߦ͕ଟ͘ɼԻΛͯΔͷ͕͍͠ 跳躍進⾏が多い 天体観測
恋サビ ⼩さな恋のうたAメロ ⼀箇所歌いにくい 跳躍進⾏がある 粉雪 サビ ⼩さな恋のうた サビ -
ੳ ݁Ռ ʵָۂͷΫϥελੳʵ $ɿ༂ਐߦཱ͕ͭ ේྫᶄ คઇαϏ ༂ਐߦগͳ͍͕ʮ͜ͳΏ͖ Ͷ͑ʯ ͷ෦Λग़͢ͷ͍͠
跳躍進⾏が多い 天体観測 恋サビ ⼩さな恋のうたAメロ ⼀箇所歌いにくい 跳躍進⾏がある 粉雪 サビ ⼩さな恋のうた サビ -
ੳ ݁Ռ ʵָۂͷΫϥελੳʵ %ɿෳࡶ ේྫ VMUSBTPVM#ϝϩ Իͷ্͕Γํ͕มଇతͰ ෳࡶʹײ͡Δ 複雑
前前前世 Bメロ・サビ Lemon 恋 Aメロ・Bメロ ultra soul Bメロ -
֤ࢀՃऀͷΫϥελผқධՁ 0 1 2 3 4 5 6 7
No.1 No.2 No.3 No.4 No.5 No.6 No.7 No.8 No.9 No.10 No.11 No.12 難易度評価平均 実験参加者別 クラスタA(理由なし) クラスタB(⾳域) クラスタC(跳躍) クラスタD(複雑さ) -
ཧ༝ͳ͠ " ͷқධՁ͕͍ 0 1 2 3 4 5
6 7 No.1 No.2 No.3 No.4 No.5 No.6 No.7 No.8 No.9 No.10 No.11 No.12 難易度評価平均 実験参加者別 クラスタA(理由なし) クラスタB(⾳域) クラスタC(跳躍) クラスタD(複雑さ) -
ԻҬ # ͔ෳࡶ͞ % ্͔͕Ґ 0 1 2 3
4 5 6 7 No.1 No.2 No.3 No.4 No.5 No.6 No.7 No.8 No.9 No.10 No.11 No.12 難易度評価平均 実験参加者別 クラスタA(理由なし) クラスタB(⾳域) クラスタC(跳躍) クラスタD(複雑さ) 各参加者ごと難易度評価が 最も⾼いクラスタをハイライト -
• Ϋϥελ̏ ˠ༂ɾԻҬɾෳࡶ͞ • Ϋϥελ̐ ˠ༂ɾԻҬɾϝϩσΟͷෳࡶ͞ ɾͦͷଞͷཁҼ ˞ճ͕ͳ͔ͬͨಛघ๏আ֎ ੳ݁Ռʵཧ༝߲ͷΫϥελੳʵ
メ ロ デ が 複 雑 リ ズ ム が 複 雑 テ ン ポ が 速 い リ ズ ム が 細 か い 肺 活 量 歌 詞 が 発 ⾳ し に く い 跳 躍 が あ る ⾳ 域 が 合 わ な い -
• ΑΓେنͳ࣮ݧͷ࣮ࢪ • ΑΓଟ͘ͷָۂɾࢀՃऀ • қࢉग़Ϟσϧͷ࠶ߟ • ΈɾهԱͷӨڹΛͲ͏ΈࠐΉ͔ • ಛநग़ͷख๏ʹ͍ͭͯ
• ՎএқʹΑΔָۂݕࡧγεςϜͷ࣮ ࠓޙͷ՝ɾల -
·ͱΊ Վ͍ʹ͘͞ΛఆྔԽɾԽ͢Δख๏ͷݕ౼ ओ؍తқධՁʴָේσʔλ͔ΒͷԻָಛྔநग़ ࣮ݧͷख๏ରͷ࠶ߟɾқࢉग़Ϟσϧͷݕ౼ɾಛͷՃɼ՝ଟ͍ ①どの程度難しい? • 相関分析:歌いにくさの感 じ⽅に個⼈差あり •
重回帰分析:⼈により決定 係数の値の良し悪しに差あ り ②どのように難しい? • 対応分析・クラスタ分析: 歌いにくさの主たる要因は 跳躍・⾳域・複雑さに⼤別 • 相関分析:⾳楽特徴量と難 しさの関係を分析 -
<$IJV>$IJV 4$ $IFO .4 "TUVEZPOEJGGJDVMUZMFWFMSFDPHOJUJPOPGQJBOPTIFFUNVTJD*&&&*OUFSOBUJPOBM4ZNQPTJVNPO.VMUJNFEJB QQ <4FCBTUJFO>4ÉCBTUJFO 7
3BMBNCPOESBJOZ ) 4ÉCBTUJFO 0$POSVZU / 4DPSFBOBMZ[FS"VUPNBUJDBMMZEFUFSNJOJOHTDPSFTEJGGJDVMUZ MFWFMGPS JOTUSVNFOUBMFMFBSOJOHUI*OUFSOBUJPOBM4PDJFUZGPS.VTJD*OGPSNBUJPO3FUSJFWBM$POGFSFODF *4.*3 QQ <ᜊ౻ >ᜊ౻෫ੜ ౡా ాଜྑ Ϊλʔ࿅शࢧԉγεςϜͷͨΊͷϑϨʔζқධՁใॲཧֶձݚڀใࠂԻָใՊֶ .64 <ా >ాՖ খઘ༔അ ҏ౻ࠀ ڭଇຊΛར༻ͨ͠ΪλʔϑϨʔζͷқਪఆใॲཧֶձୈճશࠃେձߨԋจू <ଜඌ >ଜඌኍ ͓͡͞ΜͷՎ͑ͳ͍एऀͷՎຊԻָڭҭֶձશࠃେձ ԙւಓڭҭେֶࡳຈߍ ޱ಄ൃදࢿྉ <ླ >ླবҏ౻ҁ Վএڞ௨ڭࡐͷཤमͱपͷঢ়گΛௐࠪ͢ΔՎ͍ܧ͕ΕΔۂͷՁ ʹؔ͢Δߟࢁܗେֶ ʰࢁܗେላلཁڭҭՊላʱ <ߴࢁ >ߴࢁത ϙϐϡϥʔԻָ࡞ۂͷͨΊͷટ๏ ௌ͘ਓͷ৺ʹڹ͘ϝϩσΟϥΠϯͷ࡞ΓํϦοτʔϛϡʔδοΫ <ԣࢁ >ԣࢁਅஉ FUBM ώοτνϟʔτϥϯΩϯά্ҐʹೖΔָۂͷಛੳใॲཧֶձݚڀใࠂԻָใՊֶ .64 <ϨίνϣΫ > ϨίνϣΫ қผΧϥΦέఆ൪ IUUQTSFDPDIPLVKQTQFDJBM <ࢁຊ > ࢁຊ༤ ฏլৡ ϙϐϡϥʔԻָͷՎএʹ͓͚Δओ؍తқͱԻָతཁҼͷௐࠪຊԻָ֮ೝֶձ य़قݚڀൃදձ QQ <ङ >ङ༟ ࡾӜຑࢠ άϥϑΟΧϧଟมྔղੳʕ".04ɺ&24ɺ$"-*4ʹΑΔ ͰݟΔڞࢄߏੳݱֶࣾ ࢀߟจݙ -
• ࠷దͳΩʔઃఆΛ͍ͬͯΔͱ͕͔͔࣌ؒΔ • ԻҬͷཁҼΛर͑ͳ͘ͳΔ • ԻҬ͕ߴ͍͜ͱʹ͔Γ͕͍͔͘ͱࢥ͍͖ͦ͏Ͱͳͦ͞͏ɼ ཪʹͯ͠ආ͚Δ͜ͱͰߴ͍ͱ͍͏ཁҼ͕ͦ͜·Ͱڧ͘ͳ͘ͳͬͨࢀՃऀ ݟΒΕͨɽ͜ΕΩʔΛ͍͡Εଊ͑ΒΕͳ͔ͬͨ݁ՌͰ͋Δͱߟ͑Δ • ݪۂΩʔͰͳ͍ͱՎ͑ͳ͍ਓ͍ͨ
• ࢀՃऀ͝ͱʹΩʔ͕Β͖ͭɼಛྔͷ͕ࢀՃऀ͝ͱʹมΘΔ • ੳ͕ෳࡶʹͳΔ ݪۂΩʔʹͨ͠ཧ༝