Share
Embed
Transcript
16 slides
-
ࠓͷϓϨθϯͷఆରऀ 2 • ·ͬͨ͘ത࢜ޙظ՝ఔʹڵຯ͕ͳ͍ਓ • -> ʢ·͊͜ΜͳΜ͔ͱదʹฉ͖ྲྀ͍ͯͩ͘͠͞ʣ • ΅ΜΓͱത࢜ޙظ՝ఔΛߟ͍͑ͯΔਓ •
->ʮത࢜՝ఔʹਐΜͩΘ͚ʯʮࢲͷݱࡏͷੜ׆ʹ͍ͭͯʯ • ത࢜ޙظ՝ఔਐֶΛܾΊ͍ͯΔ͕ɼฐֶɾใֶֶҐP͔Ͳ͏͔ܾΊ͔Ͷ͍ͯΔਓ • ->ʮଞΛͪΐͬͱݟͯࢲ͕ࢥͬͨฐֶͷಛ৭ʯʮത࢜՝ఔͷڥͷܾΊํʯ • ͢ͰʹใֶֶҐPͰത࢜ޙظ՝ఔͷਐֶΛܾΊ͍ͯΔਓ • -> ʢGreat!! ͦͷ··ࢦಋڭһͷݴ͏͜ͱΛΑ͘ฉ͍ͯ४උΛਐΊ͍ͯͩ͘͞ʂʣ ࠓͷ༰ -
ࣗݾհ • ࢁຊ ༤ (Yuya Yamamoto) • ใֶֶҐϓϩάϥϜത࢜ޙظ՝ఔ2 • Twitter:
@yamathcy • Mail: [email protected] • ݚڀɿՎএදݱͷੳٴͼܭࢉػతϞσϦϯά • ओࢦಋɿླ৳ਸઌੜɼ෭ࢦಋɿࣉᖒ༸ࢠઌੜ (࣮࣭)ɼҏ౻ઌੜ • ࠃͷݚڀॴ (࢈ۀٕज़૯߹ݚڀॴ)ɼؖࠃͷେֶ(KAIST)ͱڞಉݚڀ • 2017 தԝେֶཧֶ෦தୀɾใϝσΟΞֶྨ3࣍ฤೖ • 2019 ใϝσΟΞֶྨଔ • 2021 ਤॻؗใϝσΟΞݚڀՊത࢜લظ՝ఔमྃ 3 ԻָՎ͕͖͗ͯ͢ ݚڀʹͪ͠Όౕͬͨ -
4 ݚڀ༰ɿComputational modeling of Singing techniques Վ ͍ ํ ͷ
Ϟ σ ϧ Խ ՄࢹԽ Վ͍ํྨࣅ ͷࢉग़ ՎএςΫχοΫ ૢ࡞Մೳ Վ߹ Ͱ͖Δ͜ͱ ՎএςΫχοΫͷ ౷ܭੳ ϙϐϡϥʔԻָͷ༷ʑͳՎख Վ͍ํଟ༷ Vibratos Portamenti ՎএςΫχοΫΛɼ Վ͍ํΛߏ͢Δ”ύʔπ”ͱΈͳ͢ etc… ө͑ΔՎ͍ํΛAI͕ ڭ͑ͯ͘ΕΔ Վ͍ํ͕ࣅ͍ͯΔ ՎखΛ୳ͤΔ ࣗͷ ेീ൪͕ݟ͔ͭΔ บͷ͋ΔՎ͍ํ ߹Ͱ͖Δ ͦͷՎखͷݸੑΛ ղ໌Ͱ͖Δ ࣝผ ͦͷͷ ϞσϧԽͷ աఔͰ ಘΒΕͨ Վ͍ํʹ ؔ͢Δใ -
5 ݚڀ༰ɿComputational modeling of Singing techniques Վ ͍ ํ ͷ
Ϟ σ ϧ Խ ՄࢹԽ Վ͍ํྨࣅ ͷࢉग़ ՎএςΫχοΫ ૢ࡞Մೳ Վ߹ Ͱ͖Δ͜ͱ ՎএςΫχοΫͷ ౷ܭੳ Vibratos Portamenti ՎএςΫχοΫΛɼ Վ͍ํΛߏ͢Δ”ύʔπ”ͱΈͳ͢ etc… ө͑ΔՎ͍ํΛAI͕ ڭ͑ͯ͘ΕΔ Վ͍ํ͕ࣅ͍ͯΔ ՎखΛ୳ͤΔ ࣗͷ ेീ൪͕ݟ͔ͭΔ บͷ͋ΔՎ͍ํ ߹Ͱ͖Δ ͦͷՎखͷݸੑΛ ղ໌Ͱ͖Δ ࣝผ ͦͷͷ ϞσϧԽͷ աఔͰ ಘΒΕͨ Վ͍ํʹ ؔ͢Δใ ᶃ࣮ଶௐࠪ ͲΜͳςΫχοΫΛରʹ͢Δʁ ςΫχοΫͷੑ࣭ʁ ᶄࣗಈࣝผͷํ๏ Ͳ͏ͬͯՎ͔Βݕग़ͯ͠ ϞσϧԽ͢Δʁ ϙϐϡϥʔԻָͷ༷ʑͳՎख Վ͍ํଟ༷ -
ࠓͷϓϨθϯͷఆରऀ 7 • ·ͬͨ͘ത࢜ޙظ՝ఔʹڵຯ͕ͳ͍ਓ • -> ʢ·͊͜ΜͳΜ͔ͱదʹฉ͖ྲྀ͍ͯͩ͘͠͞ʣ • ΅ΜΓͱത࢜ޙظ՝ఔΛߟ͍͑ͯΔਓ •
->ʮത࢜՝ఔʹਐΜͩΘ͚ʯʮࢲͷݱࡏͷੜ׆ʹ͍ͭͯʯ • ത࢜ޙظ՝ఔਐֶΛܾΊ͍ͯΔ͕ɼฐֶɾใֶֶҐP͔Ͳ͏͔ܾΊ͔Ͷ͍ͯΔਓ • ->ʮଞΛͪΐͬͱݟͯࢲ͕ࢥͬͨฐֶͷಛ৭ʯʮത࢜՝ఔͷڥͷܾΊํʯ • ͢ͰʹใֶֶҐPͰത࢜ޙظ՝ఔͷਐֶΛܾΊ͍ͯΔਓ • -> ʢGreat!! ͦͷ··ࢦಋڭһͷݴ͏͜ͱΛΑ͘ฉ͍ͯ४උΛਐΊ͍ͯͩ͘͞ʂʣ ࠓͷ༰ -
ത࢜ਐֶʹࢸ͍͖ͬͨͭ͞ 1. ͱͱԻͷઐ৬Ͱকདྷ৯͍͖͍ͬͯͨͱߟ͍͑ͯͨ 2. M1ͷ͜Ζ࢈૯ݚݚڀΠϯλʔϯʹߦ͖ɼݚڀ৬ͷಌΕ͕૿͢ 3. Dਐ͖͍ͭͱࢥͬͯब׆Λ͍͕ͯͨ͠ɼͬͯͯ৺͕༂Δͷݚڀͩͬͨ 4. اۀͷब৬ͱఱṝʹ͔͚ɼ͍ΖΜͳਓʹ૬ஊ͠ɼ݁Ռઓ͠Α͏ͱͳͬͨ 8
↑M2ͷ6݄ͷͰ͖͝ͱͰఆΛಘͨޙɽΊͬͪΌ͍Ͱ͢ʂ ໘ڭࢣʹ͍ͯͩ͘͠͞ʂ ʢओࢦಋͷླઌੜʹͱͯΪϦΪϦʹίϯλΫτΛͱΓ·ͨ͠…͢Έ·ͤΜ…ʣ -
͕ࣗڵຯ͋Δ͜ͱͰɼεΩϧΛຏ͖͔͔ͨͬͨΒ 9 • ձࣾʹۈΊΔͱɼΓ͍ͨ͜ͱجຊతʹͰ͖ͳ͍ • म࢜ -> ݚڀ৬ଐߟ͕͑ͨɼڱ͖ͳ্ʹɼҟͳΔઐΛΒ͞ΕΔՄೳੑ͋Δ • Ͳ͏͔ͤΕૣ͔ΕձࣾۈΊ͢ΔͳΒɼʮࣗͷ͖ͳࡐͰʯεΩϧΛ৳͢
ظؒΛ࡞͍͍ͬͯͱࢥͬͨ • ത࢜՝ఔࣗͷ͖ͳࡐͰ൚༻తεΩϧΛ৳͢ͷʹ࠷దɼͱߟ͑ͨ • ൚༻తεΩϧɿ՝ൃݟɼղܾɼαʔϕΠɼϥΠςΟϯάɼϓϨθϯɼܭըཱͯ etc… ͳͥത࢜ʹਐΜͩͷ͔ʁ -
10 ത࢜՝ఔͷੜ׆ͬͯͲ͏ͳͷʁ • ͓ۚɿ݄20ສԁ +αΒͬͯΔ • JST࣍ੈͷ۠1ʹ࠾ʢD1 10݄~ʣɼ+αΠϯλʔϯɼRAɼςΟʔνϯάϑΣϩʔʢޙड़ʣɽ • ֶৼɼJST࣍ੈɼ٢ాҭӳձɼཧݚ/࢈૯ݚ
RAɼBigTechͷϑΣϩʔ etc… ͱ৭ʑखஈ͋ΔͷͰɼੲΑΓ͍͍࣌ʹͳͬͨʁ • ຖɿߨ͕ٛ΄΅ͳ͍ͷͰݚڀΛΔʑ • ത࢜՝ఔʹͳ͔ͬͨΒͱ͍ͬͯɼݚڀʹ͖߹͏ʑଔݚɼम࢜ͱมΘΒͣ • ຖࢮ͵ؾͰΰϦΰϦ͍ͬͯΔͱݴΘΕΕͦ͏Ͱͳ͍ɼձࣾһͷۈ࣌ؒʴα͘Β͍ʢʒલআ͘ʣ • ਓ͖߹͍ɿݚڀܥͷΓ߹͍͕૿͑ͨ • ֶ֎ͷത࢜՝ఔͷֶੜɽւ֎ͷֶੜؚΉ • ʮʓʓͱ͍͑ࢁຊʯͱ͍͏Α͏ʹɼઐՈͷΑ͏ͳѻ͍Λड͚Δ͜ͱ͠͠ग़͖ͯͨ • However ަྲྀͷ͋ͬͨಉظͷ༑ୡͱձ͏ػձݮͬͯ͠·ͬͨ… -
11 ͦͷ΄͔ • ςΟʔνϯάϑΣϩʔʢTFʣ • ฐֶಛ༗ͷ੍ • ௨ৗͷTAۀʹՃ͑ɼߨٛΛ͢Δ • ത࢜ޙظ՝ఔֶੜ͕ߨٛͷܦݧΛੵΉ͜ͱ͕Ͱ͖Δ
• ڞಉݚڀ • ࢦಋڭһ͕ίωΫγϣϯΛ࡞ͬͯ͘ΕΔ͜ͱ͋Δ • KAISTͷڞಉݚڀऀɼࢲͷͰୈҰਓऀɽࣉᖒઌੜʹ ത࢜ਐֶ͢Δͱ͑ͨ࣌ʹܨ͛ͯͩͬͨ͘͞ɽ • ʢίϩφ͕མͪண͚ཹֶ͍ͨ͠…ʣ ใϝσΟΞֶྨͷઐՊʮԻָɾԻڹใॲཧʯ ߨٛͷ1ճΛ୲ ΦϯϥΠϯࠃࡍձٞ APSIPA 2021ͰͷՌൃද -
ࠓͷϓϨθϯͷఆରऀ 12 • ·ͬͨ͘ത࢜ޙظ՝ఔʹڵຯ͕ͳ͍ਓ • -> ʢ·͊͜ΜͳΜ͔ͱదʹฉ͖ྲྀ͍ͯͩ͘͠͞ʣ • ΅ΜΓͱത࢜ޙظ՝ఔΛߟ͍͑ͯΔਓ •
->ʮത࢜՝ఔʹਐΜͩΘ͚ʯʮࢲͷݱࡏͷੜ׆ʹ͍ͭͯʯ • ത࢜ޙظ՝ఔਐֶΛܾΊ͍ͯΔ͕ɼฐֶɾใֶֶҐP͔Ͳ͏͔ܾΊ͔Ͷ͍ͯΔਓ • ->ʮଞΛͪΐͬͱݟͯࢲ͕ࢥͬͨฐֶͷಛ৭ʯʮത࢜՝ఔͷڥͷܾΊํʯ • ͢ͰʹใֶֶҐPͰത࢜ޙظ՝ఔͷਐֶΛܾΊ͍ͯΔਓ • -> ʢGreat!! ͦͷ··ࢦಋڭһͷݴ͏͜ͱΛΑ͘ฉ͍ͯ४උΛਐΊ͍ͯͩ͘͞ʂʣ ࠓͷ༰ -
ฐֶͷಛ৭ • ֶࡍత • ઐ֎ͷਓ͍͔ʹ͑Δ͔͕ಛʹॏࢹ͞Εɼॏతʹ͑ͯΒ͑Δ • ࢥ͍͕͚ͳ͍ݚڀͷΞΠσΞΛΕΔ͜ͱʁ • ࢦಋڭһͷઐੑόϥΤςΟ๛͔ʢͪΐͬͱཧܥͷڭत৬ʢओࢦಋڭһʹબͿʣ͕গͳ ͍Α͏ͳ…ʣ
• গਓ • ໘ݟ͕͍͍͠ɼֶձൃදRAͷิॿ͋Δ • ຊڌͷय़ΤϦΞਓޱີ͕ൺֱత͍ͷͰշద 13 -
ڥେࣄɼઈରෳݕ౼͖͢ 14 • ڥશͯΛࢧ͢Δ • ࢦಋڭһɿࢦಋڭһ͕ͭίωɼݚڀඅਃͷϊϋɼਓత/ςʔϚతͳ૬ੑ • ݚڀࣨɿݚڀࣨͷงғؾɼϦιʔε • ɿ͕ࣗΈɼ͔ͭത࢜จΛॻ͚ΔςʔϚͰݚڀ͕ͦ͜ͰͰ͖Δ͔
• etc… • ڥબͼͰത͕࢜औΕΔ͔Ͳ͏͔͕େ͖͘ࠨӈ͢ΔͱݴͬͯաݴͰͳ͍ • ࢲࠓͷڥʹෆຬͦ͜·Ͱ͋Γ·ͤΜ͕ɼશͯͷਓʹฐϓϩάϥϜ͕߹͏ͱݶΒͳ͍ͱࢥ͍·͢ɽ ڥͷܾΊํ -
·ͱΊ • ࢲ͕ਐֶʹࢸͬͨܦҢͱɼਐֶΛܾΊͨཧ༝ • ࣗͷ͖ͳࡐͰεΩϧΛ৳ͤΔʂ • ݱࡏͷੜ׆ • ࢲ͓͕ۚӡྑ͘ͳΜͱ͔ͳΓɼͻͨ͢Βݚڀʹूதʂ •
ݚڀɾڭҭ׆ಈ͕Δʂ • ฐֶͷಛͱɼڥ͕େࣄͱ͍͏ • ෳͷީิΛेʹۛຯ͍ͯͩ͘͠͞ʂ 15 ͨ·ʹன৸͠ʹߦ͘य़ΤϦΞͷཪଆ ʑָ͘͠ϚΠϖʔεͰݚڀͯ͠·͢ɽ DਐݴΘΕ͍ͯΔ΄Ͳѱ͘ͳ͍ͧʂ