「自然言語MLエンジニアから学ぶ！対話型AIにおける高品質なデータセット作成ノウハウ」 https://campaign.fastlabel.ai/20220930-seminar
ରܕAIͷߏஙʹ͓͚Δͱσʔληοτͷॏཁੑૉૣ͘σʔλΛߏங͠ݕূ͢ΔͨΊʹ2022/09/30Ubieגࣜձࣾ Ԟా ༟थ
View Slide
2Ԟా ༟थYuki OkudaRecruit → Sansan → Ubie@yag_aysࣗݾհhttps://yag-ays.github.io/
3ࠓ͢͜ͱ / ͞ͳ͍͜ͱ͢͜ͱ• ʮίΤΧϧςʯʹ͓͚Δର͔ΒͷΧϧςੜ• ͲͷΑ͏ͳλεΫͷσʔλΛΞϊςʔγϣϯʹΑΓ࡞͔ͨ͠• σʔλ࡞ͷ࣮ྫհ• ґཔܕͷΫϥυιʔγϯάͷσʔλ࡞ґཔ• ΞϊςʔγϣϯαʔϏεձࣾͷσʔλ࡞ґཔ• σʔλ࡞ʹ͓͚Δૉૣ͍Ձݕূͷॏཁੑ• Ξϊςʔγϣϯ࡞ۀʹ͓͚Δෆ࣮֬ੑʹ͍ͭͯ͞ͳ͍͜ͱ• Ξϊςʔγϣϯͨ͠σʔλΛར༻ͨ͠ػցֶशͷ۩ମٕज़ɺΞΫςΟϒϥʔχϯάͳͲ
4• ࡞ۀऀ• Ξϊςʔγϣϯ࡞ۀΛߦ͏ਓɻΞϊςʔλʔɺΫϥυϫʔΧʔͱݴ͏• ୀ۶ͳσʔλ࡞࡞ۀΛࠜؾڧ͘ߦͬͯ͘ΕΔ༗Γ͍ଘࡏ• ґཔऀ• Ξϊςʔγϣϯ࡞ۀΛґཔ͢Δਓ• ࠓճͰݴ͏ͱࢲͷ͜ͱɻଵଦͰظͰίϛϡχέʔγϣϯ͕ۤख• ΞϊςʔγϣϯαʔϏεձࣾ• ػցֶशͷσʔλ࡞Ξϊςʔγϣϯ࡞ۀΛ͚ෛ͏ձࣾͷ͜ͱ• ࠓճͷ߹FastLabel͞ΜͷΑ͏ͳձࣾొਓɾ༻ޠ
5ʮίΤΧϧςʯʹ͓͚Δର͔ΒͷΧϧςੜ
6ʮίΤΧϧςʯձ͔ΒࣗಈͰΧϧςΛੜ͢ΔϓϩμΫτʮࠓͲ͏͞Ε·͔ͨ͠ʁʯʮࠓே͔Β಄͕௧ͯ͘ɺు͖ؾগ͋͠ΔΜͰ͢ʯɾࠓே͔Β಄௧ɾᅅؾ• ҩࢣͷͷԻ͔ΒϦΞϧλΠϜͰจࣈى͜͠ & ΧϧςੜΛߦ͏• ҩࢣͷΧϧςهࡌෛՙͷݮ• จࣈى݁͜͠ՌʹΑΔه (ΠϯϑΥʔϜυίϯηϯτ) ͷׂ
7• Իೝࣝɿҩࢣͱױऀͷձͷจࣈى͜͠• ҩྍͷઐ༻ޠͷରԠɺಉԻҟٛޠͷରԠ• e.g. A1cʢ͑ʔΘΜ͠ʔ, ݂ӷݕࠪͷ໊߲ʣɺײછͱסᚔ• ҩࢣͱױऀͷऀೝࣝɺϚΠΫͷਫ਼ɺࣨͷϊΠζɺ• ࣗવݴޠॲཧɿจࣈىͨ͜͠͠ձςΩετ͔ΒͷΧϧςهࡌจͷ࡞• ձจͷॻ͖ى͜͠Λೖྗͱͯ͠ѻ͏• ޱޠௐɺϑΟϥʔɺݴ͍ؒҧ͍ɺͦͦจࣈى͜͠ͷೝࣝؒҧ͍• ձͷҙຯΛཧղ͠ɺΧϧςจΛநग़/ੜ͢ΔͨΊͷཁλεΫ• ױऀͷݴ༿͔Βҩࢣͷݴ༿ͷมɺࣗવͳΧϧςهࡌจΛ࡞͢ΔඞཁίΤΧϧςʹ͓͚ΔػցֶशλεΫࠓճࣗવݴޠॲཧͷΧϧςจੜλεΫʹ͍͓ͭͯ͠·͢
8• ύϒϦοΫʹར༻Մೳͳσʔληοτͷෆࡏ• ݸਓใ؍Ͱױऀσʔλ৻ॏʹऔΓѻΘΕɺݚڀͱ͍͑Ͳ༰қʹެ։Ͱ͖ͳ͍• ҰํͰɺප໊ҩྍτϐοΫͷࣙॻͳͲެ։͞Ε͍ͯΔ• ҩࢣޢࢣͱ͍ͬͨҩྍैࣄऀߴ୯Ձ• ઐٕೳΛ༗͢Δҩྍैࣄऀͷ୯Ձߴ͍• ·ͱ·ͬͨ༧ࢉ͕ͳ͚ΕେنʹσʔληοτΛ࡞͢Δ͜ͱ͍͠ҰൠతͳҩྍυϝΠϯʹ͓͚Δσʔληοτ࡞ͷϋʔυϧ→ λεΫʹ߹ͬͨσʔληοτΛ͍͔ʹޮΑ͘࡞͢Δ͔ʁ
9• ҰൠతʹػցֶशʹΑͬͯ༧ଌ/ੜ͢ΔతมΛɺ࡞ۀऀ͕࡞͢Δ• ࠓճͷ߹ɺ࡞ۀऀΧϧςΛॻ͚ΔҩࢣͰͳ͍ͱͰ͖ͳ͍ → ߴ୯ՁͰֻ͓͕͔ۚΔҩࢣͰͳ͍ී௨ͷ࡞ۀऀ͕σʔλ࡞Ͱ͖ΔΑ͏ʹλεΫΛม͢Δ௨ৗʮࠓͲ͏͞Ε·͔ͨ͠ʁʯʮࠓே͔Β಄͕௧ͯ͘ɺు͖ؾগ͋͠ΔΜͰ͢ʯೖྗ ग़ྗɾࠓே͔Β಄௧ɾᅅؾ
10• ҰൠతʹػցֶशʹΑͬͯ༧ଌ/ੜ͢ΔతมΛɺ࡞ۀऀ͕࡞͢Δ• ࠓճͷ߹ɺ࡞ۀऀΧϧςΛॻ͚ΔҩࢣͰͳ͍ͱͰ͖ͳ͍ → ߴ୯ՁͰֻ͓͕͔ۚΔ• ͠తม͕ܾ·͍ͬͯΔͷͰ͋Εɺٯʹσʔλ෦Λ࡞͢Δͱ͍͏λεΫʹมͰ͖Δ• ͷձױऀʹ͔ΔΑ͏ʹฏқͳݴ༿Ͱ͞ΕΔ͜ͱ͕ଟ͍ҩࢣͰͳ͍ී௨ͷ࡞ۀऀ͕σʔλ࡞Ͱ͖ΔΑ͏ʹλεΫΛม͢Δ௨ৗมޙʮࠓͲ͏͞Ε·͔ͨ͠ʁʯʮࠓே͔Β಄͕௧ͯ͘ɺు͖ؾগ͋͠ΔΜͰ͢ʯೖྗ ग़ྗɾࠓே͔Β಄௧ɾᅅؾɾࠓே͔Β಄௧ɾᅅؾʮࠓͲ͏͞Ε·͔ͨ͠ʁʯʮࠓே͔Β಄͕௧ͯ͘ɺు͖ؾগ͋͠ΔΜͰ͢ʯ
11σʔλ࡞ͷ࣮ྫ - ґཔܕ
12• ୈ1εςοϓͱͯ͠ΫϥυιʔγϯάΛར༻ͯ͠σʔλऩू• ͱʹ͔͘ਫ਼͕ͯ͘ྑ͍ͷͰσʔλ͕͋ΕΧϧςੜ͕Ͱ͖Δ͜ͱΛݕূ͍ͨ͠• Σϒ্Ͱґཔऀͱ࡞ۀऀ͕ΓऔΓ͢ΔΫϥυιʔγϯάͷϓϥοτϑΥʔϜΛར༻• ґཔ༰• 6໊ʹґཔʢσʔληοτΛ3ׂɺಉҰλεΫΛ2໊ʹׂΓৼΓʣ• λεΫࣗମ1ਓ͋ͨΓ4࣌ؒ΄ͲͰऴྃ͢Δྔ• ΞϊςʔγϣϯπʔϧOSSͷDoccano*Λར༻ୈ1εςοϓɿґཔܕͷΫϥυιʔγϯάαʔϏεΛར༻* https://github.com/doccano/doccano
13ϝϦοτ• Ձ֨ަব͕ՄೳͰɺൺֱత҆Ձʹ͑ΒΕΔ• ࢧ͍ํ๏: ݻఆใु / ࣌ؒ୯Ձ Λબ• ࡞ۀऀͷϦιʔεΛؾʹ͢Δඞཁ͕ͳ͍ʢܖ࣌ʹظՔಇఆΛ߹ҙʣ• ৬छઐٕೳΛߟྀͨ͠ґཔ͕Մೳ• ҩࢣޢࢣͱ͍ͬͨ৬छΛެ։͍ͯ͠Δਓʹରͯ͠ɺݸผʹґཔՄೳґཔܕͷΫϥυιʔγϯάαʔϏεσϝϦοτ• ४උґཔ࣌ͷཧ͕͔͔Δ• ࡞ۀऀ͝ͱʹ࡞ۀγʔτid/passwordΛɹ͍ग़ͯ͠ݸผʹ࿈བྷ• ࡞ۀऀͷ࣭࿈བྷʹճ͕ඞཁ• ґཔ͕ଟ͘ͳΕͳΔ΄Ͳཧ૿େ• ܧଓతͳґཔ͕͍͠߹͕͋Δ• ༏ྑͳ࡞ۀऀ͕͍ͨͱͯ͠ɺܧଓతʹ࡞ۀΛґཔͰ͖Δ͔ͦͷ࡞ۀऀ࣍ୈ
14ΫϥυιʔγϯάʹΑΔΞϊςʔγϣϯ࡞ۀͷྲྀΕࣄલ४උืूɾܖక݁ɾґཔ࡞ۀ࡞ۀྃݕ݁Ռͷूܭ
15• Ξϊςʔγϣϯ༻ͷσʔληοτ࡞• ࡞ۀऀ͝ͱʹσʔλΛׂ͢Δ• શϥϯμϜ͕ྑ͍ͷ͔ɺಉҰ࡞ۀऀʹಉ͡ͷσʔλΛͤͨ΄͏͕ྑ͍ͷ͔• ΞϊςʔγϣϯΨΠυϥΠϯΛ࡞• ࡞ۀํ๏Λهड़ͨ͠υΩϡϝϯτ• ΨΠυϥΠϯ͕ਫ਼៛ʹఆ·͍ͬͯͳ͍ͱɹظ͢ΔΞτϓοτ͕ग़ͯ͜ͳ͍• ࡞ۀऀͷ࣭ͳͲʹԠͯ͡ਵ࣌Ξοϓσʔτ͍ͯ͘͠࡞ۀͷྲྀΕ: ࣄલ४උࣄલ४උืूɾܖక݁ɾґཔ࡞ۀ࡞ۀྃݕ݁Ռͷूܭ
16࣮ࡍʹ࡞ͨ͠ΞϊςʔγϣϯΨΠυϥΠϯ
17࣮ࡍʹ࡞ͨ͠ΞϊςʔγϣϯΨΠυϥΠϯ࡞ۀํ๏πʔϧͷ͍ํखॱ۩ମྫྑ͍ೖྗ/ѱ͍ೖྗͷྫࣔશମͷ֓ཁɾͳͥ͜ͷλεΫΛ͢Δͷ͔
18• ฏқͳݴ༿ͰΘ͔Γ͘͢આ໌͠ɺεΫϦʔϯγϣοτಈըΛଟ༻͢Δ• ࡞ۀऀҰൠͷਓͳͷͰɺͳΔ͘ԣจࣈઐ༻ޠΘͣʹฏқͳݴ༿Λ͏• ࣮ࡍͷπʔϧͷ͍ํΛը૾ಈըͰઆ໌͢Δͱཧղ͕ૣ͍• ࡞ۀͷ۩ମྫΛఏࣔ͢Δ• ͲΜͳΞτϓοτΛظ͞Ε͍ͯΔͷ͔Λཧղͯ͠Β͏• ͨͩ͠ྫࣔͷΠϝʔδ͕ڧ͗͢ΔͱͦΕʹҾͬுΒΕͯ͠·͏ͷͰɺඞཁ࠷খݶʹ͢Δ• (ඞཁʹԠͯ͡) ಡΜͩޙʹ؆୯ͳ࡞ۀΛͬͯΒ͏• υΩϡϝϯτΛಡΜ͚ͩͩͰᘳʹͰ͖ΔΘ͚Ͱͳ͍• ࡞ۀऀͷཧղٕྔΛଌΔͨΊʹɺٖతͳλεΫΛ࣮ߦͯ͠Β͏ΞϊςʔγϣϯΨΠυϥΠϯͷίπ
19• ืू• ืूจΛ࡞ͯ͠ग़ߘ• ࡞ۀ༰ͷઆ໌• ୯Ձ / ใुͷछྨ (ݻఆใु or ࣌ؒ୯Ձ)• ఆ࣌ؒ• ඞཁεΩϧܦݧ• ϓϥοτϑΥʔϜʹΑͬͯґཔଆ͔Β࡞ۀऀΛબͯ͠࡞ۀґཔΛૹΔ͜ͱՄೳ• ܖక݁ɾґཔ• Ԡืऀʹ͕ͳ͚Εґཔ͠ۀΛ։࢝࡞ۀͷྲྀΕ: ืूɾܖక݁ࣄલ४උืूɾܖక݁ɾґཔ࡞ۀ࡞ۀྃݕ݁Ռͷूܭ
20࡞ۀલͷίϛϡχέʔγϣϯɿ࡞ۀऀͱͷίϛϡχέʔγϣϯܖޙͷѫࡰͱґཔ ݕͱՃରԠ
21• جຊతʹ࡞ۀऀͷ࡞ۀ͕ྃ͢ΔͷΛͭ• ͨͩ͠ฒྻͰෳͷ࡞ۀऀʹґཔ͍ͯ͠Δͱɹίϛϡχέʔγϣϯ͕ൃੜ͢ΔͨΊຖேϓϥοτϑΥʔϜͷνϟοτཝΛνΣοΫ͢Δ• ࡞ۀʹؔ͢Δ࣭ͷճରԠ• ͕ࣗґཔͨ͠ํ͔ͳΓஸೡʹͬͯ͘ΕΔਓ͔ΓͩͬͨͷͰɺࡉ͔͍෦࣭ͯ͘͠Εͨ• ݕ• Ռͷ࠷ऴνΣοΫ• ࡞ۀͷൈ͚࿙Ε͕͋ΔͱՃͰ࡞ۀͯ͠Β͏࡞ۀͷྲྀΕ: ࡞ۀˠྃˠݕࣄલ४උืूɾܖక݁ɾґཔ࡞ۀ࡞ۀྃݕ݁Ռͷूܭ
22• ϓϩδΣΫτ։࢝ޙͷԾઆݕূʹྑ͍• ४උ͕ྃ࣍͠ୈ͙͢ʹ࡞ۀΛ։࢝ͯ͘͠ΕΔͷͰɺগྔσʔλͳΒ͙͢ʹू·Δ• ఆ͍ͯ͠ͳ͔ͬͨΞϊςʔγϣϯΨΠυϥΠϯͷෆඋʹؾ͘͜ͱ͕Ͱ͖Δ• ෳͷ࡞ۀऀͱͷίϛϡχέʔγϣϯ/Ϛωʔδϝϯτ͕ϘτϧωοΫʹͳΓεέʔϧࠔ• ࡞ۀऀͷ࡞ۀ༰ࢦಋ࣭ͷճͳͲɺࢥͬͨҎ্ʹ࡞ۀ͕ൃੜ͢Δ• εέʔϧͤ͞ΔʹґཔऀଆʹཧऀΛཱͯͯɺ࡞ۀ༰ʹशख़ͯ͠Β͏ඞཁ͕͋Δґཔܕͷ·ͱΊ→ ཧͷݮͱσʔλ࡞ͷεέʔϧΞτͷͨΊʹɹΞϊςʔγϣϯ࡞ձࣾґཔ͢Δ͜ͱʹ
23σʔλ࡞ͷ࣮ྫ - ΞϊςʔγϣϯαʔϏεܕ
24• ࣍ʹΞϊςʔγϣϯαʔϏεͷձࣾʹґཔ͢Δ͜ͱʹ• ཧͷݮͱσʔλऩू্ͷͨΊ• ॳظݕূΛૉૣ͘ߦ͏ͨΊʹҰ࣌తͳίετ૿ߏΘͳ͍• ෳࣾʹݟੵΓΛґཔ• ࢥ͍ͭ͘ΞϊςʔγϣϯαʔϏεΛఏڙ͍ͯ͠ΔձࣾΛϦετΞοϓ͠ɺϝʔϧΛૹΔ• ࠓճλεΫ͕গ͠ෳࡶʢର/ੜλεΫʣͳͷͰɺϦϞʔτϛʔςΟϯάͷґཔߦͬͨ• ࠓճFastLabel͞Μʹґཔ͢Δ͜ͱʹ• ܾΊखஈ + ରԠͷஸೡ͞• (ੲTwitterͰΓऔΓ͕͋ΓΞϊςʔγϣϯπʔϧ࡞ͬͯͯ໘നͦ͏ͳձࣾͩͬͨͱ͍͏ͷ)ୈ2εςοϓɿΞϊςʔγϣϯ࡞ձࣾͷґཔ
25ΞϊςʔγϣϯαʔϏεʹґཔ͢Δ͜ͱͰɺ֤ఔ͕Ͳ͏ͳΔ͔ΞϊςʔγϣϯαʔϏεࣄલ४උืूɾܖక݁ɾґཔ࡞ۀ࡞ۀྃݕ݁Ռͷूܭࣄલ४උɾґཔݕ݁Ռड͚औΓ
26• ࡞ۀऀͷϚωʔδϝϯτ͓Αͼ֤छίϛϡχέʔγϣϯϥΠϯ͕؆ུԽ• େ෯ͳཧݮ࡞ۀऀͱͷίϛϡχέʔγϣϯϥΠϯ͕؆ུԽΫϥυιʔγϯάϓϥοτϑΥʔϜͷ߹ ΞϊςʔγϣϯαʔϏεͷ߹
27• ࡞ۀ༰΄΅มߋͤͣ• ΞϊςʔγϣϯΨΠυϥΠϯͦͷ··ར༻• ࡞ۀϓϥοτϑΥʔϜ͚ͩFastLabelಠࣗͷΣϒΞϓϦέʔγϣϯΛར༻• ίϛϡχέʔγϣϯखஈ͕Slackʹʂ• ϚϧνϫʔΫεϖʔενϟϯωϧΛ࡞͠ɺslack্ͰίϛϡχέʔγϣϯՄೳʹ• UbieଆͷϓϩμΫτΦʔφʔ։ൃऀࢀՃ͠ɺٞใڞ༗ʹࢀՃͰ͖Δ• ϝʔϧͱҧ͍ɺίϛϡχέʔγϣϯͷ৺ཧతϋʔυϧ͕Լ͕Δ (ΤϯδχΞʹخ͍͠)Ϋϥυιʔγϯά͔Βͷ࡞ۀͷมߋ
28୲ऀͱͷίϛϡχέʔγϣϯݟੵΓґཔʢܧଓґཔͷ࣌ʣ࡞ۀ༰ͷ֬ೝΞϊςʔγϣϯ݁Ռͷೲ
29• σʔλͷ࣭มΘΒͣ• ΫϥυιʔγϯάͰࣗͰίϯτϩʔϧͨ࣌͠ͱൺֱͯ͠ɺ࣭શ͘มΘΒͣ• ࡞ۀऀͷཧ͕େ෯ʹݮ͞Εͨ• Ϋϥυιʔγϯάͱൺֱͯ͠ɺࣄతͳ࡞ۀΛେ෯ʹݮΒͤΔ• Πϯλϥϓτ͕গͳ͘ͳΔɺ͕ࣗશମͷϘτϧωοΫʹͳΔ͜ͱ͕ແ͍• ݸʑͷ࡞ۀऀͷ࡞ۀ݁ՌͷूܭͳͲͷࡉ͔͍࡞ۀݮͬͨ• ࠷ॳͷλεΫઆ໌ґཔ࣌ͷίϛϡχέʔγϣϯίετ͚ͩඍ૿• ग़ΓΛͳͨ͘͢Ίʹ͜ͷ෦ඞਢΞϊςʔγϣϯαʔϏεར༻ͷ݁Ռ
30• తͱ͍ͯͨ͠ཧݮ͓Αͼσʔλ࡞ͷεέʔϧԽୡͰ͖ͨ• ॳظݕূʹඞཁͳ͚ͩͷσʔλΛूΊΔ͜ͱ͕Ͱ͖ͨ• ΞϊςʔγϣϯαʔϏεଆʹɺ͍͔ʹ࡞ۀΛཧղͯ͠Β͏/దٓํमਖ਼Ͱ͖Δ͔• ࡞ۀऀʹࢦࣔ͠ͳ͘ͳͬͨ͜ͱͰɺؒతʹΞϊςʔγϣϯͷ࣭Λίϯτϩʔϧ͢Δ͜ͱʹͳΔ• σʔλ࡞Λεέʔϧͤ͞Δ or ܧଓతͳґཔ͕༰қ• ಉ͡ํ๏ͷΞϊςʔγϣϯͳΒɺઆ໌ͷॳظίετ͕ෆཁʹͳΔ͕େ͖͍• ࡞ۀऀͷՔಇΛαʔϏεଆͰࣄલʹ֬อͰ͖ΔͷϝϦοτΞϊςʔγϣϯαʔϏεܕͷ·ͱΊ
31σʔλ࡞ʹ͓͚Δૉૣ͍Ձݕূͷॏཁੑ
32• ϓϥοτϑΥʔϜͷબͦΕͧΕಘखෆಘख͕͋Δ• Ϋϥυιʔγϯάɿͱʹ͔͘ॳಈ͕ૣ͍ɺίετΛ͑ΒΕΔ• ΞϊςʔγϣϯαʔϏεձࣾɿґཔऀ(ࣗ)ͷରԠίετΛݮΒͤΔɺεέʔϧͤ͞ΒΕΔ• ͰPoCஈ֊ͷϓϩδΣΫτελʔτΞοϓʹ͓͍ͯͲ͏ཱͪճΕΑ͍ͷ͔ʁ• ͱΓ͋͑ͣΑ͔͘Βͳ͍͚ͲΞϊςʔγϣϯαʔϏεձࣾʹ͛ΔɺͰવͳ͕Βବ• ෆ࣮֬ੑͷղফͱߴͳݕূ͕ඞཁࠓճͷܦݧΛ౿·͑ͨΞϊςʔγϣϯσʔλͷ࡞Γํ
33• Ξϊςʔγϣϯͷ࡞ۀ• ৗʹఆͰ͖ͳ͍σʔλᐆດͳϧʔϧɺྫ֎έʔε͕ग़ͯ͘Δ• ΞϊςʔγϣϯΨΠυϥΠϯΛ࠷ॳ͔Βᘳʹ࡞Δ͜ͱෆՄೳ• ࡞ۀऀͷೳྗΞτϓοτͷ࣭• ࡞ۀऀͷϨϕϧҰఆίϯτϩʔϧՄೳͳର͕ͩɺͦͷೳྗΞτϓοτͷ࣭ʹવΒ͖͕ͭ͋Δ• ͦͷΒ͖ͭΞϊςʔγϣϯ͕݅૿͑Δ͝ͱʹ૿େ͍ͯ͘͠• ඞཁʹͳΔσʔλྔ• ػցֶशʹ͓͍ͯʮͲΕ͘Β͍σʔλ͕͋Ε͍͍Ͱ͔͢ʁʯͱ͍͏࣭͔Βಀ͛ΒΕͳ͍• ࣮ࡍʹ࡞ͨ͠σʔλΛݩʹػցֶशϞσϧΛֶश/ධՁ͠ͳ͍ͱΘ͔Βͳ͍զʑԿΛΒͳ͍͔ʁ
34• Ξϊςʔγϣϯͷ࡞ۀ• ৗʹఆͰ͖ͳ͍σʔλᐆດͳϧʔϧɺྫ֎έʔε͕ग़ͯ͘Δ• ΞϊςʔγϣϯΨΠυϥΠϯΛ࠷ॳ͔Βᘳʹ࡞Δ͜ͱෆՄೳ• ࡞ۀऀͷೳྗΞτϓοτͷ࣭• ࡞ۀऀͷϨϕϧҰఆίϯτϩʔϧՄೳͳର͕ͩɺͦͷೳྗΞτϓοτͷ࣭ʹવΒ͖͕ͭ͋Δ• ͦͷΒ͖ͭΞϊςʔγϣϯ͕݅૿͑Δ͝ͱʹ૿େ͍ͯ͘͠• ඞཁʹͳΔσʔλྔ• ػցֶशʹ͓͍ͯʮͲΕ͘Β͍σʔλ͕͋Ε͍͍Ͱ͔͢ʁʯͱ͍͏࣭͔Βಀ͛ΒΕͳ͍• ࣮ࡍʹ࡞ͨ͠σʔλΛݩʹػցֶशϞσϧΛֶश/ධՁ͠ͳ͍ͱΘ͔Βͳ͍զʑԿΛΒͳ͍͔ʁλεΫͷઃܭऀ = ґཔऀ͔͠அͰ͖ͳ͍ΞϊςʔγϣϯαʔϏεଆʹͤΔ͜ͱՄೳػցֶशΤϯδχΞ = ґཔऀ͔͠ධՁͰ͖ͳ͍
35• λεΫઃܭਓʹͤΒΕͳ͍• ػցֶशʹͲ͏͍͏Πϯϓοτ/ΞτϓοτΛظ͢Δ͔Λߟ͑ଓ͚ͳ͚Ε͍͚ͳ͍• ૉૣ͘ݕূ͠ํमਖ਼Λ܁Γฦ͍ͯ͘͠ɺมԽʹదԠ͢Δ• ιϑτΣΞ։ൃͰ͍͏ΞδϟΠϧ։ൃ• ΞϊςʔγϣϯΑΔσʔλ࡞ʹ͓͍ͯಉ༷• ·͔ͣࣗΒɺͦͯ͠पΓΛר͖ࠐΜͰ͍͘• ·ͣࣗࣗͰݕূదԠͷαΠΫϧΛճͤΔΑ͏ʹͳΔ• ͦΕΛΑΓߴʹճ͢͜ͱ͕Ͱ͖Δํ๏Λࡧ͍ͯ͘͠• Ұॹʹݕূͯ͘͠ΕΔΞϊςʔγϣϯαʔϏεΛݟ͚͍ͭͯ͘͜ͱ͕େࣄෆ࣮֬ੑʹରԠ͢ΔͨΊʹ
36• ʮίΤΧϧςʯʹ͓͚Δର͔ΒͷΧϧςੜλεΫͷσʔλ࡞• ҩࢣͷΑ͏ͳߴ୯Ձͳ࿑ྗΛඞཁͱ͢ΔλεΫΛɺͯ͠Ұൠͷ࡞ۀऀͰՄೳʹ• 2छྨͷํ๏ͰΞϊςʔγϣϯσʔλΛ࡞• ΫϥυιʔγϯάϓϥοτϑΥʔϜͱΞϊςʔγϣϯαʔϏεͦΕͧΕʹಘखෆಘख͕͋Δ• ཧͱۚમతίετͷτϨʔυΦϑͳͳ͔ɺ͍͔ʹσʔλ࡞Λεέʔϧ͍͔ͤͯ͘͞• ૉૣ͘σʔλΛߏங͠ݕূΛճͨ͢Ίʹ• λεΫઃܭऀ͕ओମతʹෆ࣮֬ੑΛ௵͍ͯ͘͠ඞཁ͕͋Δ• ҰॹʹݕূΛճ͢ύʔτφʔͱͯ͠ͷɺΫϥυιʔγϯάΞϊςʔγϣϯαʔϏεશମͷ·ͱΊ
37͓͢͢Ίࢀߟจݙ• ʮΫϥυιʔγϯά͕ෆՄೳΛՄೳʹ͢Δʯౢ ްߦ ஶ ڞཱग़൛• ΫϥυιʔγϯάͷશମײΛ௫Ήͷʹ࠷ద• ಡΈͱͯ͠ॻ͔Ε͓ͯΓɺ۩ମࣄྫ͕๛Ͱɺ͕ࣜগͳ͍• ʮHuman-in-the-Loop ػցֶश ʯ Yukino Baba• https://speakerdeck.com/yukinobaba/human-in-the-loop-machine-learning• ΫϥυιʔγϯάͰ͍͔ʹ࣭Λ୲อ͢Δ͔ͷݚڀࣄྫ͕๛ʹհ͞Ε͍ͯΔ• σʔλͷ࣭ʹରͯ͠ͷΞϓϩʔν͕ࢀߟʹͳΔAppendix
yag_ays
masatoto
emi0726
haraduka
sensetime_japan
forest1988
ryou0634
kyoun
tmats
kuehara
.png){kind=avatar}
researchconf
yukizenimoto
naoto0804
eileencodes
jennybc
hatefulcrawdad
jensimmons
brettharned
samlambert
myddelton
smashingmag
cromwellryan
sstephenson
3n
jonyablonski