Share
Embed
Transcript
35 slides
-
ܖॻͷϦεΫఆͷͨΊͷ จϚϧνϥϕϧྨ Multi-label classification for risk in contracts ౻Ҫඒᇠ1 Ѩ෦ஐ1
ߴڮ࣏1 ؠ҆ߒ1 Ճ౻߃ত2 1GVA TECHגࣜձࣾ 2౦ژେֶ -
֓ཁ త • ܖॻ৹ࠪۀͷޮԽ ઃఆ • ܖॻͷҙͷςΩετͷͲΜͳ༰ؚ͕͍ͭ͘·ΕΔ͔ΛϚϧνϥ ϕϧྨλεΫͱͯ͠ղ͘ ख๏ •
ͱͱը૾λεΫʹଟ͘༻͞Ε͍ͯͨϚϧνϥϕϧྨख๏Λຊ ޠͷܖॻςΩετʹԠ༻ 1% |# | 2 of 35 -
ݚڀഎܠ ܖͱ • Ұఆͷ๏ޮՌΛൃੜͤ͞Α͏ͱ͢Δܖࣄऀؒͷ߹ҙ ܖॻͱ • ܖ༰Λ໌֬Խ͠ʢاۀಉ࢜Ͱ͋ΕʣऔҾΛԁʹ͠ޙ ͷฆ૪Λࢭ͢Δ͜ͱ͕త • ߹ҙ༰Λॻ໘ʹॻ͖ى͜͠ɺ྆ऀͰॺ໊ೀҹه໊ԡҹΛ
ߦ͏ ๏෦หޢ͕࢜༰Λ৹ࠪ͢Δ͜ͱ͕Ұൠత 8% |####### | 5 of 35 -
ݚڀഎܠ ৹ࠪۀͷྲྀΕ ܖॻͷ༰Ѳ ϦεΫՕॴચ͍ग़͠ ʢϦεΫ͕͋Εʣจͷमਖ਼ ݱঢ় •
ܖక݁ͷࡍͷܖॻ༰ͷνΣοΫͱϨϏϡʔਓखͰߦ ΘΕ͓ͯΓɺଟେͳίετͱ࣌ؒΛཁ͍ͯ͠Δ • ৹ࠪऀʹΑͬͯ৹ࠪ༳Ε͕ੜ͡Δ 11% |######### | 6 of 35 -
ݚڀഎܠ • ֤จʹఆΊΔ๏ޮՌ͝ͱʹ৹ࠪ͢Δ • จ͕ෳͷ৹߲ࠪΛؚΉ߹͕͋Δ ;;; ͷ৹߲ࠪʹরΒ͠߹ΘͤΔͱʜࣗࣾʹ༗ར मਖ਼ՕॴʹͳΓ͏Δ 999ͷ৹߲ࠪʹরΒ͠߹ΘͤΔͱʜͳ͠ :::ͷ৹߲ࠪʹরΒ͠߹ΘͤΔͱʜࣗࣾʹෆར
मਖ਼Օॴ 18% |################ | 9 of 35 -
৹߲ࠪͷఆٛ ৹߲ࠪͱ • ϦεΫΛఆ͢ΔࡍͷνΣοΫϙΠϯτ • ܖॻͷ֤จʹؚ·ΕΔཁ݅ͱޮՌ͕ରʹͳͬͨ๏తҙ ຯͷ͋ΔهࡌΛղ͠ɺ߲ʹམͱ͠ࠐΜͩͷ ྫ̍ ୈ̋ʢળҙٛʣ ߕળྑͳΔཧऀͷҙΛͬͯຊ݅ۀΛߦ͠ͳ͚Ε
ͳΒͳ͍ɻ 22% |##################### | 11 of 35 -
৹߲ࠪͷఆٛ ৹߲ࠪͱ • ϦεΫΛఆ͢ΔࡍͷνΣοΫϙΠϯτ • ܖॻͷ֤จʹؚ·ΕΔཁ݅ͱޮՌ͕ରʹͳͬͨ๏తҙ ຯͷ͋ΔهࡌΛղ͠ɺ߲ʹམͱ͠ࠐΜͩͷ ྫ̍ ୈ̋ʢળҙٛʣ ߕળྑͳΔཧऀͷҙΛͬͯຊ݅ۀΛߦ͠ͳ͚Ε
ͳΒͳ͍ɻ 審査項目:業務遂行上の注意義務 25% |######################## | 12 of 35 -
৹߲ࠪͷఆٛ ྫ ୈ̋ʢ࠶ҕୗʣ Ե๏ྩʹΑΓېࢭ͞Ε͍ͯΔ߹Λআ͖ҕୗۀͷશ෦ ຢҰ෦Λୈࡾऀʹ࠶ҕୗ͢Δ͜ͱ͕Ͱ͖Δͷͱ͢Δɻ ͜ͷ߹ʹԵ͔͔Δୈࡾऀʹରͯ͠ɺࣗݾͷʹ͓͍ ͯຊܖٴͼݸผܖʹఆΊΔԵͷٛΛ९कͤ͞Δͱͱ ʹ ɺ֘ୈࡾऀͷߦҝʹ͍ͭͯΛෛ͏ͷͱ͢Δɻ 審査項目①:再委託の可否条件
30% |############################# | 14 of 35 -
৹߲ࠪͷఆٛ ྫ ୈ̋ʢ࠶ҕୗʣ Ե๏ྩʹΑΓېࢭ͞Ε͍ͯΔ߹Λআ͖ҕୗۀͷશ෦ ຢҰ෦Λୈࡾऀʹ࠶ҕୗ͢Δ͜ͱ͕Ͱ͖Δͷͱ͢Δɻ ͜ͷ߹ʹԵ͔͔Δୈࡾऀʹରͯ͠ɺࣗݾͷʹ͓͍ ͯຊܖٴͼݸผܖʹఆΊΔԵͷٛΛ९कͤ͞Δͱͱ ʹ ɺ֘ୈࡾऀͷߦҝʹ͍ͭͯΛෛ͏ͷͱ͢Δɻ 審査項目②:再委託先に課す義務
33% |################################ | 15 of 35 -
৹߲ࠪͷఆٛ ྫ ୈ̋ʢ࠶ҕୗʣ Ե๏ྩʹΑΓېࢭ͞Ε͍ͯΔ߹Λআ͖ҕୗۀͷશ෦ ຢҰ෦Λୈࡾऀʹ࠶ҕୗ͢Δ͜ͱ͕Ͱ͖Δͷͱ͢Δɻ ͜ͷ߹ʹԵ͔͔Δୈࡾऀʹରͯ͠ɺࣗݾͷʹ͓͍ ͯຊܖٴͼݸผܖʹఆΊΔԵͷٛΛ९कͤ͞Δͱͱ ʹ ɺ֘ୈࡾऀͷߦҝʹ͍ͭͯΛෛ͏ͷͱ͢Δɻ 審査項目③:再委託先の行為に対する責任
35% |################################### | 16 of 35 -
৹߲ࠪͷఆٛ • ൃੜ͢Δ๏ޮՌͷݸʹԠͯ͡จʹؚ·ΕΔ৹߲ࠪ ҟͳΔ ྫ̍ ྫ̎ 審査項目:業務遂行上の注意義務 審査項目①:再委託の可否条件 審査項目②:再委託先に課す義務 審査項目③:再委託先の行為に対する責任
38% |##################################### | 17 of 35 -
ΞτϥΠϯ ݚڀͷഎܠ ৹߲ࠪͷఆٛ จϚϧνϥϕϧྨʹΑΔ৹߲ࠪͷಉఆ Ϛϧνϥϕϧྨͱ ఏҊख๏ σʔληοτ
࣮ݧ݁Ռ ϚϧνϥϕϧྨΛԠ༻ͨ͠จͷׂ ϚϧνϥϕϧྨϞσϧͷ׆༻ ࣄྫ ࣄྫ ·ͱΊ 40% |####################################### | 18 of 35 -
ΞτϥΠϯ ݚڀͷഎܠ ৹߲ࠪͷఆٛ จϚϧνϥϕϧྨʹΑΔ৹߲ࠪͷಉఆ Ϛϧνϥϕϧྨͱ ఏҊख๏ σʔληοτ
࣮ݧ݁Ռ ϚϧνϥϕϧྨΛԠ༻ͨ͠จͷׂ ϚϧνϥϕϧྨϞσϧͷ׆༻ ࣄྫ ࣄྫ ·ͱΊ 43% |########################################### | 19 of 35 -
Ϛϧνϥϕϧྨͱ Ϛϧνϥϕϧྨ • ରͷσʔλʹ୯·ͨෳͷϥϕϧΛׂΓͯΔλεΫ • ຊݚڀͰѻ͏Ϛϧνϥϕϧྨɺσʔλʹ༩͞ΕΔՄೳ ੑͷ͋ΔީิϥϕϧΛ ͱ͢ΔͱڭࢣϕΫτϧ y ࣍ͷ
ؔΛຬͨ͢ • ڭࢣϕΫτϧͷ֤ཁૉ͕ɺީิϥϕϧʹ֘͢Δ͔൱͔Λɺ 1 or 0Ͱ༧ଌ͢Δ 教師ベクトル 候補ラベル数 49% |################################################# | 21 of 35 -
Ϛϧνϥϕϧྨͱ article_text 業務遂行上の 注意義務 _label 再委託の可否 条件_label 再委託先に課 す義務_label 再委託先の行
為に対する責 任_label 甲は善良なる管理者の注意をもって本件業務を遂行しなけ ればならない。 1 0 0 0 乙は法令等により禁止されている場合を除き委託業務の全 部又は一部を第三者に再委託することができるものとする。 この場合には乙はかかる第三者に対 して、自己の責任に おいて本契約及び個別契約に定める乙 の義務を遵守させ るとともに 、当該 第三者の行為について責任を負うものと する。 0 1 1 1 nσʔλͷྫʢ = 4ͷ߹ʣ ྫͷจ ྫͷจ 53% |#################################################### | 22 of 35 -
ఏҊख๏ ֶश༻σʔληοτ͔ΒɼτʔΫϯͷࢄදݱ(200࣍ݩɼ word2vecΛ༻)ͱٯจॻස (idf ) Λऔಘ͢Δ จʹग़ݱ͢ΔτʔΫϯͷࢄදݱΛidf ͰॏΈ͚ ͨ͠ͷΛฏۉ͠ɼจͷಛྔΛ࡞͢Δ step2ͷಛྔΛೖྗͱͯ͠༩͑ɺ3ʢͦΕͧΕ2048࣍ݩɺ
1024࣍ݩɺ512࣍ݩʣ͔ΒͳΔMLP (Multi Layer Perceptron) Λߏங͢Δ step1 step2 step3 57% |######################################################### | 23 of 35 -
σʔληοτ • ܖॻΛจ୯Ґʹׂͨ͠ςΩετʹରͯ͠ɺ๏ઐՈ͕ ৹߲ࠪʢϥϕϧʣ༩Λߦ͍ɺ2ສαϯϓϧΛ͑Δσʔλ ηοτΛ࡞ʢڭࢣ͖σʔλ 20,243 ɺϥϕϧͷҟͳΓ 205 ʣ 61%
|############################################################## | 24 of 35 -
• ਖ਼ղϥϕϧશମͰᮢʙ͋ͨΓͷਖ਼ղ͕࠷ߴ͍ • ਖ਼ղϥϕϧʹΑͬͯਖ਼ղ͕࠷େͱͳΔᮢ͕ҟͳΔ 確率閾値 正解率 ࣮ݧ݁Ռ 68% |############################################################################# |
26 of 35 正解ラベル数が 1 のとき正 解率が最も高くなるのは閾値 0.4〜0.6 正解ラベル数が 4 のとき正 解率が最も高くなるのは閾値 0.2〜0.3 例えば… -
ϚϧνϥϕϧྨϞσϧͷ׆༻ ಈػ • ϚϧνϥϕϧྨͷֶशࡁΈϞσϧΛ༻ͯ͠ϥϕϧͷ༧ଌ֬ܭࢉ ͢Δ͜ͱͰɺจͷ෦ͷྨΛߦ͍͍ͨ • จͷ෦ͷϥϕϧ͕͔ΕɺςΩετׂʹԠ༻͕Ͱ͖ΔͷͰ ͳ͍͔ ༧ଌ֬ͷܭࢉํ๏ 1.
Nจࣈ͋ΔςΩετʹ͍ͭͯઌ಄͔Βkจࣈநग़ͨ͠ςΩετΛֶश ࡁΈϞσϧʹೖྗ͠ɺ༧ଌͨ݁͠ՌΛอ࣋͢Δ 2. 1.ʹؔͯ͠ k= 1, 2, ..., N ·Ͱ܁Γฦ͢ 3. 2.ͷ݁ՌΛ݁߹ɺՄࢹԽ͢Δ 75% |###################################################################################### | 28 of 35 -
ࣄྫ1ʢޭࣄྫʣ ݁Ռ • ೖྗςΩετ͕ 1 ∼ 11 จࣈ·ͰมԽ͕ݟΒ Εͳ͍͕ɺʮຊ๏ʯʹԠ͠४ڌ๏ϥϕϧ ͷ༧ଌ্͕͕֬Γɺʮ౦ژʯʮํࡋ
ॴʯʹԠͯ͠ϥϕϧͷ༧ଌ্͕֬ ͕͍ͬͯΔ ߟ • ʮʯϥϕϧͷ্͕͕֬ͬͯඞͣ͠ ʮ४ڌ๏ʯϥϕϧͷ͕֬མͪͳ͍ͷ͕Ϛϧ νϥϕϧྨͷಛ • ͜ͷΑ͏ͳτʔΫϯͱϥϕϧͷ͕͖ؔͬ Γ͍ͯ͠ΔλΠϓͷจɺ৹߲ࠪ͝ͱͷ ςΩετׂ͕Ͱ͖ΔՄೳੑ͕ߴ͍͜ͱΛ ͍ࣔࠦͯ͠Δ 81% |######################################################################################### | 29 of 35 -
ࣄྫ2ʢࣦഊࣄྫʣ ݁Ռ • ༧ଌ͞Εͨ༩ϥϕϧू߹ਖ਼ղͰ͋Δ ͷͷɺೖྗςΩετ͕ 165 จࣈΛա͗ ͨޙʹ͓͍ͯϥϕϧͷ༧ଌ͕֬ٸܹ ʹݮগͨͨ͠Ίɺෆਖ਼ղͱͳͬͨ •
ϥϕϧू߹ͷΈ߹ΘͤʹΑͬͯɺ͏ ·͍͔͘ͳ͍ͷ͕͋ͬͨ ߟ • ೖྗςΩετͷ͔͞ΒϞσϧʹ༩͑Β ΕΔใྔෆ͍ͯ͠Δͱݴ͑ͳ͍ • ҟͳΔ৹߲ࠪʹಉ͡τʔΫϯͷग़ݱ͕ ֬ೝͰ͖ΔΑ͏ͳ༰͕͍ۙ͠ෳͷ৹ ߲ࠪΛͭλΠϓͷจςΩετ ׂͷқ͕ߴ͍ 86% |############################################################################################ | 30 of 35 -
·ͱΊ ϦʔΨϧσʔληοτΛ࡞ͨ͠ จϚϧνϥϕϧྨʹΑΔ৹߲ࠪͷಉఆͷͨΊͷ ख๏ΛఏҊͨ͠ ᮢͷਪҠͱਖ਼ղͷؔΛࣔͨ͠ ֶशࡁΈϞσϧΛςΩετׂʹ׆༻ͨ͠
92% |#################################################################################################### | 32 of 35 -
·ͱΊ ̍. ϦʔΨϧσʔληοτͷ࡞ • ৹߲ࠪΛ͘ཏͨ͠2ສจΛ͑Δେنͳσʔλ ηοτͷ࡞ จϚϧνϥϕϧྨʹΑΔ৹߲ࠪͷಉఆͷͨΊͷ ख๏ͷఏҊ • ࣮ݧͷ݁Ռɺܖྨܕʹؔͳ͘աෆͳ͘ਖ਼֬ʹ༧ଌϥϕ
ϧू߹Λ༩͢Δ༧ଌਫ਼ 31 ∼ 64 %ʢᮢ0.5ͷ߹ʣ 95% |####################################################################################################### | 33 of 35 -
·ͱΊ ᮢͷਪҠͱਖ਼ղͷؔ • ਖ਼ղϥϕϧʹΑͬͯਖ਼ղ͕࠷େͱͳΔᮢ͕ҟͳΔ͜ͱ Λ֬ೝͨ͠ 4. ֶशࡁΈϞσϧͷ׆༻ • ϥϕϧͷ༧ଌ֬Λ༻͢Δ͜ͱͰϥϕϧผͷςΩετׂ ͷՄೳੑΛࣔͨ͠
98% |########################################################################################################### | 34 of 35 -
ࢀߟจݙ [1] Devlin, J., Chang, M.-W., Lee, K., and Toutanova,
K.: BERT: Pre-training of deep bidirectional transformers for language understanding. arXiv preprint arXiv:1810.04805, 2018. [2] ౻Ҫ ඒᇠ, ؠ ҆ߒ, Ճ౻ ߃ত: ܖॻςΩετͷಛੳͱͦͷࣗಈྨͷࢼΈʙ ϦʔΨϧςοΫͷԠ༻ʹ͚ͯʙ, ୈ 6 ճࣗવݴޠॲཧγϯϙδϜ, pp.1-6, 2019. [3] ٢ଜࡷ྄, അઇ೫, ࣛౡٱ࢚: Ϋϥυιʔγϯ άʹΑΔϚϧνϥϕϧྨͷͨΊͷ RAkEL Λ༻͍࣭ͨཧ๏, ਓೳֶձશࠃେձจू, Vol.JSAI2016, pp.1-4, 2016. [4] Zhang, M.-L. and Zhou, Z.-H. : Multilabel Neural Networks with Applications to Funcntional Genomics and Text Categorization. In IEEE Transactions on Knowledge and Data Engineering, Vol.18, Issue10, pp.1338-1351, 2006. 100% |################################################################################################################ | fin.