Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
自然言語処理の基本 / Basic of Natural Language Processing
Search
SKA’s Web
July 10, 2021
Technology
0
310
自然言語処理の基本 / Basic of Natural Language Processing
2021-07-10のPython機械学習勉強会 in 新潟 での発表資料です。
自然言語処理の基本というか、概要というかです。
SKA’s Web
July 10, 2021
Tweet
Share
More Decks by SKA’s Web
See All by SKA’s Web
.NETでOBS Studio操作してみたけど…… / Operating OBS Studio by .NET
skasweb
0
140
学習しやすいネットワークガチャ? 深層学習の「宝くじ仮説」 【VRアカデミア クリスマスリレー】 / VR Lottery Ticket Hypothesis
skasweb
1
510
宝くじ仮説の話を少し / LT Lottery Ticket Hypothesis
skasweb
0
380
AIとクラスター分析について自作アイテムを用いて解説してみた 【VRアカデミア3周年カウントダウン】 / Explaining AI and Cluster Analysis Using My Item
skasweb
0
300
Other Decks in Technology
See All in Technology
View Transition API
shirakaba
1
900
Redefine_Possible
upsider_tech
0
210
開発組織全体で意識するSLI/SLOを実装している話
zepprix
1
790
Restarting_SRE_Road_to_SRENext_.pdf
_awache
0
130
「エンジニアマネージャー」の役割を担っている / 担ってみたい方へのキャリアパスガイド
coconala_engineer
1
230
【5分でわかる】セーフィー エンジニア向け会社紹介
safie_recruit
0
20k
ソフトウェア開発におけるインターフェイスという考え方 / PHPerKaigi 2025
k1low
9
3.8k
移行できそうでやりきれなかった 10年超えのシステムを葬るための戦略
ryu955
2
200
これからクラウドエンジニアになるために本当に必要なスキル 5選
hiyanger
1
460
大規模プロジェクトにおける 品質管理の要点と実践 / 20250327 Suguru Ishii
shift_evolve
0
250
AWS CDK コントリビュート はじめの一歩
yendoooo
1
110
技術好きなエンジニアが _リーダーへの進化_ によって得たものと失ったもの / The Gains and Losses of a Tech-Enthusiast Engineer’s “Evolution into Leadership”
kaminashi
0
190
Featured
See All Featured
Dealing with People You Can't Stand - Big Design 2015
cassininazir
366
25k
Being A Developer After 40
akosma
90
590k
Navigating Team Friction
lara
183
15k
Building Applications with DynamoDB
mza
94
6.3k
Keith and Marios Guide to Fast Websites
keithpitt
411
22k
Music & Morning Musume
bryan
46
6.4k
How To Stay Up To Date on Web Technology
chriscoyier
790
250k
The Language of Interfaces
destraynor
156
24k
Build your cross-platform service in a week with App Engine
jlugia
229
18k
The Cult of Friendly URLs
andyhume
78
6.3k
[RailsConf 2023] Rails as a piece of cake
palkan
53
5.4k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
331
21k
Transcript
ࣗવݴޠॲཧͷجຊ 1ZUIPOػցֶशษڧձ JO৽ׁ 4,"`T8FC 1
ࢿྉͷϦϯΫషΔϖʔδ 2 ʢ͜͜ʹϦϯΫΛషΓ·͢ʣ
࣍ r ࣗવݴޠॲཧͷجຊ 3 ɾࣗવݴޠॲཧͱ ɾࣗવݴޠॲཧͷओͳλεΫ ɾλεΫΛղͨ͘Ίͷख๏ ɾࣗવݴޠॲཧͰΘΕ͍ͯΔਂֶश ɾਂֶशͷར
5XJUUFS࿈ܞ 4 #pyml_niigata ͰͭͿ͘ͱʜʜ ɾ࣭ ɾײ FY ͲΜͲΜͭͿ͍ͯΈͯͶ ը૾ɿ5XJUUFSɼLPOHBSJOJLV
༷ɼΔ͔ ༷
ࣗݾհ 5 ͦͷଞৄࡉɿIUUQTTDSBQCPYJPWSBDBEFNJBXJLJ4,"
ࠂʢ73ΞΧσϛΞɾՆΩϟεϚʔέοτʣ 6 ը૾ɿ73ΞΧσϛΞɼՆΩϟεϚʔέοτ
ࠂ 7 ԬՖՐόʔνϟϧؑձ ։࠵༧ఆ ݄ʢ݄ʣɿόʔνϟϧΩϟετ੮ ಉਓ ˇ ݄ʢՐʣɿ73$IBU੮ ಉnਓ ˇ
ࣗવݴޠॲཧͱ 8 ࣗવݴޠॲཧɿࣗવݴޠΛίϯϐϡʔλʔʹॲཧͤ͞Δ͜ͱશൠ ࣗવݴޠɿࣗવͱൃల͖ͯͨ͠ݴޠ ʢྫʣຊޠɼӳޠɼதࠃޠ نଇ͕ ෳࡶͰ؆୯ʹύʔεͰ͖ͳ͍ ݴޠΛίϯϐϡʔλʔͰѻ͏ ը૾ɿ͍Β͢ͱ
ࣗવݴޠॲཧͷجຊతͳλεΫ 9 ɾܗଶૉղੳɿ୯ޠʹׂͯ͠ࢺΛਪఆ ໋ʢ໊ࢺʣʗ͢ʢ໊ࢺʣʗʢॿࢺʣʗʢ໊ࢺʣʗʢॿࢺʣʗʢ໊ࢺʣʗͷʢॿࢺʣʗ͏ͪʢ໊ࢺʣʗʢॿࢺʣʗ ِʢ໊ࢺʣʗͰʢॿಈࢺʣʗ͋Δʢಈࢺʣ ɾߏจղੳɿ֤୯ޠ PSจઅͷΓड͚ؔΛਪఆ ɾݻ༗දݱநग़ɿ͍ͭɾͲ͜Ͱɾ୭͕ Λநग़ ɾ͔ͳࣈม
ը૾ɿ(J/;"
ࣗવݴޠॲཧͷԠ༻తͳλεΫ 10 ɾจॻྨɿʢྫʣ5XJUUFSͷτϨϯυɺ໎ϝʔϧϑΟϧλʔɺ͍߹ΘͤΛ֤෦ॺʹׂৼΔ ɾจষੜɿʢྫʣΓΜͳͪΌΜɺ(15 ɾ༁ɿʢྫʣ%FFQ- ɾײੳɿʢྫʣϦΞϧλΠϜݕࡧɺલϖʔδͷը૾ ɾߍਖ਼ɿʢྫʣ8PSE ɾཁ ɾจॻݕࡧ ը૾ɿ5XJUUFSɺ:BIPP+"1"/
·ͣ୯ޠʹׂ͠ͳ͍ͱ࢝·Βͳ͍ 11 ɾܗଶૉղੳɿ୳ࡧ ͢ʢ໊ࢺʣʗʢॿࢺʣʗʢ໊ࢺʣʗʢॿࢺʣʗʢ໊ࢺʣʗͷʢॿࢺʣʗ͏ͪʢ໊ࢺʣ ɾʮ֎ࠃਓࢀݖʯʮ֎ࠃʗਓࢀʗݖʯPSʮ֎ࠃʗਓʗࢀʗݖʯʁ ɾࣙॻʹ͋ΔશύλʔϯΛॻ͖ग़͢ ɾΒ͖݅֬͠͞࠶ؼχϡʔϥϧωοτϫʔΫͰֶश ը૾ɿ+6."/
୯ޠΛͲ͏දݱ͢Δʁ 12 ɾ୯ޠʹׂͰ͖ͯจࣈίʔυͷ··Ͱҙຯͷ͋Δԋࢉ͕Ͱ͖ͳ͍ ɾࣗવݴޠϧʔϧ͕ෳࡶ ˠ ౷ܭతͳख๏Λ͏ ɾҰൠతͳຊਓӳޠʹͨ͘͞Μ৮Εͳ͍ͱӳޠ্ୡ͠ͳ͍ ɾ౷ܭͳͷͰ୯ޠΛϕΫτϧԽͰ͖ͨΒউར ʢຒΊࠐΈʣ
౷ܭͱϕΫτϧͬͯؔ͋Δͷʁ 13 ɾσʔλɼσʔλɼʜʜΛͻͱ·ͱΊʹͯ͠ ͻͱͭͷϕΫτϧͱΈͳͤΔ ɾྫ͑ɺ߹ܭֹۚͷܭࢉ ໊ ୯Ձʢԁʣ ݸʢݸʣ ക͓ʹ͗Γ
ࡪ͓ʹ͗Γ πφ͓ʹ͗Γ ߹ܭ ºʴ ºʴ º ݸ ୯Ձ ߹ܭʹ୯Ձɾݸ
୯ޠΛͲ͏දݱ͢Δʁ 14 ɾ#BHPG8PSET ɾ͋Δ୯ޠ͕ग़͖ͯͨΒͦͷ୯ޠͷཁૉΛɺͳ͔ͬͨΒͱͯ͠ϕΫτϧԽ ˞ग़ݱճͱ͢Δ߹͋Δ ɾͪΐX࣍ݩXXXX ɾྫจ"ʮࢲ.POUZ1ZUIPOΛݟͳ͕Β1ZUIPOΛॻ͍ͨʯ ɾྫจ#ʮ·ͭͱ͞Μ3VCZΛॻ͍͍ͯΔʯ ࢲ .POUZ
1ZUIPO ॻ͘ ·ͭͱ 3VCZ ྫจ" ྫจ#
୯ޠΛͲ͏දݱ͢Δʁ 15 ɾ8PSE7FD ɾҰൠతͳจॻ͍ۙҐஔʹग़ͯ͘Δ୯ޠҙຯ͍ۙ ɾগͳ͍࣍ݩͰҙຯΛؚΊͨԋࢉΛߦ͍͍ͨ ɾͦͷ୯ޠͷલޙʹͲͷΑ͏ͳ୯ޠ͕དྷΔ͕֬ߴ͍͔ͰϕΫτϧԽʢࢄදݱʣ ɾӅΕͷχϡʔϥϧωοτͰपลޠͷ༧ଌλεΫͱֶͯ͠श ࢲ .POUZ ॻ͘
·ͭͱ 3VCZ 1ZUIPO
ਂֶशͰ͖Μ͡ΌΜ 16 ɾ୯ޠΛϕΫτϧԽͰ͖ͨʂ ɾจষͬͯ࣌ؒ͝ͱʹมΘΔϕΫτϧ͡ΌΜʂʂ ࢲ .POUZ1ZUIPOΛ ݟ ͳ͕Β 1ZUIPOΛ
ॻ͍ ͨ
ਂֶशͰ͖Μ͡ΌΜ 17 "ͷ֬aɼ#ͷ֬b
ਂֶशʹΑΔࣗવݴޠॲཧ 18 ɾ3//ʢ࠶ؼχϡʔϥϧωοτϫʔΫʣ ɾ(36ʴ"UUFOUJPO ɾ5SBOTGPSNFS ɾ#&35 ɾ5 ɾ͜͜ΒΜৄ࣍͘͠ճҎ߱ʹ
ਂֶशʹΑΔࣗવݴޠॲཧ 19 ɾ3//ʢ࠶ؼχϡʔϥϧωοτϫʔΫʣ ɾ(36ʴ"UUFOUJPO ɾ5SBOTGPSNFS ɾ#&35 ɾ5 ɾ͜͜ΒΜৄ࣍͘͠ճҎ߱ʹ
·ͱΊ 20 ɾࣗવݴޠॲཧίϯϐϡʔλʔʹࣗવݴޠΛॲཧͤ͞Δ͜ͱ ɾ·ͣจࣈྻΛ୯ޠʹׂ͢Δඞཁ͕͋Δ ɾ୯ޠϕΫτϧԽ͢Δͱ͍͍͜ͱ͋ΔͶ ɾਂֶशΛ͏ϝϦοτͱ͔࣮·ΘΓʹ͍ͭͯ࣍ճҎ߱Ͱ