Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Natural Language APIとその裏側を覗く〜完全版〜
Search
akatsuki174
August 27, 2017
Technology
1
1.5k
Natural Language APIとその裏側を覗く〜完全版〜
5分に収まるように削らなかったバージョンの資料です。
削った方は08/28 potatotips #43で使用します。
akatsuki174
August 27, 2017
Tweet
Share
More Decks by akatsuki174
See All by akatsuki174
Appleにおけるプライバシーの全容を把握する
akatsuki174
0
4.8k
近年のAppleにおける位置情報とプライバシー
akatsuki174
3
320
オフライン勉強会ぼっち対策
akatsuki174
1
470
Xcode 15の新機能
akatsuki174
0
2.2k
AndroidにもSelect Photosがやってきた
akatsuki174
0
790
Famm Android改善記
akatsuki174
0
310
Flutterアプリ開発にネイティブコードはどこまで求められるのか
akatsuki174
2
3.6k
UIKitのアップデート #WWDC22
akatsuki174
4
1k
職能/職種横断でチームの生産性を高める
akatsuki174
2
5.6k
Other Decks in Technology
See All in Technology
Java EE/Jakarta EEの現状と将来―クラウドネイティブ時代にJava EEは対応できるのか?―
takakiyo
1
160
長期間TiDBを使ってきた話 @ 私たちはなぜNewSQLを使うのかTiDB選定5社が語る選定理由と活用LT / Experiences with TiDB Over Time
chibiegg
2
900
LLM開発・活用の舞台裏@2024.04.25
yushin_n
1
340
Gitlab本から学んだこと - そーだいなるプレイバック / gitlab-book
soudai
4
430
TechFeed Experts Night#27 〜 フロントエンドフレームワーク最前線 (Svelte)
baseballyama
1
530
開発パフォーマンスを最大化するための開発体制
ham0215
2
430
Building a RAG-poweredAI chat appwith Python and VS Code
pamelafox
0
100
リテール金融(キャッシュレス・ネット銀行・ネット証券)の競争環境と経済圏
8maki
0
1.2k
地理空間データ可視化・解析・活用ソリューション Pacific Spatial Solutions (PSS)
pacificspatialsolutions
0
290
Azure Container Apps + Bicep 〜 こんな感じで運用しています
kaz29
2
480
いつか使うかも貯金してたらめちゃめちゃ機能が増えてた話
riyaamemiya
0
250
JAWS-UG Bedrock Claude Night
yamahiro
3
610
Featured
See All Featured
The Brand Is Dead. Long Live the Brand.
mthomps
49
29k
Building Flexible Design Systems
yeseniaperezcruz
319
37k
Designing the Hi-DPI Web
ddemaree
276
33k
Fight the Zombie Pattern Library - RWD Summit 2016
marcelosomers
227
16k
5 minutes of I Can Smell Your CMS
philhawksworth
199
19k
Designing Dashboards & Data Visualisations in Web Apps
destraynor
226
51k
Building Better People: How to give real-time feedback that sticks.
wjessup
355
18k
Statistics for Hackers
jakevdp
789
220k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
34
8.9k
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
352
28k
The Pragmatic Product Professional
lauravandoore
25
5.8k
How To Stay Up To Date on Web Technology
chriscoyier
782
250k
Transcript
Natural Language APIͱ ͦͷཪଆΛ͘ ʙશ൛ʙ @akatsuki174
ࣗݾհ • ਢ౻ຘ • iOSΤϯδχΞ • גࣜձࣾZaimॴଐ • Twitter, Qiita,
SlideShare, Github, SpeakerDeck →akatsuki174
None
એ̍ 10/13(ۚ)ɺ10/20(ۚ)ͷ2days 19:20ʙ
એ̎ 9/1(ۚ) 19:30ʙ
ࢲͱࣗવݴޠॲཧ ɾେֶͷଔۀݚڀͰΏΔΏΔ1ؒ ʢॏཁޠఆʣ ɾ࠷ॳͷձࣾͰ2,3ϲ݄ ʢτϐοΫఆʣ ɾ2ࣾͰΏΔΏΔ ʢSolrͰݕࡧνϡʔχϯάʣ
ࠓճͷࢿྉɺ͜ͷొஃࢿྉΛ࡞ΔաఔͰઢͯ͠ ௐͨ͜ͱΛ·ͱΊͨࢿྉʹͳΓ·͢ɻ 9/17() Track C 14:40ʙΑΖ͓͘͠ئ͍͠·͢ʂ
ɾNatural Language Processing and your ɹApps[WWDC 2017]ͷͬ͘͟Γͱͨ͠༰ ɾཪଆͰΘΕ͍ͯΔٕज़ʹ͍ͭͯ ࠓ͢͜ͱ
ɾϑΝʔετύʔςΟΞϓϦͰͲͷΑ͏ͳ ɹ׆༻͕͞ΕΔ͔ ɾNLP APIͱ ɾ͋ͳͨͷΞϓϦͰͲͷΑ͏ʹ͏ͱ ɹྑ͍͔ʢͨͿΜɻ·ͩશ෦؍ͯͳ͍ʣ Natural Language Processing and
your Apps
ɾϑΝʔετύʔςΟΞϓϦͰͲͷΑ͏ͳ ɹ׆༻͕͞ΕΔ͔ ɾNLP APIͱ ɾ͋ͳͨͷΞϓϦͰͲͷΑ͏ʹ͏ͱ ɹྑ͍͔ʢͨͿΜɻ·ͩશ෦؍ͯͳ͍ʣ Natural Language Processing and
your Apps
Natural Language Processing and your Apps https://developer.apple.com/videos/play/wwdc2017/208/ Go to iMessage
app
Natural Language Processing and your Apps https://developer.apple.com/videos/play/wwdc2017/208/ Go to News
app
Natural Language Processing and your Apps https://developer.apple.com/videos/play/wwdc2017/208/ Back to iMessage
app
ݻ༗දݱநग़ͷٕज़Λ͍ͬͯΔ ͷͰɺͦ͜Λ۷ΓԼ͛ͯΈ·͢ ʢҎԼɺiOSશؔ͘ͳ͍ʹͳΓ·͢ʣ ͓ͦΒ͘ɺ
ݻ༗໊ࢺʢਓ໊ɺ໊ʣɺ࣌ؒදݱ ʢɺ࣌ࠁʣͳͲΛςΩετ͔Βநग़͢Δٕज़ ͜ͷٕज़͕ొͨ͠എܠ ɹɾࣙॻʹ୯ޠ͕ొ͞Ε͍ͯͳ͍ͱղੳ ɹɹޡΓΛҾ͖ى͜͢ͷͰࣗಈͰநग़͍ͨ͠ ɹɾจষʹ͓͍ͯॏཁͳใ্هͷ ɹɹΑ͏ͳݻ༗දݱͰ͋Δ ݻ༗දݱநग़ͱ
ଠ5݄18ͷே9࣌ʹՖࢠʹձ͍ʹߦͬͨɻ ↓ɹநग़ʂ ଠʢpersonʣ5݄18ʢdateʣͷே9࣌ ʢtimeʣʹՖࢠʢpersonʣʹձ͍ʹߦͬͨɻ ݻ༗දݱநग़ͷྫ
ɾ࣭ԠγεςϜɺରγεςϜɹ ɹʢWatsonɺνϟοτϘοτʣ ɾใநग़ ݻ༗දݱநग़ͷ׆༻υίϩ
ɾ࣭ԠγεςϜɺରγεςϜɹ ɹʢWatsonɺνϟοτϘοτʣ ɾใநग़ ݻ༗දݱநग़ͷ׆༻υίϩ ࣗવݴޠ͔Βݻ༗දݱΛநग़͠ɺͦͷݻ༗දݱΛ ΫΤϦͱͯ͛ͯ͠จॻݕࡧΛߦ͏ɻಘΒΕͨճ ͱݻ༗දݱΛͱʹճީิΛ࡞͠ɺͦͷதͰ είΞ͕ߴ͍ͷΛճͱ͢Δɻ
࣭ԠγεςϜɺରγεςϜ ौ୩Ͱ໌19:30͔Β༧ Ͱ͖ΔళΛ୳ͯ͠ʂ q=ौ୩, ໌19:30 ճީิ࡞ ※࣮ࡍʹଞͷޠ͍͛ͯΔͣ ͳΔ΄Ͳ͒ʂ είΞܭࢉ
ɾ࣭ԠγεςϜɺରγεςϜɹ ɹʢWatsonɺνϟοτϘοτʣ ɾใநग़ ݻ༗දݱநग़ͷ׆༻υίϩ ༧ΊܾΊͨʮΓ͍ͨ͜ͱ߲ʯΛຒΊΔܗͰใ Λநग़͢Δ͜ͱɻߏԽ͞Ε͍ͯͳ͍ςΩετใ ΛߏԽ͞Εͨσʔλϕʔεܗࣜʹม͢Δ͜ͱͱ ଊ͑Δ͜ͱ͕Ͱ͖Δɻ
ݻ༗දݱநग़ͷ׆༻υίϩ ࡢ͋ͬͨͷ࠷େɺ Ϛάχνϡʔυɺݯʹ ͍ͭͯΓ͍ͨ ʔʔʔ Ϛάχνϡʔυ Mʔ ݯ ʙݝʙࢢ
※ͪΐͬͱΠϝʔδਤҧ͏͔ ςΩετ͔Βݻ༗දݱΛநग़
ɾࣝϕʔεख๏ ɾ౷ܭతख๏ ݻ༗දݱநग़Λ͢Δʹ
ɾنଇʢύλʔϯʣΛਓखͰ࡞͠ɺ ɹͦΕʹͯ·ΔͷΛநग़͢Δ ɹྫʣ໊ࢺʴʮ͞Μʯˠਓ໊ ɹɹɹ໊ࢺʴʮࢯʯˠ໊ ɾنଇΛཏతʹߏங͠Α͏ͱ͢Δͱ ɹലେͳίετ͕͔͔Δ ࣝϕʔεख๏
ɾڭࢣ͋ΓֶशΛͤ͞ɺநग़نଇΛࣗಈ ɹֶश͢ΔΑ͏ʹ͢Δ ɾSVMʢSupport Vector Machine / ࣝผ ɹؔʣCRFʢConditional Random ɹFields
/ ࣝผϞσϧʣ͕༗໊ ౷ܭతख๏
͍Ζ͍Ζ͍͕͠ग़͖ͯͨ͠ɺຊޠͷ ղੳͱͯෳࡶ ͳͷͰݻ༗දݱநग़Λָʹ͢ΔπʔϧΛ հͯ͠Έ·͢ɻ
ɾMeCab ͱڞʹ͏୯ޠ͔ͪॻ͖ࣙॻ ɾ࠷݄2ճΞοϓσʔτ ɹɾ৽ޠɺݻ༗දݱʹڧ͍ ɾApache License 2.0 ɾࠃ࢈ mecab-ipadic-NEologd
ɾಈ࡞ʹඞཁͳϥΠϒϥϦͷΠϯετʔϧ $ brew install mecab mecab-ipadic git curl xz ɾgit
clone $ git clone --depth 1 https://github.com/ neologd/mecab-ipadic-neologd.git ɾcloneͨ͠σΟϨΫτϦͰΠϯετʔϧ $ ./bin/install-mecab-ipadic-neologd -n Πϯετʔϧ
ɾશ෦ೖΓͳmecab-ipadic-NEologdΛ ɹΠϯετʔϧ $ ./bin/install-mecab-ipadic-neologd -n -a ɾΠϯετʔϧઌΛ֬ೝ $ echo `mecab-config
--dicdir`"/mecab- ipadic-neologd" Πϯετʔϧ
ɾී௨ͷIPAࣙॻΛ͏߹ $ mecab ɾNEologdΛ͏߹ $ mecab -d [ΠϯετʔϧઌΛࢦఆ] ͬͯΈΔ
ɾී௨ͷIPAࣙॻ ྫจʣϝϩϯύϯΛ৯·ͨ͠ ϝϩϯ ໊ࢺ,Ұൠ,*,*,*,*,ϝϩϯ,ϝϩϯ,ϝϩϯ ύϯ ໊ࢺ,Ұൠ,*,*,*,*,ύϯ,ύϯ,ύϯ Λ ॿࢺ,֨ॿࢺ,Ұൠ,*,*,*,Λ,Ϯ,Ϯ ৯ ಈࢺ,ཱࣗ,*,*,Ұஈ,࿈༻ܗ,৯Δ,λϕ,λϕ
·͠ ॿಈࢺ,*,*,*,ಛघɾϚε,࿈༻ܗ,·͢,Ϛγ,Ϛγ ͨ ॿಈࢺ,*,*,*,ಛघɾλ,جຊܗ,ͨ,λ,λ ൺֱͯ͠ΈΔ̍
ɾNEologd ྫจʣϝϩϯύϯΛ৯·ͨ͠ ϝϩϯύϯ ໊ࢺ,ݻ༗໊ࢺ,Ұൠ,*,*,*,ϝϩϯύϯ,ϝ ϩϯύϯ,ϝϩϯύϯ Λ ॿࢺ,֨ॿࢺ,Ұൠ,*,*,*,Λ,Ϯ,Ϯ ৯ ಈࢺ,ཱࣗ,*,*,Ұஈ,࿈༻ܗ,৯Δ,λϕ,λϕ ·͠
ॿಈࢺ,*,*,*,ಛघɾϚε,࿈༻ܗ,·͢,Ϛγ,Ϛγ ͨ ॿಈࢺ,*,*,*,ಛघɾλ,جຊܗ,ͨ,λ,λ ൺֱͯ͠ΈΔ̍
ɾී௨ͷIPAࣙॻ ྫจʣ3݄ͷϥΠΦϯΛಡΜͩ 3 ໊ࢺ,,*,*,*,*,* ݄ ໊ࢺ,Ұൠ,*,*,*,*,݄,πΩ,πΩ ͷ ॿࢺ,࿈ମԽ,*,*,*,*,ͷ,ϊ,ϊ ϥΠΦϯ ໊ࢺ,Ұൠ,*,*,*,*,ϥΠΦϯ,ϥΠΦϯ,ϥΠΦϯ
Λ ॿࢺ,֨ॿࢺ,Ұൠ,*,*,*,Λ,Ϯ,Ϯ ಡΜ ಈࢺ,ཱࣗ,*,*,ޒஈɾϚߦ,࿈༻λଓ,ಡΉ,Ϥϯ,Ϥϯ ͩ ॿಈࢺ,*,*,*,ಛघɾλ,جຊܗ,ͩ,μ,μ ൺֱͯ͠ΈΔ̎
ɾNEologd ྫจʣ3݄ͷϥΠΦϯΛಡΜͩ 3݄ͷϥΠΦϯ ໊ࢺ,ݻ༗໊ࢺ,Ұൠ,*,*,*,3݄ͷϥΠ Φϯ,αϯΨπϊϥΠΦϯ,αϯΨπϊϥΠΦϯ Λ ॿࢺ,֨ॿࢺ,Ұൠ,*,*,*,Λ,Ϯ,Ϯ ಡΜ ಈࢺ,ཱࣗ,*,*,ޒஈɾϚߦ,࿈༻λଓ,ಡΉ,Ϥ ϯ,Ϥϯ
ͩ ॿಈࢺ,*,*,*,ಛघɾλ,جຊܗ,ͩ,μ,μ ൺֱͯ͠ΈΔ̎ ΞχϝλΠτϧ ͳͲOK
ɾී௨ͷIPAࣙॻ ྫจʣApple WatchΛങͬͨɻ Apple ໊ࢺ,ݻ༗໊ࢺ,৫,*,*,*,* Watch ໊ࢺ,Ұൠ,*,*,*,*,* Λ ॿࢺ,֨ॿࢺ,Ұൠ,*,*,*,Λ,Ϯ,Ϯ ങͬ
ಈࢺ,ཱࣗ,*,*,ޒஈɾϫߦଅԻศ,࿈༻λଓ,ങ͏, Χο,Χο ͨ ॿಈࢺ,*,*,*,ಛघɾλ,جຊܗ,ͨ,λ,λ ɻ ه߸,۟,*,*,*,*,ɻ,ɻ,ɻ ൺֱͯ͠ΈΔ̏
ɾNEologd ྫจʣApple WatchΛങͬͨɻ Apple Watch ໊ࢺ,ݻ༗໊ࢺ,Ұൠ,*,*,*,Apple Watch,Ξο ϓϧΥον,ΞοϓϧΥον Λ ॿࢺ,֨ॿࢺ,Ұൠ,*,*,*,Λ,Ϯ,Ϯ
ങͬ ಈࢺ,ཱࣗ,*,*,ޒஈɾϫߦଅԻศ,࿈༻λଓ,ങ͏, Χο,Χο ͨ ॿಈࢺ,*,*,*,ಛघɾλ,جຊܗ,ͨ,λ,λ ɻ ه߸,۟,*,*,*,*,ɻ,ɻ,ɻ ൺֱͯ͠ΈΔ̏ ۭനεϖʔε͕ ͋ͬͯOK
͍͢͝ ʢখฒײʣ
Կ͕ݴ͍͍͔ͨΘ͔Βͳ͘ ͳ͖ͬͯͨͷͰऴΘΓʹ͠·͢
͋Γ͕ͱ͏͍͟͝·ͨ͠ʂ