Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Sign up for free
Menu
Search
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Pricing
Search
Sign in
Sign up for free
自然言語処理 @ クックパッド / nlp at cookpad
Search
himkt
July 07, 2019
Technology
600
1
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
自然言語処理 @ クックパッド / nlp at cookpad
https://connpass.com/event/135387/
himkt
July 07, 2019
Transcript
9 slides
自然言語処理 @ クックパッド 研究開発部 リサーチエンジニア Makoto Hiramatsu <
[email protected]
>
/ 9 自己紹介 ! 平松 淳 (Makoto Hiramatsu) ! @himkt
(Twitter/GitHub) ! 2019 年新卒 (2018 年 5 月 ~ 内定者アルバイト) ! 自然言語処理してます ( nlpaper.challenge の運営をしています ) 2
None
国内レシピ 310 万品+ 月間利用者 約 5,500 万人 海外レシピ 241 万品+
月間利用者 約 4,100 万人
/ 9 クックパッドの R&D ! 最高のデータ環境 (DWH がすごい) ! おおよそすべてのデータが1箇所に集約されている
! 自由にクエリを投げてデータを解析できる! ! 自分で作ったアプリケーション,プロダクション環境まで ! Dockerfile を書く -> Hako (コンテナ管理システム) でデプロイ ! (https://github.com/eagletmt/hako) 5
/ 9 クックパッドの R&D (NLPer 目線) ! サービスで実際に使う機能をつくる ! クックパッド本体
+ さまざまなサービス ! 専門知識を持ったアノテータさんが常駐している ! タスクを思いついた! GitHub issue 作成 アノテーション ! 基礎レベルの解析も大事にしていく雰囲気があります ! スタッフが使える形態素解析の辞書管理ツール ! 継続的改善への取り組み: MeCab の辞書再学習 6
クックパッドの自然言語処理 アプリケーション (レシピ検索,分類,翻訳,調理手順分類,ご意見分類) 述語項構造解析 談話構造解析 構文解析 形態素解析 固有表現抽出 文脈レベル 格解析 同義表現認識 -
同義料理名辞書 - 食材名認識 - 材料名正規化 語彙曖昧性解消 構文レベル 単語レベル
格解析 同義表現認識 - 同義料理名辞書 - 食材名認識 - 材料名正規化 語彙曖昧性解消 アプリケーション
(レシピ検索,分類,翻訳,調理手順分類,ご意見分類) 述語項構造解析 談話構造解析 構文解析 クックパッドの自然言語処理 形態素解析 固有表現抽出 文脈レベル 構文レベル 単語レベル 基礎解析 × R&D! ✅ 大量トラフィックを捌ける ✅ 形態素解析より高段の言語解析ができる
大規模サービスの言語解析基盤に知見があるかた おしゃべりしたいです クックパッドの自然言語処理に興味をもってくださったかた ぜひぜひお気軽にお声がけください
More Decks by himkt
See All by himkt
Linformer: paper reading
himkt
0
910
RoBERTa: paper reading
himkt
1
470
NLP SoTA 勉強会 / ner_2019
himkt
2
1.5k
Interpretable Machine Learning 6.3 - Prototypes and Criticisms
himkt
2
240
ニューラル固有表現抽出 / Neural Named Entity Recognition
himkt
3
880
ニューラル固有表現抽出器を実装してみる / PyNER
himkt
6
2.3k
Spacyでお手軽NLP / NLP with spacy
himkt
0
1.1k
Deep Learning Book 10その2 / deep learning book 10 vol2
himkt
2
230
ふわふわ系列ラベリング / ner 2018
himkt
5
890
Other Decks in Technology
See All in Technology
Linuxネットワークスタック進化の軌跡: 過去10年の歩みと最新トレンド
orimanabu
4
750
目を覚ませ!僕らの認証情報が何者かに侵略されてるぞ
tkito
2
460
市販IoT機器や自作IoT機器とHomeAssistantを駆使して家の電気代をできる限り見える化する方法の考案
harutiro
0
390
gradle-best-practices 使ってみた
mikanichinose
0
160
メール到達性を支える、リンク先URLのドメイン評価の扱い方
wind111
0
160
AI時代における医療情報システムのセキュリティ / Security of Healthcare IT Systems in the AI Era
henryofficial
0
190
高品質と高スピードを支える品質のシフトレフトのアプローチ
goyoki
4
1.6k
E2E Test というハーネス — AI時代の自動テスト民主化
daishukojima
10
5.7k
Context parameters で作る!はじめての型クラス
kworkdev
PRO
1
150
飯から始まるデータエンジニア
sansantech
PRO
0
110
[NW-JAWS DAY]「うちのAWS、インターネット出られないんで」― AWS外の自社サービスをPrivateLinkでシュッと公開する方法
ykimi
3
860
ぼくのClaude Codeの使い方
falken
PRO
5
7.5k
Featured
See All Featured
The SEO Collaboration Effect
kristinabergwall1
1
620
Become a Pro
speakerdeck
PRO
31
6.4k
Lightning talk: Run Django tests with GitHub Actions
sabderemane
0
320
From π to Pie charts
rasagy
1
450
Redefining SEO in the New Era of Traffic Generation
szymonslowik
1
530
A better future with KSS
kneath
240
18k
[RailsConf 2023] Rails as a piece of cake
palkan
59
7.2k
Building Adaptive Systems
keathley
44
3.3k
Tips & Tricks on How to Get Your First Job In Tech
honzajavorek
1
850
Money Talks: Using Revenue to Get Sh*t Done
nikkihalliwell
0
560
The Pragmatic Product Professional
lauravandoore
37
7.5k
Docker and Python
trallard
47
4.3k