reiwatravel_20250416_vpoe-magara_lt

Slide 1

Slide 1 text

Slide 2

Slide 2 text

© 2024 Reiwa Travel, Inc.  2  経歴 Backendエンジニア @リクルート ↓ EM @リクルート ↓ EM兼PdM @令和トラベル ↓ 執⾏役員VPoE & PdM@令和トラベル ※ CTO of the year2024優勝しました💪 ※ でも今はほぼPdM業しかできてません😇 ※ AIチームの⼀員でもありますが回ってません😇😇 執⾏役員 VPoE & PdM まがらしょうたろう

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

© 2024 Reiwa Travel, Inc.  事例1: AIトラベルコンシェルジュ機能 15  🌟 難しかったポイント ● でも利用者は、自分でも言語化できないニーズまで吸い出してなんかいい感じの提案してくれることを期待している ● それは旅行代理店のプロスタッフに対する暗黙的な期待値 ● 旅行という商材の特性から機械的条件だけでは汲み取りきれない機微なニーズを汲み取った提案は重要だが、その期待値は高いうえに暗黙的である ● 成功までの技術的ハードルも高く、シンプルに投資対効果が見えにくい

Slide 16

Slide 16 text

© 2024 Reiwa Travel, Inc.  Tips ① まなび 16  「LLM機能の出力精度」と「利用者の期待値」を合わせる ⚠現実的な精度でも利用者の期待値に応えることができる位置づけの機能 ❌ AIトラベルコンシェルジュ 󰢏 AI旅行計画アシスト旅行代理店としての公式見解と、人間らしい接客を期待値として持たれてしまう。。。ｷﾋﾞｼｲあくまでも自分の作業の効率化サポートの位置づけ。精度100%ではなくても自分で手直ししてトータル便利であれば OK、的な期待値。いけそう！

Slide 17

Slide 17 text

Slide 18

Slide 18 text

© 2024 Reiwa Travel, Inc.  事例2: ツアーへの⾃動タグ付け 18  🌟 機能概要 ● 裏側で約10万件のツアーに自動で特徴をタグ付けして、ツアー絞り込み機能を提供するというもの ● ツアーデータをインプットに、各特徴タグを付与すべきかすべきでないかという二値分類問題にLLMを利用 🌟 成果 ● 一部のタグを除き現実的に利用可能な精度で一括付与が完了 ● 絞り込み利用率も上々🎉

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

© 2024 Reiwa Travel, Inc.  事例3: マガジン記事の下書き⾃動⽣成 21  🌟 機能概要 ● NEWT Magazine記事の下書きを自動で生成する機能 ● 構成フォーマットをもとに一連の記事作成フローを自動実行 ○ データ収集 ○ 文章生成 ○ 画像選定 ○ CMS入稿 🌟 成果 ● フォーマット確立した後の作成スピードはファクトチェックや校閲のみとなり大幅スピードアップ。コンテンツの量産化に成功🎉

Slide 22

Slide 22 text

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

Slide 30

Slide 30 text

Slide 31

Slide 31 text

© 2024 Reiwa Travel, Inc.  事例2: ツアーへの⾃動タグ付け 31  🚀 Human-in-the-loopを高速にまわすための工夫も重要 1) 精度向上プロジェクトと捉えてプロセスを設計する 2) LangSmithなどで評価収集などLLMOpsを整える 3) アノテーションしてテストデータセットを用意する 4) エッジケースなど発見するたびにテストデータセットを拡充していく