【松尾研 LLM Community登壇資料】今よりAIを使いこなすには？LLMによるプロンプト/コードログ分析

Transcript

1. © Findy Inc. 1
2. お忙しい中ご参加いただきありがとうございます！！！ ぜひよろしくお願いいたします💪 © Findy Inc. 2
3. 簡単に⾃⼰紹介させてください🙏 ファインディ株式会社 菅本 隆文 @sugamoto_ta 【略歴】 • 3社目でFindy入社 • 社長室 新規事業開発 ◦ 開発組織向けAIエージェントサービス 「Findy AI+」を立ち上げ レンタカー一人旅、河川敷散歩などが趣味です！ © Findy Inc. 3
4. 携わっているサービス「Findy AI+」について こちらから無料でご利 ⽤いただけます！👉 © Findy Inc. 4
5. 携わっているサービス「Findy AI+」について こちらから無料でご利 ⽤いただけます！👉 © Findy Inc. 5
6. 最後までお付き合いいただけますと幸いです🙌 © Findy Inc. 6
7. 今⽇のアジェンダです！ © Findy Inc. 7
8. 本⽇のアジェンダ 時間 アジェンダ 20:00〜20:05（5分） オープニング‧⾃⼰紹介 20:05〜20:15（10分） ①プロンプト‧セッションログとは何か？ ②なぜ/どのようにプロンプト‧セッションログの分析でAIの伸び代がわかるのか？ ③ハンズオンの流れのご紹介 20:15〜20:45（30分） ①セッションログの場所を確認＋セッションログ内容をLLMに渡す ②現状のAI活⽤度を診断する ③AI活⽤のボトルネックを分析する ④改善施策を整備する 例：ガードレール追加 例：Skill追加 例：計画ファーストルール追加 20:45〜20:55（10分） Q&A 20:55〜21:00（5分） クロージング&アンケート配布 8 © Findy Inc.
9. 本⽇のアジェンダ 時間 アジェンダ 20:00〜20:05（5分） オープニング‧⾃⼰紹介 20:05〜20:15（10分） ①プロンプト‧セッションログとは何か？ ②なぜ/どのようにプロンプト‧セッションログの分析でAIの伸び代がわかるのか？ ③ハンズオンの流れのご紹介 20:15〜20:45（30分） ①セッションログの場所を確認する。 ②セッションログ内容をLLMに渡して現状のAI活⽤度を診断する ③AI活⽤のボトルネックを分析する ④改善施策を整備する 例：ガードレール追加 例：Skill追加 例：計画ファーストルール追加 20:45〜20:55（10分） Q&A 20:55〜21:00（5分） クロージング&アンケート配布 © Findy Inc. 9
10. では、まずプロンプト‧セッションログのお話から！ © Findy Inc. 10
11. こんな困りごとを感じませんか？ or お聞きしませんか？ 1. AIツールの使い⽅が個⼈に閉じており、⽣産性の⾼い他メンバーがどのようにAIを使っているのか わからない 2. AIの進歩が早すぎて、過去キャッチアップしたAIの使い⽅（プロンプト、コンテキストが⼤事）そ のままを踏襲しており、今⾃分のAIの使い⽅がどんなレベルで、どこに伸び代があるのかわからな い/情報を追うのが⼤変 3. 上司からAIを使えと⾔われているものの、中々AIを使って質の⾼い出⼒を上げるのが⼤変 4. AIに指⽰を与えたタスクについて毎回似たようなFBをしており、イマイチ⾃分のAIが⾃分の業務に フィットしている感覚がない。 5. 理想は、AIに⾃律的にタスクを任せてしまいたいが、SNSで⼊⼿したTipsを1~2度試したまま放置 しており、⾃分のAI活⽤度を継続的に⾼めるには程遠い などなど、、、、 © Findy Inc. 11
12. そもそも、改善しようとするのも気が重い/どうすればいいのかわからない。。 © Findy Inc. 12
13. いざ改善しようとすると、、 よくある「詰まりポイント」 • • • • 「自分のどこが良くないか」がそもそもわからない SNSのTipsは一般論すぎて刺さらない 試してみても効果が出たかどうか測れない 継続的に改善する仕組みがない 根本的な問題 「自分のAIの使い方」を客観的に見る手段がない → 感覚と経験で改善しようとしているため、再現性がな い © Findy Inc. 13
14. 広すぎると話が発散してしまうので、今回は 「エンジニア/開発業務において、いかにAIをagenticに動かし て業務を進めるか」 にスコープを絞って進めていければと思います！ © Findy Inc. 14
15. セッションログはどこにある？ Claude Code Codex → リポジトリ単位で記録 → 日付単位で記録 ※ログは自分の PCにだけ存在しており、クラウドには送られていません。 © Findy Inc. 15
16. セッションログの中⾝イメージ →1セッション = 1つのClaude Code / Codex の会話 が丸ごと入っています。 © Findy Inc. 16
17. セッションログの中⾝イメージ 1セッション（ Claude Code / Codex を起動してから終了するまでの 1回の作業）が丸ごと保存されています。 たとえば「今日の午前中に APIのバグ修正を依頼した」という一連のやり取り（指示 →AIの応答→ツール実行 →修正完了）が、すべて 1つの JSONLファイルに時系列で記録されています。 • • • ユーザーの発話（何を頼んだか） AIの返答（どう応答したか） ツールの実行記録（何のコマンドを叩いたか・何のファイルを編集したか） これらがすべて 1ファイルに時系列で 入っているのがセッションログです。 © Findy Inc. 17
18. なぜログでAI活⽤の伸び代がわかるのか？ © Findy Inc. 18
19. なぜログでAI活⽤の伸び代がわかるのか？ ログには「AIとの仕事の仕⽅」がそのまま記録されているから 読み取れること • • • • 1タスクに何回指示したか どこで修正要求が発生したか AIが何を繰り返し失敗したか どのファイル（ CLAUDE.md等）を参照 /ツール を実行したか わかること • • • 今のAI活用度スコア （どれだけ委任できている か） ボトルネックの主因 （自分？AI？環境？） すぐ改善できる具体的なアクション © Findy Inc. 19
20. 本⽇のアジェンダ 時間 アジェンダ 20:00〜20:05（5分） オープニング‧⾃⼰紹介 20:05〜20:15（10分） ①プロンプト‧セッションログとは何か？ ②なぜ/どのようにプロンプト‧セッションログの分析でAIの伸び代がわかるのか？ ③ハンズオンの流れのご紹介 20:15〜20:45（30分） ①セッションログの場所を確認する。 ②セッションログ内容をLLMに渡して現状のAI活⽤度を診断する ③AI活⽤のボトルネックを分析する ④改善施策を整備する 例：ガードレール追加 例：Skill追加 例：計画ファーストルール追加 20:45〜20:55（10分） Q&A 20:55〜21:00（5分） クロージング&アンケート配布 © Findy Inc. 20
21. ハンズオンの詳細な流れ ハンズオン⼿順詳細説明はこちら👉 内容 STEP 時間 STEP 0 自分のセッションログの場所を確認する 5分 STEP 1 ログを LLMに渡して現状の AI活用度を診断する 5分 STEP 2 AI活用のボトルネックを特定する 5分 STEP 3 改善施策を整備する 15分 © Findy Inc. 21
22. 本⽇のアジェンダ 時間 アジェンダ 20:00〜20:05（5分） オープニング‧⾃⼰紹介 20:05〜20:15（10分） ①プロンプト‧セッションログとは何か？ ②なぜ/どのようにプロンプト‧セッションログの分析でAIの伸び代がわかるのか？ ③ハンズオンの流れのご紹介 20:15〜20:45（30分） ①セッションログの場所を確認する。 ②セッションログ内容をLLMに渡して現状のAI活⽤度を診断する ③AI活⽤のボトルネックを分析する ④改善施策を整備する 例：ガードレール追加 例：Skill追加 例：計画ファーストルール追加 20:45〜20:55（10分） Q&A 20:55〜21:00（5分） クロージング&アンケート配布 © Findy Inc. 22
23. 本⽇のアジェンダ 時間 アジェンダ 20:00〜20:05（5分） オープニング‧⾃⼰紹介 20:05〜20:15（10分） ①プロンプト‧セッションログとは何か？ ②なぜ/どのようにプロンプト‧セッションログの分析でAIの伸び代がわかるのか？ ③ハンズオンの流れのご紹介 20:15〜20:45（30分） ①セッションログの場所を確認する。 ②セッションログ内容をLLMに渡して現状のAI活⽤度を診断する ③AI活⽤のボトルネックを分析する ④改善施策を整備する 例：ガードレール追加 例：Skill追加 例：計画ファーストルール追加 20:45〜20:55（10分） Q&A 20:55〜21:00（5分） クロージング&アンケート配布 © Findy Inc. 23
24. ご参加ありがとうございました🙏 © Findy Inc. 24
25. 皆様の困りごと解決の⼀歩になれば幸いです🙌 © Findy Inc. 25