AIコーディングだと何がいいのか考えた — AIコーディングの3ヶ月

AIコーディング道場勉強会 #6（2026/1/15）の発表資料です。 Claude Codeで3ヶ月間、インタビュー動画のRAGシステムとゲーム開発に挑戦しました。設計書を書くことでAIとの開発が加速した一方、「使われないシステム」という課題から技術選定と課題設定の難しさを実感。既知の技術では大幅に加速できるが、未知の領域では基礎知識がないとAIも助けられないという実践的な知見を共有します。技術スタック: LangChain / faster-whisper / Chroma / GPT-4o-mini / Streamlit / Railway

AIコーディング道場勉強会 #6（2026/1/15）
https://ai-coding-dojo.connpass.com/event/380422/

Transcript

1. AIコーディングだと何がいいのか考えた AIコーディングの3ヶ月 新垣圭祐 / 2026年1月15日 AIコーディング道場 新垣圭祐 / 2026-01-15 1
2. 自己紹介 新垣圭祐（しんがき・けいすけ） ソーイ株式会社 / YOKUMIRU株式会社 AIコーディング歴 2024年10月〜 Cursor 2025年〜 Claude Code 今回の挑戦 Claude Codeだけで実用システム開発 生成AIを使った機能開発 AIコーディング道場 新垣圭祐 / 2026-01-15 2
3. 解決したい課題 インタビュー動画の検索問題 動画が400本以上、1本30〜60分 「〇〇さん、△△について何て言ってた？」 → 全動画見直し or 諦める 手動の文字起こしは1本2〜3時間かかる 欲しかったもの: 自然言語で質問できる検索システム AIコーディング道場 新垣圭祐 / 2026-01-15 3
4. 動画からナレッジベースを構築するRAGシステム つくったもの AIコーディング道場 新垣圭祐 / 2026-01-15 4
5. 技術スタック 分野 技術 フレームワーク LangChain / LangGraph 文字起こし faster-whisper (small) 埋め込み multilingual-MiniLM-L12-v2 ベクトルDB Chroma LLM OpenAI GPT-4o-mini UI Streamlit デプロイ Railway (Nixpacks) 動画ファイル → 音声抽出 → 文字起こし → ベクトルDB → RAG検索 → 回答生成 (.mov) (ffmpeg) (Whisper) (Chroma) (OpenAI) AIコーディング道場 新垣圭祐 / 2026-01-15 5
6. アーキテクチャ AIコーディング道場 新垣圭祐 / 2026-01-15 6
7. デモ画面（質問応答インターフェース） AIコーディング道場 新垣圭祐 / 2026-01-15 7
8. 開発が加速した部分 実装寄りの話 AIコーディング道場 新垣圭祐 / 2026-01-15 8
9. スペック（設計書）を書くようになった効果（1/2） Before: バイブコーディング 思いつきで実装（とりあえず書いてみる） 例）AIに「動画処理して」と指示 → 何度も修正、全体像が見えない 課題 AIとの合意形成不足 コードのずれが発生 デバッグに時間がかかる AIコーディング道場 新垣圭祐 / 2026-01-15 9
10. スペック（設計書）を書くようになった効果（2/2） After: スペック（設計書）ベース 効果 AIが設計書通りに実装 コードのずれが減少 デバッグが楽に AIコーディング道場 新垣圭祐 / 2026-01-15 10
11. 経験があることは任せられる × ツールで高速化 知っていること、勘が働くことは勝手にやってもらっても安心 Python x Streamlit で構築 ツールでさらに効率化、手動作業の削減、ミス防止 Playwright MCPでテスト カスタムコマンド、プラグインでlintやフォーマット、コミット AIコーディング道場 新垣圭祐 / 2026-01-15 11
12. 運用と課題 実装寄りの話 AIコーディング道場 新垣圭祐 / 2026-01-15 12
13. RAGシステム運用サマリー AIコーディング道場 新垣圭祐 / 2026-01-15 13
14. 質問数の推移 AIコーディング道場 新垣圭祐 / 2026-01-15 14
15. 質問カテゴリの内訳 AIコーディング道場 新垣圭祐 / 2026-01-15 15
16. フィードバック状況 AIコーディング道場 新垣圭祐 / 2026-01-15 16
17. 全然使われていない... AIコーディング道場 新垣圭祐 / 2026-01-15 17
18. 原因の分析 1. 応答速度の問題 2. 技術選定の疑問: LLM vs 全文検索 3. UI/UXの問題 4. そもそも課題設定が適切？ AIコーディング道場 新垣圭祐 / 2026-01-15 18
19. 課題1: 応答速度の問題 現状の処理フロー（約5-10秒） 1. ユーザーの質問 → 埋め込みベクトル生成 (1-2秒) 2. Chroma検索 (0.5秒) 3. GPT-4o-miniで回答生成 (3-5秒) 4. Streamlitで表示 Railwayの$5プラン: CPU制限、メモリ1GB faster-whisperのロードに時間がかかる 初回アクセスが遅い（10秒以上） 改善案: キャッシュ、非同期処理、軽量モデル検討 AIコーディング道場 新垣圭祐 / 2026-01-15 19
20. 課題2: 技術選定の疑問（1/2） LLM vs 全文検索 LLMベースのRAG 利点: 自然な回答、文脈理解 欠点: 遅い、コストがかかる、幻覚のリスク 全文検索（Elasticsearchなど） 利点: 高速、正確、コストが安い 欠点: キーワードマッチ、自然な回答が難しい 今回のユースケース: 「〇〇在住の医師を教えて」 → 構造化データ + フィルタリング で十分だった？ AIコーディング道場 新垣圭祐 / 2026-01-15 20
21. 課題2: 技術選定の疑問（2/2） 判断できなかった理由 LangChainを使うのが初めて RAGシステムのベストプラクティスを知らない 完成度を測る基準がない 技術選定の妥当性を判断できない →未知の技術領域での判断の難しさを実感 AIコーディング道場 新垣圭祐 / 2026-01-15 21
22. 課題3: UI/UXの問題 フィードバック機能が分かりにくい、押してもらえない、など AIコーディング道場 新垣圭祐 / 2026-01-15 22
23. 課題4: そもそも課題設定が適切？ 「検索システムが必要」という前提を疑わなかった 本当にユーザーが欲しかったのは何だったのか？ LLMが本当に必要だったのか？ ニーズの把握と検証が不足していた AIコーディング道場 新垣圭祐 / 2026-01-15 23
24. （余談）ゲーム開発への挑戦 作ったもの: スーパーマリオ風の2Dアクションゲーム 7つのステージ、コイン収集、敵キャラとの戦闘 Next.js + Canvas APIで実装 ワールドマップ画面 ゲームプレイ画面 AIコーディング道場 新垣圭祐 / 2026-01-15 24
25. 知見がないとAIも助けられない 作ったことがない、知見がないところでは スペックが書けないのでAIの力が発揮できない ゲーム開発での迷走 Next.js → Canvas API → Phaser.js検討 バグの原因特定ができない（レンダリング？ゲームロジック？） どの技術が適切か判断できない 根本的な問題 基礎知識がないと設計書が書けない、レビューできない AIに聞いても、自分が理解していないので判断できない AIコーディング道場 新垣圭祐 / 2026-01-15 25
26. まとめと学び AIコーディング道場 新垣圭祐 / 2026-01-15 26
27. 2ヶ月で商用サービスをリリース（道場の目標） 難しかった理由 やったことのない技術を安直に導入 エンジニアリング以外のスキル（課題設定、UI設計など）の重要性 「動くもの」から「使ってもらえるもの」への壁 → 技術だけでは使ってもらえない AIコーディング道場 新垣圭祐 / 2026-01-15 27
28. 3ヶ月で分かったこと AIで加速できたこと 設計書を書くようになってAIとの開発が早くなった 既に知っている技術・パターンなら大幅に加速 Claude Codeの新機能（MCP、カスタムコマンド）で効率化 AIでも難しかったこと 未知の技術の選定（RAG vs 全文検索、Next.js vs ゲームエンジン） 完成度を測る基準がないと判断できない 使われるためには課題設定が大事 AIコーディング道場 新垣圭祐 / 2026-01-15 28
29. 技術的な学び エンジニアとしての実感 1. 設計書の重要性 AIに何を作らせたいか明確にする コードのずれが減る、デバッグが楽になる 2. 既知の技術パターンの強み 経験があれば、AIの出力の妥当性を判断できる 違和感に気づける 3. 未知の領域での難しさ 技術選定の基準を持っていないと判断できない 小さく始めて理解を深める必要がある AIコーディング道場 新垣圭祐 / 2026-01-15 29