LangSmithを活用したRAGの評価・改善フローの整備

May 22, 2024

4.6k

LangSmithを活用したRAGの評価・改善フローの整備

2024年5月22日 #mlopsコミュニティ

os1ma

May 22, 2024

More Decks by os1ma

See All by os1ma

9月24日発売！書籍『LLMアプリケーション評価駆動開発』の歩き方 - 書籍紹介 - 第2部「実戦編」

3

320

そのAIエージェント、役に立っていますか？―AIエージェントの評価を小さく始めるためのヒント

2

550

コーディングエージェントのハーネスから見る、AIエージェントの現在

2

290

これだけで丸わかり！LangChain v1.0 アップデートまとめ

6

3.1k

Claude Codeが働くAI中心の業務システム構築の挑戦―AIエージェント中心の働き方を目指して

10

7.4k

LangChain Interrupt & LangChain Ambassadors meetingレポート

2

1.1k

AIエージェントのフレームワークを見るときの個人的注目ポイント

1

990

Cursor AgentによるパーソナルAIアシスタント育成入門―業務のプロンプト化・MCPの活用

16

10k

AIエージェントキャッチアップと論文リサーチ

7

2.1k

Other Decks in Technology

See All in Technology

なぜ「決定性」が決定的に重要なのか？ Durable Execution 基盤の数理的理解 #serverlessjp / ServerlessDays Tokyo 2026

3

1k

AIによるクリエイティブ生成を行う上での試行錯誤

PRO

0

160

AIを活用するために決めた "やらないこと" - 価値に注目する / Not betting on AI

PRO

3

570

AIエージェントの権限管理 3: Agentic RAG の Fine grained access control 編

0

180

ADKで始める業務改善 - AIエージェント開発時の考えと設計

2

250

負債のメタファと2026年 / Debt Metaphor in Agentic Engineering Age 202609 Edition

PRO

10

4.5k

C#コードの結合を可視化する Roslyn解析による設計改善とリファクタリング判断

0

260

今話題のAI「Jev」って何？宇宙最速で学ぶ会

PRO

30

17k

ユーザー価値を届け続けるためにウォンテッドリーが大切にしている文化

0

190

おい、エージェントを使って終わらせろ

2

820

事業課題から技術的負債に向き合う

PRO

2

2.1k

.NET WebAssemblyで実現するクライアントサイドAI推論：NuGetからViteまで、2つのエコシステムを繋ぐビルド戦略

0

300

Featured

See All Featured

The Success of Rails: Ensuring Growth for the Next 100 Years

47

8.3k

Digital Projects Gone Horribly Wrong (And the UX Pros Who Still Save the Day) - Dean Schuster

1

3k

Building Experiences: Design Systems, User Experience, and Full Site Editing

1

610

What the history of the web can teach us about the future of AI

PRO

1

700

Connecting the Dots Between Site Speed, User Experience & Your Business [WebExpo 2025]

11

1k

Marketing to machines

1

5.8k

[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails

38

3k

How to Get Subject Matter Experts Bought In and Actively Contributing to SEO & PR Initiatives.

0

200

Are puppies a ranking factor?

2

3.9k

DevOps and Value Stream Thinking: Enabling flow, efficiency and business value

1

390

Site-Speed That Sticks

13

1.5k

職位にかかわらず全員がリーダーシップを発揮するチーム作り / Building a team where everyone can demonstrate leadership regardless of position

69

65k

Transcript