LangSmithを活用したRAGの評価・改善フローの整備

May 22, 2024

3.6k

LangSmithを活用したRAGの評価・改善フローの整備

2024年5月22日 #mlopsコミュニティ

os1ma

May 22, 2024

Tweet

More Decks by os1ma

See All by os1ma

大幅アップデートされたRagas v0.2をキャッチアップ

2

790

LangChain/LangGraphの進化からみるLLMによるAIエージェントの開発

2

370

Difyのソースコードリーディングを続けて得た知見と感想

4

300

書籍『LangChainとLangGraphによるRAG・AIエージェント［実践］入門』の紹介

2

360

Pythonで改めて考える「クラス（class）」の使いどころ

13

4.4k

LangGraphでのHuman-in-the-Loopの実装

4

2.6k

LangChainの現在とv0.3にむけて

4

1.7k

Zapier ChatGPT Integrationsの紹介

2

1.8k

RAGの評価フレームワーク「Ragas」をさくっとキャッチアップ

4

1.8k

Other Decks in Technology

See All in Technology

目標と時間軸〜ベイビーステップでケイパビリティを高めよう〜

8

1.1k

社内でKaggle部を作って初学者育成した話

1

180

ABWG2024採択者が語るエンジニアとしての自分自身の見つけ方〜発信して、つながって、世界を広げていく〜

1

240

生成AIがローコードツールになる時代のエンジニアの役割を考える

0

350

Platform Engineeringでクラウドの「楽しくない」を解消しよう

4

300

アウトカムを最大化させるプロダクトエンジニアの動き

0

120

完璧を捨てろ！ “攻め”のQAがもたらすスピードと革新/20250306 Hiroki Hachisuka

0

170

プロダクト開発者目線での Entra ID 活用

0

200

役員・マネージャー・著者・エンジニアそれぞれの立場から見たAWS認定資格

5

6.9k

Aurora PostgreSQLがCloudWatch Logsに出力するログの課金を削減してみる #jawsdays2025

1

280

ライフステージの変化を乗り越える探索型のキャリア選択

2

370

OCI Success Journey OCIの何が評価されてる？疑問に答える事例セミナー(2025年2月実施)

oracle4engineer

2

280

Featured

See All Featured

Keith and Marios Guide to Fast Websites

411

22k

Creating an realtime collaboration tool: Agile Flush - .NET Oxford

28

1.9k

Rails Girls Zürich Keynote

94

13k

Bash Introduction

611

210k

Optimizing for Happiness

377

70k

Product Roadmaps are Hard

51

11k

Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure

45

9.4k

YesSQL, Process and Tooling at Scale

172

14k

Making the Leap to Tech Lead

133

9.1k

Why Our Code Smells

336

57k

A designer walks into a library…

pauljervisheath

205

24k

Helping Users Find Their Own Way: Creating Modern Search Experiences

29

2.5k

Transcript