LangSmithを活用したRAGの評価・改善フローの整備

May 22, 2024

3.5k

LangSmithを活用したRAGの評価・改善フローの整備

2024年5月22日 #mlopsコミュニティ

os1ma

May 22, 2024

Tweet

More Decks by os1ma

See All by os1ma

大幅アップデートされたRagas v0.2をキャッチアップ

2

760

LangChain/LangGraphの進化からみるLLMによるAIエージェントの開発

2

350

Difyのソースコードリーディングを続けて得た知見と感想

4

280

書籍『LangChainとLangGraphによるRAG・AIエージェント［実践］入門』の紹介

2

340

Pythonで改めて考える「クラス（class）」の使いどころ

13

4.4k

LangGraphでのHuman-in-the-Loopの実装

3

2.5k

LangChainの現在とv0.3にむけて

4

1.7k

Zapier ChatGPT Integrationsの紹介

2

1.7k

RAGの評価フレームワーク「Ragas」をさくっとキャッチアップ

4

1.8k

Other Decks in Technology

See All in Technology

Pwned Labsのすゝめ

1

310

Snowflakeの開発・運用コストをApache Icebergで効率化しよう！～機能と活用例のご紹介～

1

380

（機械学習システムでも） SLO から始める信頼性構築 - ゆる SRE#9 2025/02/21

0

260

Aurora PostgreSQLがCloudWatch Logsに出力するログの課金を削減してみる #jawsdays2025

1

130

ウォンテッドリーのデータパイプラインを支える ETL のための analytics, rds-exporter / analytics, rds-exporter for ETL to support Wantedly's data pipeline

0

120

1行のコードから社会課題の解決へ： EMの探究、事業・技術・組織を紡ぐ実践知 / EM Conf 2025

8

3.3k

生成 AI プロダクトを育てる技術〜データ品質向上による継続的な価値創出の実践〜

5

1.9k

OSS構成管理ツールCMDBuildを使ったAWSリソース管理の自動化

0

560

Goで作って学ぶWebSocket

3

2.6k

入門 PEAK Threat Hunting @SECCON

0

100

AIエージェント元年@日本生成AIユーザ会

0

140

Autonomous Database Serverless 技術詳細 / adb-s_technical_detail_jp

oracle4engineer

17

45k

Featured

See All Featured

Navigating Team Friction

183

15k

Fashionably flexible responsive web design (full day workshop)

406

66k

The World Runs on Bad Software

67

11k

How to Think Like a Performance Engineer

22

1.4k

Testing 201, or: Great Expectations

42

7.2k

No one is an island. Learnings from fostering a developers community.

21

3.1k

Java REST API Framework Comparison - PWX 2021

29

8.4k

Fantastic passwords and where to find them - at NoRuKo

51

3k

Code Review Best Practice

67

18k

Docker and Python

44

3.3k

How to Create Impact in a Changing Tech Landscape [PerfNow 2023]

49

2.3k

The Invisible Side of Design

299

50k

Transcript