LangSmithを活用したRAGの評価・改善フローの整備

2024年5月22日 #mlopsコミュニティ

os1ma

May 22, 2024

More Decks by os1ma

See All by os1ma

9月24日発売！書籍『LLMアプリケーション評価駆動開発』の歩き方 - 書籍紹介 - 第2部「実践編」

3

790

そのAIエージェント、役に立っていますか？―AIエージェントの評価を小さく始めるためのヒント

2

1.1k

コーディングエージェントのハーネスから見る、AIエージェントの現在

2

360

これだけで丸わかり！LangChain v1.0 アップデートまとめ

6

3.2k

Claude Codeが働くAI中心の業務システム構築の挑戦―AIエージェント中心の働き方を目指して

10

7.6k

LangChain Interrupt & LangChain Ambassadors meetingレポート

2

1.2k

AIエージェントのフレームワークを見るときの個人的注目ポイント

1

1k

Cursor AgentによるパーソナルAIアシスタント育成入門―業務のプロンプト化・MCPの活用

16

10k

AIエージェントキャッチアップと論文リサーチ

7

2.1k

Other Decks in Technology

See All in Technology

業務でAWSをあまり使っていない私が、AWSへのモチベを保つ方法

0

160

公共分野での生成AI活用

1

230

Don't write the architecture only in the prompt.

0

310

re:Invent の去年のスケジュールを公開します！

PRO

0

300

Deep Data Security 機能解説

oracle4engineer

PRO

3

1k

You Have Agency（サンキュー、Ruby）

PRO

5

690

AI Agent 時代のデータ基盤： ClickHouse で実現する超高速分析とコスト削減の両立

0

200

AIエージェントの監視、思考を見るか行動を見るか / Monitoring AI Agents: Thoughts or Actions

1

160

Technical Project Manager の役割とやりがい、少しだけ AI

0

600

Maestro MCPとClaude Code Skillsによる自律的なE2Eテスト支援

0

420

現場を動かすAIエージェント#2_製造業現場でのAI活用から見た、ハマる罠と実践知

2

180

AIに任せられるFlutterコードベースを作る〜仕様をコードで表し、ハーネスで守る〜

1

640

Featured

See All Featured

svc-hook: hooking system calls on ARM64 by binary rewriting

2

670

Have SEOs Ruined the Internet? - User Awareness of SEO in 2025

0

540

SEO in 2025: How to Prepare for the Future of Search

3

3.9k

New Earth Scene 8

4

2.8k

The Curse of the Amulet

3

17k

Writing Fast Ruby

630

63k

A Guide to Academic Writing Using Generative AI - A Workshop

PRO

1

560

First, design no harm

PRO

2

1.4k

Distributed Sagas: A Protocol for Coordinating Microservices

333

23k

Code Review Best Practice

74

20k

Optimizing for Happiness

378

71k

Efficient Content Optimization with Google Search Console & Apps Script

PRO

1

970

Transcript