Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
LangGraphを用いたAIアプリケーションにおけるメモリ永続化の実践
Search
西岡 賢一郎 (Kenichiro Nishioka)
August 30, 2024
Technology
1
720
LangGraphを用いたAIアプリケーションにおけるメモリ永続化の実践
機械学習の社会実装勉強会 第38回 (
https://machine-learning-workshop.connpass.com/event/328440/
) の発表資料です。
西岡 賢一郎 (Kenichiro Nishioka)
August 30, 2024
Tweet
Share
More Decks by 西岡 賢一郎 (Kenichiro Nishioka)
See All by 西岡 賢一郎 (Kenichiro Nishioka)
Claude Agent SDKで始める実践的AIエージェント開発
knishioka
0
60
AIがAIを拡張する時代へ ~Claude Codeで実現する高品質文書作成~
knishioka
0
93
MLflow × LLM 生成AI時代の実験管理とリスク低減
knishioka
0
120
Conductor: Git Worktreeで実現する並列AIコーディング
knishioka
0
83
ローカルLLMでファインチューニング
knishioka
0
1.6k
自作MCPサーバ入門
knishioka
0
64
成功と失敗の実像と生成AI時代の展望
knishioka
0
83
MCPが変えるAIとの協働
knishioka
1
240
LangFlowではじめるRAG・マルチエージェントシステム構築
knishioka
0
330
Other Decks in Technology
See All in Technology
OSだってコンテナしたい❗Image Modeが切り拓くLinux OS運用の新時代
tsukaman
0
130
身近なCSVを活用する!AWSのデータ分析基盤アーキテクチャ
koosun
0
4.1k
The Complete Android UI Testing Landscape: From Journey to Traditional Approaches
alexzhukovich
1
120
レガシーで硬直したテーブル設計から変更容易で柔軟なテーブル設計にする
red_frasco
4
590
入社したばかりでもできる、 アクセシビリティ改善の第一歩
unachang113
2
350
クラウドネイティブ時代の 開発プロセス再設計 〜速さと品質を両立するには〜
moritamasami
0
120
グローバルなコンパウンド戦略を支えるモジュラーモノリスとドメイン駆動設計
kawauso
3
9.1k
米軍Platform One / Black Pearlに学ぶ極限環境DevSecOps
jyoshise
2
530
AIで加速する次世代のBill Oneアーキテクチャ〜成長の先にある軌道修正〜
sansantech
PRO
1
100
クラスタ統合リアーキテクチャ全貌~1,000万ユーザーのウェルネスSaaSを再設計~
hacomono
PRO
0
180
ABEMAのCM配信を支えるスケーラブルな分散カウンタの実装
hono0130
4
1.1k
【ASW21-02】STAMP/CAST分析における生成AIの支援 ~羽田空港航空機衝突事故を題材として (Support of Generative AI in STAMP/CAST Analysis - A Case Study Based on the Haneda Airport Aircraft Accident -)
hianraku9498
0
120
Featured
See All Featured
Making Projects Easy
brettharned
120
6.5k
Practical Orchestrator
shlominoach
190
11k
Speed Design
sergeychernyshev
33
1.3k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
35
3.2k
Testing 201, or: Great Expectations
jmmastey
46
7.8k
Balancing Empowerment & Direction
lara
5
760
Automating Front-end Workflow
addyosmani
1371
200k
Principles of Awesome APIs and How to Build Them.
keavy
127
17k
Context Engineering - Making Every Token Count
addyosmani
9
420
Writing Fast Ruby
sferik
630
62k
Being A Developer After 40
akosma
91
590k
Designing Experiences People Love
moore
142
24k
Transcript
LangGraphを用いた AIアプリケーションにおける メモリ永続化の実践 2024/08/31 機械学習の社会実装勉強会 第 38回 1
今回のお話 AIアプリケーション開発の新たな可能性を開く LangGraphの Checkpointer機能につい て、実際の動作をデモンストレーションを通じて紹介 2
自己紹介 名前 : 西岡 賢一郎 Twitter: @ken_nishi note: https://note.com/kenichiro YouTube:
【経営 xデータサイエンス x開発】西岡 賢一郎のチャンネル 経歴 東京大学で位置予測アルゴリズムを研究し博士 (学術 ) を取得 東京大学博士課程在学中にデータサイエンスのサービスを提供する株式会社 トライディアを設立 トライディアを売却し、 CTOとして 3年半務め、 2021年 10月末に CTOを退職 CDPのスタートアップ (Sr. CSM)・株式会社データインフォームド (CEO)・株 式会社ディースタッツ (CTO) プロダクト開発チーム・データサイエンスチームの立ち上げ 3
LangChainとは 大規模言語モデル( LLM)を使用したアプリケーションを構築するためのフレー ムワーク 複雑な AIタスクを簡単に実装できるようにする さまざまなコンポーネントやツールを提供 4
LangGraphとは LangChainの一部として開発されたライブラリ 状態を持つマルチアクターアプリケーションを構築するためのツール エージェントやマルチエージェントのワークフローを作成可能 5
なぜ永続性が必要か? 1. 文脈の維持 複数の対話にわたって会話の文脈を保持 ユーザーとの長期的な対話を可能に 2. 状態の管理 アプリケーションの現在の状態を保存 必要に応じて以前の状態に戻る能力 3.
エラーからの回復 障害発生時に最後の正常な状態から再開可能 6
永続性の実現方法: Checkpointer LangGraphでは、 「 Checkpointer」を通じて永続性を実現 Checkpionterとは: アプリケーションの状態を保存し、必要に応じて復元する機能 7
Checkpointerの主な特徴 1. セッションメモリ ユーザーとのやり取りの履歴を保存 保存された状態から会話を再開可能 2. エラー回復 最後に成功した保存状態から継続可能 システム障害時の影響を最小限に 3.
ヒューマンインザループ 人間の介入や承認を要する処理の実装 AIと人間の協調作業をスムーズに 8
Checkpointerの実装 LangGraph v0.2で導入された新しいライブラリ: langgraph_checkpoint : 基本インターフェース langgraph_checkpoint_sqlite : SQLiteに保存 (開発・テスト用
) langgraph_checkpoint_postgres : PostgreSQLに保存 (本番環境用 ) 9
LangGraph v0.2 の変更 変数名変更 thread_ts → checkpoint_id parent_ts → parent_checkpoint_id
import方法の変更 旧 : from langgraph.checkpoint import BaseCheckpointSaver 新 : from langgraph.checkpoint.base import BaseCheckpointSaver SQLiteチェックポインターが分離 : langgraph-checkpoint-sqlite 10
Checkpointerの使用例 from langgraph.graph import StateGraph from langgraph.checkpoint.sqlite import SqliteSaver #
グラフの構築 builder = StateGraph(State) # graphをcompileするときにcheckpointerを指定 with SqliteSaver.from_conn_string(":memory:") as memory: graph = builder.compile(checkpointer=memory) 11
Checkpointerの仕組み 12
Checkpointerの利点 1. 一貫性のある長期的な対話 ユーザーとの会話履歴を保持し、文脈に応じた応答が可能 2. 堅牢なアプリケーション エラーや中断からの回復が容易 3. 複雑なワークフローの実現 人間の介入を含む高度な処理フローを構築可能
4. 開発の柔軟性 様々なデータベースに対応可能 カスタム実装の作成が容易 13
考慮事項 1. パフォーマンスへの影響 履歴が増えると LLM呼び出しに時間がかかる可能性 2. カスタマイズの制限 履歴の動的な操作に一部制限あり 3. 実装の選択
使用環境に適した Checkpointer機能の選択が重要 14
デモンストレーション LangGraphの Checkpointer使用の実演 MemorySaver SqliteSaver PostgresSaver ソースコード : https://github.com/knishioka/machine-learning- workshop/blob/main/langchain/langchain_persistence.ipynb
15
まとめ LangGraphの Checkpointerは、永続性を実現する強力なツール 長期的な対話、エラー回復、複雑なワークフローを可能に 適切に使用することで、より洗練された AIアプリケーションの開発が可能 16
参考文献 1. LangGraph公式ドキュメント 2. LangGraph v0.2リリースブログ 3. LangGraph Persistence How-to
17