Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
生成AIアプリケーションにおけるRAGとデータベースの役割
Search
Shu Kobuchi
March 29, 2024
Technology
0
1.3k
生成AIアプリケーションにおけるRAGとデータベースの役割
https://3-shake.connpass.com/event/311868/
3-SHAKE SRETTにて、生成AIのデータベースやストレージに関連した部分を発表。
Shu Kobuchi
March 29, 2024
Tweet
Share
More Decks by Shu Kobuchi
See All by Shu Kobuchi
AI時代におけるMLOpsのTips
shukob
2
61
AIエージェント元年
shukob
0
100
論文紹介 ”Long-Context LLMs Meet RAG: Overcoming Challenges for Long Inputs in RAG” @GDG Tokyo
shukob
0
470
論文紹介 ”Long-Context LLMs Meet RAG: Overcoming Challenges for Long Inputs in RAG”
shukob
0
99
生成AIでGitHubソースコード取得して仕様書を作成
shukob
0
690
生成AI入門
shukob
0
310
LangChainでWebサイトの内容取得やGitHubソースコード取得
shukob
0
630
ビットコイン・ブロックチェーン入門
shukob
0
270
生成AI入門
shukob
2
1.2k
Other Decks in Technology
See All in Technology
君も受託系GISエンジニアにならないか
sudataka
2
450
RECRUIT TECH CONFERENCE 2025 プレイベント【高橋】
recruitengineers
PRO
0
170
Building Products in the LLM Era
ymatsuwitter
10
5.8k
開発組織のための セキュアコーディング研修の始め方
flatt_security
3
2.6k
白金鉱業Meetup Vol.17_あるデータサイエンティストのデータマネジメントとの向き合い方
brainpadpr
7
860
データマネジメントのトレードオフに立ち向かう
ikkimiyazaki
6
1.1k
転生CISOサバイバル・ガイド / CISO Career Transition Survival Guide
kanny
3
1k
インフラをつくるとはどういうことなのか、 あるいはPlatform Engineeringについて
nwiizo
5
2.7k
人はなぜISUCONに夢中になるのか
kakehashi
PRO
6
1.7k
2.5Dモデルのすべて
yu4u
2
900
TAMとre:Capセキュリティ編 〜拡張脅威検出デモを添えて〜
fujiihda
2
330
プロセス改善による品質向上事例
tomasagi
3
2.7k
Featured
See All Featured
For a Future-Friendly Web
brad_frost
176
9.5k
Keith and Marios Guide to Fast Websites
keithpitt
411
22k
Large-scale JavaScript Application Architecture
addyosmani
511
110k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
29
2.4k
Designing Experiences People Love
moore
140
23k
Git: the NoSQL Database
bkeepers
PRO
427
64k
How to Ace a Technical Interview
jacobian
276
23k
XXLCSS - How to scale CSS and keep your sanity
sugarenia
248
1.3M
Java REST API Framework Comparison - PWX 2021
mraible
28
8.4k
Embracing the Ebb and Flow
colly
84
4.6k
Automating Front-end Workflow
addyosmani
1368
200k
Music & Morning Musume
bryan
46
6.3k
Transcript
生成 AI アプリケーションにおける RAG とデータベースの役割 2024/03/29 3-SHAKE SRETT#9 LT 株式会社スリーシェイク
Sreake事業部 小渕 周
© 2024 3-shake Inc. 2 自己紹介 - 2023年12月スリーシェイク入社 - Sreake
事業部 - アプリケーション開発支援チーム - 生成 AI アプリケーション開発等 - 日本生成 AI ユーザ会 - 4月5日(金)20:00〜 ハンズオン勉強会(オンライン) - https://genai-users.connpass.com/event/312195/ 小渕 周, Shu Kobuchi, こぶシュー (@shu_kob)
© 2024 3-shake Inc. 3 プログラミングを切り口とした生成 AI コンピュータに自然言語で命令ができるように! 第1世代 機械語 第2世代 アセンブラ
第3世代 高級言語(COBOL, Cなど) 第4世代 オブジェクト指向など 第5世代? 自然言語? コンピュータ プログラマ ソフトウェア エンジニア 非エンジニア 含む人間全般 Google Cloud Generative AI Summit Tokyo ‘24 デロイト トーマツ コンサルティング合同会社 吉沢 雄介 氏「業界課題 の解決に踏み込んだ生成 AI 活用事例:物流業界のコグニティブアシス タント」 P4. 図を参考に編集 https://cloudonair.withgoogle.com/events/generative-ai-summit-2 4q1/watch?talk=24-t3-session4 API エコノミー 新たなパラダイム 抽 象 度
© 2024 3-shake Inc. 4 RAG (Retrieval Augmented Generation) LLM
(Large Language Model:大規模言語モデル )が知らない情報を 外部から与えてあげて拡張する手法 - 質問に関連する情報を context に含める - 情報をベクトル化して蓄えておく ※ 以降、例としてGoogle Cloudでお話ししますが、他のパブリッククラウドでも同様です 質問 LLM Vertex AI Search (検索と会話) Cloud Storage GCPなら Gemini など Vertex AI
© 2024 3-shake Inc. 5 RAG のデータ設定方法 データストレージやデータベースから RAGにデータをインポート Cloud
Storage Vertex AI Search (検索と会話) BigQuery Cloud Storageで サポートしている データ形式 Preview機能 Google Drive Jiraなど 接続
© 2024 3-shake Inc. 6 会話履歴 会話の流れに沿った回答ができるようになったのが以前のチャットボットとの違い Firestore - JSON
で会話履歴を保持し、チャットで活用 - NoSQLのデータベースを使用 会話履歴 人 AI 人 AI ◯◯◯◯◯◯ △△△△△△ □□□□□□□□□□□ ▼▼▼▼▼▼ 質問 LLM
© 2024 3-shake Inc. 7 RAG アプリの構成図 パブリッククラウドのマネージドサービスを活用して、 RAG アプリ開発の工数は少なく!
RAG アプリは生成 AI PoC の第一歩 Cloud Run (Web App) Firestore Cloud Storage Vertex AI Vertex AI Search 会話履歴を取得 会話履歴を格納 ドキュメントを格納 Embedding で ベクトル化 context を取得
© 2024 3-shake Inc. 8 参考文献 - 田村悠 著『LangChain完全入門』インプレス -
吉田真吾, 大嶋勇樹 著『ChatGPT/LangChainによるチャットシステム構築[実践]入門』技術評論社 - 永田祥平, 伊藤駿汰, 宮田大士, 立脇裕太, 花ヶ﨑伸祐, 蒲生弘郷, 吉田真吾 著『Azure OpenAI Serviceではじめる ChatGPT/LLMシステム構築入門』技術評論社 - 小林雅一 著『生成AI「ChatGPT」を支える技術はどのようにビジネスをかえ、人間の創造性を揺るがすのか?』ダイヤモン ド社 - 今井翔太 著『生成AIで世界はこう変わる』SB新書 - 小澤健祐 著『生成AI導入の教科書』ONE PUBLISHING
© 2024 3-shake Inc. 9 ご清聴ありがとうございました 日本生成 AI ユーザ会にもぜひご参加ください! ・4月5日(金)
20:00〜 ハンズオン勉強会(オンライン) https://genai-users.connpass.com/event/312195/