オープンセミナー香川 Pythonの現状・データ分析・LLM

by Manabu TERADA

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

copyright © 2023 CMS Comunications Inc. all rights reserved. 自己紹介寺田学 (Manabu TERADA) ● Pythonエンジニア ● Podcast 「terapyon channel」(https://podcast.terapyon.net) ● 主な関連書籍（共著・監修・監訳） ○ Pythonデータ分析実践ハンドブック（2023年，インプレス，共著）・・まもなく発売 ○ Pythonによるあたらしいデータ分析の教科書第2版（2022年，翔泳社，共著） ○ Python実践レシピ（2022年，技術評論社，共著） ○ Python FlaskによるWebアプリ開発入門（2022年，翔泳社，監修）

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

copyright © 2023 CMS Comunications Inc. all rights reserved. PyCon APAC 2023 チケット発売中 ● https://2023-apac.pycon.jp/ ● 日程: 10/27(金)〜29(日) の3日間 ● チケット: 12,000円（ランチ付き） ○ https://pretix.eu/pyconjp/2023-apac/

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

copyright © 2023 CMS Comunications Inc. all rights reserved. Pythonの使われ方 ─ 3 データ分析や科学技術計算 ● データ型やデータ分析ツール NumPy / pandas ● 科学技術計算 SciPy ● 可視化ツール Matplotlib ● 機械学習ツールキット scikit-learn ● ディープラーニング TensorFlow / PyTorch

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

copyright © 2023 CMS Comunications Inc. all rights reserved. データ分析・機械学習定番ライブラリ ● Jupyter ・・環境 ● NumPy / pandas / Matplotlib / Plotly・・データ加工・可視化 ● scikit-learn ・・機械学習 ● PyTorch / Keras / TensorFlow ・・ディープラーニング ● Streamlit / Gradio ・・Web UIフレームワーク ● Transformers / LangChain ・・自然言語処理・LLM系

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

copyright © 2023 CMS Comunications Inc. all rights reserved. LLM (Large Language Model)でできること ● テキスト生成: LLMは与えられたプロンプトに基づいてテキストを生成することができます。 ● 質問応答: ユーザーからの質問に対して情報を提供することができます。 ● 文章の要約: 長い文章やドキュメントを短く要約することができます。 ● 翻訳: 一定の精度で言語を翻訳することが可能です。 ● 文章校正: 文法や綴りのミスを指摘・修正する能力があります。 ● コードの生成・助言: 簡単なプログラミングの質問に答えたり、コードのスニペットを生成。 ● 知識の検索: トレーニングデータに基づく情報や事実を提供することができます。 ● クリエイティブライティング: 物語、詩、台本などのクリエイティブなテキストを生成 ● 学習・教育のサポート: 学習者の質問に答える、学習コンテンツを補完する情報を提供 ● ゲームや趣味のアドバイス: ボードゲームの戦略や趣味に関する質問に答える ● 一般的な会話: ユーザーと一般的な会話を楽しむことができます。 Chat GPT4によると (文言の末尾を一部修正 )

Slide 30

Slide 30 text

Slide 31

Slide 31 text

Slide 32

Slide 32 text

Slide 33

Slide 33 text

Slide 34

Slide 34 text

Slide 35

Slide 35 text

Slide 36

Slide 36 text

Slide 37

Slide 37 text

Slide 38

Slide 38 text

Slide 39

Slide 39 text

copyright © 2023 CMS Comunications Inc. all rights reserved. GitHub Issueを検索 ─ サンプル ● cpython ● pyvista ● plone ● volto ● plone.restapi ● nvda ● nvdajp ● cocoa https://huggingface.co/spaces/terapyon/gh-issue-search

Slide 40

Slide 40 text

Slide 41

Slide 41 text

Slide 42

Slide 42 text

Slide 43

Slide 43 text

copyright © 2023 CMS Comunications Inc. all rights reserved. GitHub Issueを検索 ─ 技術要素 (2) ● データをOpenAI APIに渡さない方針 ● Embedding: "intﬂoat/multilingual-e5-large" ● MTEB Leaderboard: https://huggingface.co/spaces/mteb/leaderboard

Slide 44

Slide 44 text

Slide 45

Slide 45 text

Slide 46

Slide 46 text

Slide 47

Slide 47 text

Slide 48

Slide 48 text

Slide 49

Slide 49 text

Slide 50

Slide 50 text

Slide 51

Slide 51 text

copyright © 2023 CMS Comunications Inc. all rights reserved. コミュニティの今 ─ 1 四国 ● UDONPy・・高松を中心に月1勉強会 ○ https://udonpy.connpass.com/ ● Python Boot Camp 徳島2nd ○ 2023年10月14日開催 ○ https://pyconjp.connpass.com/event/293032/