Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
pyconスポンサーLT_202310
Search
sasanoshohuta
October 28, 2023
Technology
1
270
pyconスポンサーLT_202310
sasanoshohuta
October 28, 2023
Tweet
Share
More Decks by sasanoshohuta
See All by sasanoshohuta
ChatGPT in Action @ 20230405
sasanoshouta
1
1.7k
ChatGPT選手権! LT大会 @Findy
sasanoshouta
1
3.4k
Attention is all you need
sasanoshouta
0
30
End to End Object Detection with Transformer
sasanoshouta
0
9
Feature pyramid networks for object detection
sasanoshouta
0
19
Other Decks in Technology
See All in Technology
Rustで「プリズモイダル法」を利用して「土量計算」をガチでやる
nokonoko1203
1
270
Grafana x PagerDuty Better Together
jacopen
1
250
LangSmith入門―トレース/評価/プロンプト管理などを担うLLMアプリ開発プラットフォーム
os1ma
5
690
プロンプトエンジニアリングでがんばらない-Agentic Workflow へ-近藤憲児
kenjikondobai
6
1.2k
開発パフォーマンスを最大化するための開発体制
ham0215
7
1.1k
ゼロから始めるVue.jsコミュニティ貢献 / first-vuejs-community-contribution-link-and-motivation
lmi
1
150
GrafanaMeetup_AmazonManagedGrafanaのアクセス制御機能とマルチテナント環境下でのアクセス制御について
daitak
0
390
IPUT App Dev. Co. -Overview 2024/4
iputapp
0
120
【基本】データベース設計
oracle4engineer
PRO
2
150
KubeConにproposalを送りたい人へのアドバイス
sat
PRO
3
270
データベース02: データベースの概念
trycycle
0
180
ルーターでプレゼンする
puhitaku
1
3.2k
Featured
See All Featured
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
323
20k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
245
20k
Thoughts on Productivity
jonyablonski
59
3.9k
Java REST API Framework Comparison - PWX 2021
mraible
PRO
19
6.9k
Statistics for Hackers
jakevdp
790
220k
Docker and Python
trallard
35
2.7k
A Philosophy of Restraint
colly
197
16k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
20
1.7k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
14
1.5k
The World Runs on Bad Software
bkeepers
PRO
61
6.7k
Clear Off the Table
cherdarchuk
85
310k
Reflections from 52 weeks, 52 projects
jeffersonlam
345
19k
Transcript
MLOps導入とGPT活用ができる ML組織になってきた話 ファインディ株式会社 データソリューションチーム 笹野 翔太
2 自己紹介 笹野 翔太(Sasano Shota) • 2022/07 ファインディ入社 CTO直下データソリューションチーム所属 ◦ 機械学習エンジニア
• 主な職務 ◦ 既存アルゴリズムアップデート ◦ MLOps導入 ◦ アルゴリズムに関する新規施策の PoC ▪ GPT活用 ◦ etc… • 最近の悩み:寝るのが下手くそ @Edyyyon sasanoshouta
3 ファインディのサービス 3 挑戦するエンジニアのプラットフォームをつくる 転職 フリーランスのマッチング 組織パフォーマンスの可視化 転職 (グローバル展開)
データソリューションチーム紹介 4
5 データソリューションチームのミッション データ分析・機械学習アルゴリズムによりサービスの価値を向上させる • スキル偏差値 ◦ GitHubを解析してスキルを定量化 • ユーザの年収予測 •
各種レコメンデーション • MLOps導入 • GPT活用 etc … GitHubの解析ロジックを用いてエンジニアス キルを偏差値化し、マッチング精度を向上
6 データソリューションチームのミッション データ分析・機械学習アルゴリズムによりサービスの価値を向上させる • スキル偏差値 ◦ GitHubを解析してスキルを定量化 • ユーザの年収予測 •
各種レコメンデーション • MLOps導入 • GPT活用 etc … GitHubの解析ロジックを用いてエンジニアス キルを偏差値化し、マッチング精度を向上
1⃣ MLOps導入 7
8 1⃣ MLOps導入:全体像 • 通称「おすすめ順」という、求人×ユーザーのマッチスコアを計算し、レコメンドす る機械学習モデルを運用している 求人情報 ユーザー情報 × マッチスコア
9 1⃣ MLOps導入:変更点 • 運用がイケてなかったので、MLOpsを導入した ◦ モデルの学習が不定期かつ notebook上で都度再学習を走らせてファイルを S3にアップロード •
Vertex AIでモデルの自動学習パイプラインを構築 • ついでにGithub ActionsでCIを構築し、定期実行化 パイプライン起動 プルリク作成CI起動 ・最新モデルアーキテクト保存 ・metrics書き込み プルリク 最新バージョンモデルコミット
常に一定の精度を保ったまま運用できる状態に🎉 10
2⃣ GPT活用 11
12 2⃣ GPT活用:キャリアまとめつくりました • 2023/03 「ChatGPTキャリアまとめ」リリース ◦ ChatGPTに自分の経歴をまとめて貰って、名前をつけて貰おう
13 2⃣ GPT活用:詳しくはLT資料で! • リリース後にLT参加 👆 2023/03/23 @ChatGPT選手権 LT大会資料
GPT活用については他にも社内で進めています 14
その他にも 15
16 紹介しきれない取り組み • dbt導入によるデータの冪等性担保 ◦ 事業部で追う指標の数値を共通化できるように ✅ • データ基盤構築・運用 ◦
弊社インフラチームと協力しながら着手中
少しずつやりたい事ができるチームに 17
社の方針もあり、弊チームに追い風🌬 18
チームの特徴:やった事が成果になりやすい 19
まだまだ伸びしろも 20
以下伸びしろ • 既存アルゴリズムのアップデート ◦ 人が足りない • 実施された施策の効果検証の土台醸成 ◦ 人が足りない •
現在進捗中のデータ基盤構築・運用 ◦ 人が足りない • 新機能開発 ◦ 人が足りない 21
興味を持っていただいた方 一緒に開発しましょう! 22
採用強化中です! 23 👈 募集要項はこちら