Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
メルペイでのML Ops / merpay-2
Search
M3 Engineering
September 05, 2018
Technology
0
3.6k
メルペイでのML Ops / merpay-2
2018/9/5 に開催された「merpay×M3 機械学習 NIGHT」の発表資料です。
https://mercari.connpass.com/event/97213/
#merpay_ml
M3 Engineering
September 05, 2018
Tweet
Share
More Decks by M3 Engineering
See All by M3 Engineering
エムスリー全チーム紹介資料 / Introduction of M3 All Teams
m3_engineering
4
53k
エムスリーマネジメントチーム紹介資料 / Introduction of M3 Management Team
m3_engineering
0
3.9k
エムスリーエビデンス創出プロダクトチーム紹介資料 / Introduction of M3 Create Evidence Team
m3_engineering
1
6.7k
ギークの理想が7つ集まるエムスリーで夢を叶えよう - エムスリー株式会社
m3_engineering
1
14k
エムスリー基盤チーム紹介資料 / Introduction of M3 Platform Team
m3_engineering
3
14k
エムスリーMR君ファミリー開発チーム紹介資料 / Introduction of M3 MRkun Family Dev Team
m3_engineering
2
14k
エムスリーマルチデバイスチーム紹介資料 / Introduction of M3 Multi Device Team
m3_engineering
4
14k
エムスリーQAチーム紹介資料 / Introduction of M3 QA Team
m3_engineering
2
16k
エムスリー SREチーム紹介資料 / Introduction of M3 SRE Team
m3_engineering
1
14k
Other Decks in Technology
See All in Technology
[OpsJAWS Meetup33 AIOps] Amazon Bedrockガードレールで守る安全なAI運用
akiratameto
1
130
JavaにおけるNull非許容性
skrb
2
2.7k
OPENLOGI Company Profile for engineer
hr01
1
20k
ExaDB-XSで利用されているExadata Exascaleについて
oracle4engineer
PRO
3
290
急成長する企業で作った、エンジニアが輝ける制度/ 20250227 Rinto Ikenoue
shift_evolve
0
200
Amazon Q Developerの無料利用枠を使い倒してHello worldを表示させよう!
nrinetcom
PRO
2
120
30→150人のエンジニア組織拡大に伴うアジャイル文化を醸成する役割と取り組みの変化
nagata03
0
290
Potential EM 制度を始めた理由、そして2年後にやめた理由 - EMConf JP 2025
hoyo
2
3k
大規模アジャイルフレームワークから学ぶエンジニアマネジメントの本質
staka121
PRO
3
1.4k
エンジニア主導の企画立案を可能にする組織とは?
recruitengineers
PRO
1
290
Pwned Labsのすゝめ
ken5scal
2
540
データエンジニアリング領域におけるDuckDBのユースケース
chanyou0311
9
2.5k
Featured
See All Featured
Testing 201, or: Great Expectations
jmmastey
42
7.2k
Git: the NoSQL Database
bkeepers
PRO
428
65k
GraphQLとの向き合い方2022年版
quramy
44
14k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
134
33k
Bootstrapping a Software Product
garrettdimon
PRO
307
110k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
330
21k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
21
2.5k
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
3.7k
10 Git Anti Patterns You Should be Aware of
lemiorhan
PRO
656
59k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
30
2.2k
The Language of Interfaces
destraynor
156
24k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
47
5.2k
Transcript
@sugar1023 メルペイ ps merpay ✕ M3 機械学習 NIGHT 2018 /
09 / 05
18 Copyright © Merpay, Inc. All Rights Reserved. 2017年4月〜 :
ヤフー いろいろ 2018年6月〜 : メルペイ 2015年4月〜 : 大学院 自己紹介 氏名: 佐藤 貴之@sugar1023_ 経歴 入社し 3ヶ月が 経ちました 所属: achine earning Engineer
19 Copyright © Merpay, Inc. All Rights Reserved. 伝えたいこ チーム
分析&モデリングを スケーラブル !! 『誰 もサクッ タスク 取りかかれる』 そん 環境を目指しました
基盤まわり
21 Copyright © Merpay, Inc. All Rights Reserved. 採用し いる主
技術 Docker ubernetes Engine Cloud torage Container egistry pinnaker circleci
アーキテクチャ 全容 「機械学習エンジニアが行う作業 、 特徴量追加 ull equest を作るだけ す。」 だいたい自動化
23 Copyright © Merpay, Inc. All Rights Reserved. 開発環境 再現性を担保
基本的 Dockerイメージ 管理 「 ython 2系こそ至高」 「辞書 Eologd使っ ます! ただしバージョン 知ら 」 「pip condaがごっちゃ りました」 環境構築 困るこ 極力 くす気持ち
分析&モデリングまわり
25 Copyright © Merpay, Inc. All Rights Reserved. データ Big
ueryやGC データへ アクセシビリティよき クエリ メンバー間 共有 一度作成した特徴量&モデルを管理 同じ設定 クエリや特徴量、モデル 作成をし い
自作モジュール 挙動 を意識 scikit-learn load_hoge 類似!! 例: Big ueryから学習/評価用 データを抽出する関数
慣れ親しんだインターフェース 学習コスト↓↓
27 Copyright © Merpay, Inc. All Rights Reserved. モデルを組んだらpipeline sklearn
pipelineオブジェクトを用意し union 特徴量加工処理を簡単 共有・追加削除・再現 きる!
28 Copyright © Merpay, Inc. All Rights Reserved. ま め
スケールするチームを目指し !! ・自動化され い 、かつ再現性 高い環境を構築し ・各モジュールも使いやすく ・分析&モデリング 分担を容易