Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
Introducing Amazon SageMaker AutoPilot
mogamin
December 10, 2019
Technology
1
390
Introducing Amazon SageMaker AutoPilot
mogamin
December 10, 2019
Tweet
Share
More Decks by mogamin
See All by mogamin
RDB脳はあなたに送る KVSモデリングのノウハウを公開! AWS DynamoDB、AzureCosmosDBでのKVS設計はこうしよう!
mogamin
0
190
Deep dive into application-level network management & observability with AppMesh
mogamin
0
630
EfficientNet:Rethinking Model Scaling for Convolutional Neural Networks
mogamin
0
33
Pytorch強化学習プラットフォーム? Horizonのドキュメントを読む
mogamin
0
1.7k
強化学習を可視化するchainerrl visualizerを動かしてみた
mogamin
1
380
Other Decks in Technology
See All in Technology
RDRA + JavaによるレジャーSaaSプロダクトの要件定義と実装のシームレスな接続
jjebejj
PRO
3
770
Accelerated Computing for NLP on AWS
shokout
1
260
Introduction to MLOps
asei
7
1.3k
Meet passkeys
satotakeshi
1
130
ノーコードで Stripeを使いこなす3つの方法 / jp-stripes-online-vol-4
stripehideokamoto
0
320
Power AutomateでのAdaptive Cards
miyakemito
1
650
MRTK3 - DataBinding and Theming 入門
futo23
0
200
アーキテクチャを明文化して開発に臨んだ話
akkie76
0
360
約6年間運用したシステムをKubernetesに完全移行するまで/Kubernetes Novice Tokyo
isaoshimizu
6
950
Design for Humans: How to make better modernization decisions
indualagarsamy
2
130
機械学習システムのアーキテクチャとデザインパターン
washizaki
1
670
Citizen 개발기
outsider
0
310
Featured
See All Featured
Building a Scalable Design System with Sketch
lauravandoore
448
30k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
181
15k
Navigating Team Friction
lara
175
11k
Gamification - CAS2011
davidbonilla
75
3.9k
Happy Clients
brianwarren
89
5.6k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
655
120k
Fight the Zombie Pattern Library - RWD Summit 2016
marcelosomers
226
15k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
10
3.5k
What’s in a name? Adding method to the madness
productmarketing
11
1.6k
Principles of Awesome APIs and How to Build Them.
keavy
113
15k
Design by the Numbers
sachag
271
17k
What the flash - Photography Introduction
edds
62
10k
Transcript
Introducing Amazon SageMaker AutoPilot 高品質な機械学習モデルをフルコントロールかつ視覚的に自動生成 10.Dec.2019 JAWS-UG東京#33 マイベストモーメント re:Invent 2019
Takashi,MOGAMI @mogamin
WHO AM I? Takashi, MOGAMI / @mogamin ウルシステムズ株式会社 Technology Enabler
画像処理、DeepLearningや強化学習がメイン業務。時間があればkaggleや SIGNATEで技術を磨く。社内ではテック合宿、arxiv論文を読む活動等、Scrum推 進活動、主に技術系を軸とした社内コミュニケーション活性化施策立案および実 行。最近ではgolangを使ったマイクロサービスプロジェクトを推進中。 - Scrum Master - AWS Certified Solutions Architect Professional
None
I’m Chainer User Group Member!
I’m Chainer User Group Member!
I’m AWS DeepRacer 64 Finalist
Introducing Amazon SageMaker Autopilot
Agenda - (背景)Scailing machine learning - (紹介)How Amazon SageMaker Autopilot
helps you scale ML - (事例)How DevFactory uses ML to scale - (デモ)Demo of Amazon SageMaker Autopilot - (まとめ)Conclution
Scaling machine learning - 毎2年でデータは1,000%成長 - ここ2年で世界の人口は2.2%増加 - ほとんどのデータが使われていない -
データの増加に雇用が間に合わない。 - 機械学習は人間の知識をスケールさせる テクノロジーであり、人間の知識を拡張 して増加するデータに追いつくための方 法です。 - それを使いたいが使えない壁はnanda?
Scailing machine learning - 機械学習プロセスはほんっと大変! - データは時間とともに変化するので、 MLプロセスは何度も繰り返す必要があ り、いつか成功を。。。 -
MLは非標準なツールを多く使い、重要 なデータにはコンプライアンス課題がつ きまとう。。。 - MLは、計算コストが高い。そのためス ケーリングにはコスト課題が残る。 - それに、これらのプロセスを自動化して 規模を拡大させたいというはるかなる願 いもある。
MLを成功させるには - 複雑で見つけにくい、アル ゴリズム、データ、パラメ ータの組み合わせが必要。 - しかもそれは、MLの専門家 でも、非常に時間がかかる し、ミスが多発するプロセ スだし。
- だから、AWSは自動モデル チューニングを考えました。
SageMaker Autopilotの守備範囲 - XXXX
SageMaker Autopilotの紹介 - XXXX
SageMaker Autopilotの紹介 DIY model training Automated ML SageMaker Autopilot •
ML専門家による手作業 • 完全にコントロールでき る • ML専門家がトレードオフ の決定をする • 時間の経過とともによく なります • 専門家でなくても、専門 家のように手動操作でき る • 学習過程が可視化され ない • 精度に依存する特徴量 間のトレードオフは操作 できない • 専門家でなくても専門家 のような学習を完全自動 化できる • notebookの生成、提供 により完全にコントロー ルできる • notebookがあるので、ト レードオフになりうる特 徴量の修正は簡単 • 他モデルとの比較も可 視化できる
SageMaker Autopilotの紹介 DIY model training Automated ML SageMaker Autopilot •
ML専門家による手作業 • 完全にコントロールでき る • ML専門家がトレードオフ の決定をする • 時間の経過とともによく なります • 専門家でなくても、専門 家のように手動操作でき る • 学習過程が可視化され ない • 精度に依存する特徴量 間のトレードオフは操作 できない • 専門家でなくても専門家 のような学習を完全自動 化できる • notebookの生成、提供 により完全にコントロー ルできる • notebookがあるので、ト レードオフになりうる特 徴量の修正は簡単 • 他モデルとの比較も可 視化できる
Autopilotの仕組み
demo
Amazon SageMakerのプロダクト群
参考 - Amazon Web Services ブログ https://aws.amazon.com/jp/blogs/news/amazon-sagemaker-autopilot-fully- managed-automatic-machine-learning/ - ClassMethod
Amazon SageMaker Autopilotを使ってみた https://dev.classmethod.jp/cloud/aws/try-amazon-sagemaker-autopilot/
英語について - なんとかなる。 - はじるな!考えるな! - 気持ちを伝えよう!
こちらもよろしくおねがいします。 EKS on Fargate のクラスタを構築してみる
ありがとうございました。 We are now hiring! @mogaminまで