Upgrade to Pro — share decks privately, control downloads, hide ads and more …

JAWS-UG大阪 AWS re:Invent 2022 re:Cap

Avatar for koara koara
December 15, 2022
Technology
0
110

JAWS-UG大阪 AWS re:Invent 2022 re:Cap

SageMaker Data Wranglerについて話しましたーー

Avatar for koara

koara

December 15, 2022
Tweet

More Decks by koara

See All by koara
SST ( Serverless Stack Toolkit ) 使ってみた
Avatar for koara ra1211
0
210
AWSでデータ解析を始めたーい
Avatar for koara ra1211
0
290
もめんと会 Momento Cache
Avatar for koara ra1211
0
64
JAWS-UG 名古屋 AVAハンズオン+re:Inforceの復習
Avatar for koara ra1211
0
110
JAWS ミート 2023
Avatar for koara ra1211
0
62
20221112_四国クラウドお遍路.pdf
Avatar for koara ra1211
0
310

Other Decks in Technology

See All in Technology
SAE J1939シミュレーション環境構築
Avatar for okzkey daikiokazaki
1
190
P2P ではじめる WebRTC のつまづきどころ
Avatar for tnoho tnoho
1
270
マルチモーダル基盤モデルに基づく動画と音の解析技術
Avatar for LINEヤフーTech (LY Corporation Tech) lycorptech_jp
PRO
2
270
興味の胞子を育て 業務と技術に広がる”きのこ力”
Avatar for Fumiya Sakai fumiyasac0921
0
300
私とAWSとの関わりの歩み～意志あるところに道は開けるかも？～
Avatar for nagisa_53 nagisa53
1
130
[TechNight #91] Oracle Database 最新パフォーマンス分析手法
Avatar for oracle4engineer oracle4engineer
PRO
3
170
TypeScript 上達の道
Avatar for Kanon ysknsid25
23
4.8k
隙間時間で爆速開発！ Claude Code × Vibe Coding で作るマニュアル自動生成サービス
Avatar for Akitomo Sato akitomonam
2
200
Tiptapで実現する堅牢で柔軟なエディター開発
Avatar for kirik kirik
1
160
Railsの限界を超えろ！「家族アルバム みてね」の画像・動画の大規模アップロードを支えるアーキテクチャの変遷
Avatar for Ojima Hikaru ojima_h
4
520
AI時代の知識創造 ─GeminiとSECIモデルで読み解く “暗黙知”と創造の境界線
Avatar for Yukinaga OISHI nyagasan
0
160
MCPに潜むセキュリティリスクを考えてみる
Avatar for Milix-M milix_m
1
880

Featured

See All Featured
It's Worth the Effort
Avatar for 3n 3n
185
28k
Balancing Empowerment & Direction
Avatar for Lara Hogan lara
1
510
Why Our Code Smells
Avatar for Brandon Keepers bkeepers
PRO
337
57k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
Avatar for Marc Duiker marcduiker
30
2.2k
BBQ
Avatar for Matthew Crist matthewcrist
89
9.8k
Distributed Sagas: A Protocol for Coordinating Microservices
Avatar for Caitie McCaffrey caitiem20
331
22k
No one is an island. Learnings from fostering a developers community.
Avatar for Antonio thoeni
21
3.4k
Build your cross-platform service in a week with App Engine
Avatar for Jose L jlugia
231
18k
Fashionably flexible responsive web design (full day workshop)
Avatar for Andy Clarke malarkey
407
66k
Building Better People: How to give real-time feedback that sticks.
Avatar for Will Jessup wjessup
367
19k
The Psychology of Web Performance [Beyond Tellerrand 2023]
Avatar for Tammy Everts tammyeverts
48
2.9k
Facilitating Awesome Meetings
Avatar for Lara Hogan lara
54
6.5k

Transcript

  1. AWS re:Invent 2022 re:Cap • 2022/12/14 • 古賀 巧

  2. 2 自己紹介 ▪氏名・年齢 古賀 巧(@koara__fftr) 27歳 ▪経歴 SESでドライバーの開発・保守 ▪資格 ▪趣味

    音楽

  3. re:Invent2022 Twitterなどで最新情報を確認しながら日本から参加 毎日(できる限り)キーノート視聴とre:Capに参加 Youtubeチャンネル Amazon Eventsでセッションを追う

  4. Amazon SageMaker Data Wrangler を 知ってるかい

  5. SageMaker StudioのUIが刷新

  6. 一般的な機械学習フローは

  7. モデル作成よりもデータ準備に時間がかかる 外れ値 特徴量エンジニアリング データ形式

  8. Amazon SageMaker Data Wrangler 機械学習 (ML) 用のデータを集約して準備するのにかかる時間を 数週間から数分に短縮します。 SageMaker Data

    Wrangler を使用すると、データ準備と特徴 量エンジニアリングのプロセスを簡素化し、データ選択、クレンジング、 探索、視覚化など、データ準備ワークフローの各ステップを単一のビ ジュアルインターフェイスから実行できます。

  9. まずはデータをインポート Amazon AppFlowでコネクタを設定

  10. None

  11. どんなデータか確認

  12. どんなデータか確認

  13. データを整形

  14. データを整形

  15. その他の操作

  16. Data WranglerをStudio notebookから利用可能に データ変換の方法を選択すると、Studio notebookが コードを生成するので、同じ処理を好きな時に実行できる

  17. notebookにデータを読み込む

  18. データを整形

  19. データを整形

  20. None

  21. データが準備できたらAutopilotにまかせるだけ ノーコード･ローコードでモデル作成まで完了

  22. ご清聴ありがとうございました re:Invent 2023はラスベガスでお会いしましょう