40分で理解するAWS re:Invent 2019アップデートまとめ

Slide 1

Slide 1 text

40分で理解する AWS re:Invent 2019 アップデートまとめ CM re:Growth 2019 FUKUSHIMA クラスメソッド株式会社取締役 / AWS事業本部本部⻑佐々⽊⼤輔

Slide 2

Slide 2 text

2 本⽇のハッシュタグ #cmregrowth

Slide 3

Slide 3 text

3 ⾃⼰紹介 •佐々⽊⼤輔 (@smokeymonkey) •クラスメソッド株式会社 • 取締役/ AWS事業本部本部⻑ •北海道江別市在住 •インフラエンジニア出⾝ •Japan APN Ambassador 2019 •JFA公認C級コーチ •サッカー3級/フットサル4級審判 •趣味︓ランニング、サウナ、ラーメン

Slide 4

Slide 4 text

4 ⾃⼰紹介 •佐々⽊⼤輔 (@smokeymonkey) •クラスメソッド株式会社 • 取締役/ AWS事業本部本部⻑ •北海道江別市在住 •インフラエンジニア出⾝ •Japan APN Ambassador 2019 •JFA公認C級コーチ •サッカー3級/フットサル4級審判 •趣味︓ランニング、サウナ、ラーメン

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

8 ⾏ってみた

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

11 本⽇の資料 73ページ

Slide 12

Slide 12 text

AWS re:Invent とは 12

Slide 13

Slide 13 text

13 AWS re:Invent • AWSの年次カンファレンスイベント • Las Vegas, USで開催 • 営業やマーケティングのためではなく、学習機会の為のイベントという位置づけ • キーノートでは多くの新サービスや新機能が発表される • 告知なしにセッションの中で新機能が発表されることも多数ある • さらにイベント開催前にも多数の新サービス/ 新機能が発表(隠語:予選落ち)

Slide 14

Slide 14 text

14 AWS re:Invent 2019 • 2012年からスタートし、今年で8回⽬ • 全世界から66,000⼈が参加 • ⽇本からは1,700⼈が参加 • 2,500以上のセッション、ワークショップ、ハンズオンが開催 • 丸⼀⽇かけたブートキャンプも実施 • 認定試験も⾏われ、その場で受験可能

Slide 15

Slide 15 text

会場マップ • 7つのホテルに分散して開催 • ⼀番遠いEncore – MGM Grand間で約4km • 徒歩で1時間くらい。 • 各ホテルを結ぶ連絡バスが運⾏。 • ベネチアンは部屋数7,000以上 • アメリカ最⼤のホテル 15

Slide 16

Slide 16 text

16 クラスメソッドは82名で参加

Slide 17

Slide 17 text

17 新サービス/新機能をそれぞれ3⾏で紹介

Slide 18

Slide 18 text

AWS DeepComposer • ⾳源を機械学習でアレンジするサービス • キーボード⾃体はただのインターフェース、他のデバイスでも録⾳した⾳源でも構わない • DeepRacerと同様に、機械学習を⾝近に体験するサービス 18

Slide 19

Slide 19 text

新しい EC2 インスタンスタイプ M6g/R6g/C6g • AWSがカスタムして提供するArmベースのCPUであるGraviton、その新世代であるGraviton2を採⽤ • 旧インスタンスタイプであるM5/C5/R5と⽐較してvCPUの性能が向上 • 今後Amazon EMR、ELB、 Amazon ElastiCacheなどのサービス基盤でも採⽤される予定 19

Slide 20

Slide 20 text

機械学習の推論向けインスタンス Inf1 • AWSが開発した推論専⽤チップ、Inferentiaを搭載 • 機械学習の推論を実⾏することに特化したインスタンス • クラウド上でもっとも⾼速に推論が可能なサービス 20

Slide 21

Slide 21 text

AWS Nitro Enclaves • EC2インスタンス内で、機密性の⾼いデータを保護および安全に処理するためのサービス • Nitro Hypervisorを使⽤ • AWS KMSと統合された、安全なローカル接続のみをもつ完全に隔離された仮想マシンを提供 21

Slide 22

Slide 22 text

Amazon Braket • 量⼦コンピューティングサービス • Amazon Braket SDKと Jupyter Notebookベースの環境が提供 • 合わせて、量⼦コンピュータの研究施設 AWS Center for Quantum Computingを開設 22

Slide 23

Slide 23 text

EC2 Image Builder • EC2のイメージ作成をより簡単かつ迅速に保守、運⽤するためのサービス • これまでは⼿動やPacker などで対応していた • イメージ更新の⾃動化とテストがこのサービスで⼀気通貫で可能に 23

Slide 24

Slide 24 text

AWS Compute Optimizer • EC2で利⽤しているリソース利⽤状況に対し機械学習を⾏い、推奨事項を表⽰ • 同じファミリー内のインスタンスサイズの提案だけではなく、別のファミリーの提案も⾏う • モリ使⽤量などのカスタムメトリクスも考慮に組み込むことが可能 24

Slide 25

Slide 25 text

EBS direct APIs • EBSスナップショットに対するブロック単位の読み取りアクセスを提供するAPI群 • これまではEBSスナップショットからボリュームを作ってEC2にアタッチしていた • 今後はそれらの作業をしなくても、2つのEBSスナップショットの⽐較が可能 25

Slide 26

Slide 26 text

AWS License Manager adds Dedicated Host management • ホストグループを定義し、 Dedicated Hostsの追加、削除、⾃動復旧などを管理可能に • Dedicated Hostsの作成の⼿間が⼀気に省ける • 更にライセンス構成に登録した製品情報を元に、指定した製品をインストールしているインスタンスを⾃動検出 26

Slide 27

Slide 27 text

AWS Transit Gateway Multicast • TGWにアタッチされた VPCのサブネット間のマルチキャストトラフィックのルーティングをサポート • マルチキャストルータとして動作 • 既に⼀部のリージョンで利⽤可能 27

Slide 28

Slide 28 text

AWS Accelerated Site to site VPN Connections • サイト間VPNのオプションの⼀つとして追加 • AWS Global Acceleratorを利⽤して、オンプレミスネットワークからのトラフィックをAWSのエッジロケーションに向ける機能 • インターネットの経路上で障害が発⽣した場合 AWSのグローバルネットワークを経由することで回避 28

Slide 29

Slide 29 text

Transit Gateway inter-Region Peering • 2つのTransit Gatewayをピアリングする機能 • 別のアカウントや別のリージョンのTransit Gatewayを指定することが可能 • 通信トラフィックがAWS バックボーン(AWS閉域網)に留まりパブリックインターネットを通過しない 29

Slide 30

Slide 30 text

AWS Transit Gateway Network Manager • AWS Transit Gateway環境を視覚化および監視 • AWSリージョンとオンプレミスを含めたグローバルなネットワークを視覚化できる • 利⽤するための追加料⾦は特に無し 30

Slide 31

Slide 31 text

VPC Ingress Routing • IGWとVGWに対しルートテーブルを割り当てることが可能に • IGW/VGWの通信全てを特定のEC2にルーティングすることが可能になった • UTMやIPS/IDSなどに簡単にルーティング出来るように 31

Slide 32

Slide 32 text

Amazon Fargate for Amazon EKS • EKSでFargateコンテナが管理可能 • EC2インスタンスの管理不要 • Generally availableであり即⽇利⽤可能 32

Slide 33

Slide 33 text

AWS Fargate Spot • FargateがSpotに対応 • 最⼤70%割引でFargateが利⽤可能 • GAリリースであり東京リージョンでも利⽤可能 33

Slide 34

Slide 34 text

Amazon S3 Access Points • アクセスポリシーを記述したセキュアなアクセスポイントをARNやURL形式で発⾏ • VPC内からのアクセスのみ許可するようなアクセスポイントを発⾏できる • 既にS3バケット設定で設定可能 34

Slide 35

Slide 35 text

Amazon Managed Apache Cassandra Service (MCS) • スケールに対応した分散 KVSであるApache Cassandraマネージドサービスに • Apache Cassandra (version 3.11 CQL) 互換、クラスタ管理不要、msec単位でスケール • オープンプレビュー中 35

Slide 36

Slide 36 text

UltraWarm • Amazon Elasticsearch ServiceにHot-Warm層を設けるサービス • HotとUltraWarmの2つの層（Tier）をサポート • Hot Tierはインデックスの作成、更新、データアクセスに利⽤、 UltraWarm Tierはアクセス頻度の低い、古いデータをに利⽤ 36

Slide 37

Slide 37 text

Amazon Redshift RA3 Instances • ストレージに「SSD Cache」と「S3」の2つのストレージ組み合わせたノードタイプ • 参照する頻度が⾼いデータブロックはSSD Cache に、更新・追加が⽣じたデータブロックはS3に保存 • コンピューティングとストレージが分離されるイメージ 37

Slide 38

Slide 38 text

Amazon Redshift Federated Query • RedshiftからRDSとAurora PostgreSQLのテーブルに直接アクセス • Redshiftから直接 PostgreSQLのテーブルに接続してETL/ELTを処理するクエリを実⾏可能 • Redshift Spectrumを含め、 Redshiftから様々なリソースにクエリアクセスが出来るようになった 38

Slide 39

Slide 39 text

Amazon Redshift Data Lake Export • Parquet=カラムナ指向のデータフォーマット • これまでのRedshiftは読み込みのみ対応 • Data Lake Exportにより、 Parquetフォーマットで UNLOAD可能に 39

Slide 40

Slide 40 text

AQUA(Advanced Query Accelerator) for Amazon Redshift • 新しい分散型ハードウェアアクセラレーションキャッシュ • 「他のデータウェアハウスよりも最⼤10倍早くなる」と謳う • データ処理の⼤部分をキャッシュ上で実施、 NitroとFPGAで分析を⾼速化 40

Slide 41

Slide 41 text

Amazon SageMaker Notebooks • Notebookインスタンス =Jupyterノートブックアプリを実⾏しているEC2 インスタンス • これまでは⾃分で作成、⾃分で停⽌が必要 • Notebooksにより、利⽤したい時にワンクリックでJupyterノートブックを利⽤可能 41

Slide 42

Slide 42 text

Amazon SageMaker Studio • SageMakerの統合環境。 WebベースのIDE。 • SageMakerのあらゆる機能をSageMaker Studioから操作可能 • 発表時点でGAリリース 42

Slide 43

Slide 43 text

Amazon SageMaker Processing • 機械学習の前処理と評価処理の部分を担うサービス • これまで別に⽤意していた前処理と評価処理が SageMakerに統合 • ノートブックでは時間がかかりすぎる重たい処理を任せることも可能 43

Slide 44

Slide 44 text

Amazon SageMaker Experiments • 機械学習のモデルバージョンを整理、追跡、⽐較、評価 • できるだけ簡単にモデルのトレーニングを作成し実⾏し確認するためのサービス • SageMaker Studioと完全統合 44

Slide 45

Slide 45 text

Amazon SageMaker Debugger • ⾃分で書いたモデルのデバッグに利⽤ • トレーニング中のロスや精度等のスカラー値をモニタリングすることで、モデルの開発や評価をサポート • 結果をCloudWatch Event で通知したり、後から確認したり出来る 45

Slide 46

Slide 46 text

Amazon SageMaker Autopilot • 機械学習モデルを⾃動的に作成、SageMaker上で AutoMLを実現 • 実⾏すると⼤量のモデルを作成、⼀番精度の⾼かったモデルを選定して利⽤可能 • 機械学習の専⾨家でなくても、細かいパラメータ調整をしなくても、モデルの作成が可能に 46

Slide 47

Slide 47 text

Amazon SageMaker Model Monitor • SageMakerのエンドポイントをモニター、機械学習モデルのドリフト(品質低下)を⾃動で検知、アラート通知 • 可視化はSageMaker Studioで、Jupyter Notebookで分析も可能 • 監視結果のレポートはS3 に保存 47

Slide 48

Slide 48 text

Amazon SageMaker support Deep Graph Library • SageMakerでDeep Graph Library(DGL) が利⽤可能に • DGL=グラフニューラルネットワークを簡単に実装するためのPythonオープンソースライブラリ • サンプルコードも公開されておりすぐ使える 48

Slide 49

Slide 49 text

Amazon Fraud Detector • Amazonが培った詐欺検出の知⾒がサービス化 • 取引のデータに含まれる電話番号、Eメールアドレス、ドメイン、取引履歴などのさまざまな情報から、詐欺を検出するための独⾃のモデルを開発 • APIとして提供され、詐欺の確率を表すスコアを返す 49

Slide 50

Slide 50 text

Contact Lens for Amazon Connect • Connectの通話情報を解析、テキストに書き起こし、検索できるフルマネージドサービス • ほぼリアルタイムに⽂字起こし可能 • 感情分析や沈黙時間の解析などを分析可能 50

Slide 51

Slide 51 text

Amazon Kendra • マシンラーニングを使ったエンタープライズのための検索サービス • 社内に散らばったデーターをKendraで統合し共通のインタフェースを使って検索可能 • 検索結果に対するユーザーからのリアクションを元に検索機能を最適化 51

Slide 52

Slide 52 text

Amazon CodeGuru • 機械学習によるコードレビュー⾃動化サービス • プルリクエストを⾃動的に分析し、問題を検出し、解決案を提⽰ • 実⾏時の動作を分析しパフォーマンスのボトルネックとなるコード箇所を検出 52

Slide 53

Slide 53 text

Amazon Outposts(GA) • 昨年発表されたOutposts がGAリリース • 合わせて対象サービスが発表、新たにRDSとS3も提供予定と発表 • 東京リージョンでも利⽤可能に 53

Slide 54

Slide 54 text

AWS Local Zones • ⾼いレイテンシが求められるワークロードに対し、地域的に近い場所でAWS サービスを提供するインフラストラクチャサービス • Outpostsが使えない場合に利⽤されることを想定 • 最初はロサンゼルスで提供開始 54

Slide 55

Slide 55 text

AWS Wavelength • モバイルアプリケーションをキャリア網内の5G ネットワークのエッジにデプロイできるサービス • EC2/ECS/EKSが使える予定 • ⽇本ではKDDIがサービス提供 55

Slide 56

Slide 56 text

The Amazon Builders’ Library • Amazonが培ってきた開発者のためのドキュメントをライブラリとして公開 • 無料で誰でも参照可能、 AWSのアカウントも必要なし • 現時点で13のドキュメントが公開、今後も更新され増えていくとのこと 56

Slide 57

Slide 57 text

Amazon Transcribe Medical • 医療情報に特化した⾳声認識サービス • 臨床情報のレポートの作成に多⼤な時間を費やしているという課題をサポート • 特定の業界業種に特化することで専⾨⽤語をカバー 57

Slide 58

Slide 58 text

Amazon Rekognition Custom Labels • 画像内のオブジェクト、シーン、および概念を検出するモデルを簡単に作成 • ビジネスニーズ固有の画像内のオブジェクトとシーンを識別可能に • 特定の商品やロゴを検出したり、物体異常検知に使うことも可能 58

Slide 59

Slide 59 text

Amazon Augmented AI(A2I) • 機械学習の結果に対して、実際の⼈間によるチェックを含めたワークフローを提供するサービス • コンテンツのモデレーションやテキスト抽出など、⼀般的な機械学習で必要とされるワークフローを⼈間で提供 • ⼤量のヒューマンリソースを簡単に調達可能 59

Slide 60

Slide 60 text

Deep Java Library • Deep Java Library(DJL)がリリース • DJL= Javaでディープラーニングモデルを開発するためのオープンソースライブラリ • ディープラーニングモデルのトレーニング、テスト、リリースするための APIが提供 60

Slide 61

Slide 61 text

Provisioned Concurrency for Lambda Functions • 初期化処理の完了した Lambda実⾏環境を、指定した同時実⾏数の分だけ事前にプール可能 • Lambdaのコールドスタート対策が容易に • 通常のLambdaの利⽤料に加えて追加の料⾦が発⽣するため注意が必要 61

Slide 62

Slide 62 text

Amazon RDS Proxy with AWS Lambda • RDSの最⼤同時接続数以上にLambdaが起動するとRDSへの接続エラーが発⽣する • RDS Proxy側でRDSとの接続を管理 • 複数のLambda実⾏環境を跨いで1つのDB接続を使いまわすことが可能 62

Slide 63

Slide 63 text

IAM Access Analyzer • IAMが意図したどおりのアクセスのみを提供しているかを継続的にチェックできるサービス • Amazon EventBridgeと連携することで通知を受け取ることも可能 • 追加費⽤なし、全リージョンで使⽤可能 63

Slide 64

Slide 64 text

S3 Access Analyzer • S3のアクセスコントロールに問題がないか検知する機能 • IAM Access Analyzer がベース • 例えばPublic Access設定のS3バケットがあると、アラートが表⽰ 64

Slide 65

Slide 65 text

Amazon Detective • 潜在的なセキュリティ問題または疑わしいアクティビティの根本原因を簡単に分析、調査、および迅速に特定 • AWSリソースからログデータを⾃動的に収集し、機械学習、統計分析、グラフ理論を使⽤して、データのリンクセットを構築 • より迅速かつ効率的なセキュリティ調査を簡単に実⾏ 65

Slide 66

Slide 66 text

Amazon EventBridge schema registry and discovery • EventBridgeで扱うイベントデータのスキーマ情報を公開・共有するサービス • これまで⼿作業で⾏っていたスキーマ関連の作業を、既に⽤意されているものを使って簡単に設定可能に • Schema Discoveryを有効化にすると、対象のイベントのスキーマが⾃動的に Schema Registryに登録される 66

Slide 67

Slide 67 text

AWS Step Functions Express Workflows • 短期間で⼤量な処理が⾏えるExpressワークフローが機能追加 • 1秒あたり100,000イベントを超える呼び出しレートをサポート • ⾼イベントレート、短時間ワークロード向け 67

Slide 68

Slide 68 text

Amplify iOS & Amplify Android • ネイティブアプリ⽤の新しいSDK • Amplify Frameworkとして提供されてきた「Amplify JS」のネイティブ（iOS/Android）版 • プレビューリリース 68

Slide 69

Slide 69 text

Amplify DataStore • クエリ検索可能な形でデバイス上にデータを格納することができる機能 • デバイス向けの永続的なストレージであり、スタンドアロンのローカルストレージ • Web, IoT, iOS, Android, ReactNativeなどで利⽤可能 69

Slide 70

Slide 70 text

HTTP APIs for Amazon API Gateway • REST API 、WebSocket API に続いて追加されたAPI • 低コスト、JWT Authorizer (OpenID Connect)をサポート、 CORS設定のカスタマイズ可能 • 他のAPIと⽐べて⾼機能 70

Slide 71

Slide 71 text

71 まとめ

Slide 72

Slide 72 text

72 まとめ • 多すぎ。 • ⼀通りDevelopers.IOにて記事化しています。詳細はブログをご覧ください。 • プレビューリリースはぜひご⾃⾝で体験してみてください。 • 来年はぜひ⼀緒にAWS re:Invent 2019に⾏きましょう︕ • そう、クラスメソッドならAWS re:Invent 2019に⾏けます︕