キミはAmazon FSx for NetApp ONTAPという激アツストレージサービスを知っているか

by のんピ

Slide 1

Slide 1 text

キミはAmazon FSx for NetApp ONTAPという  激アツストレージサービスを知っているか  2023/4/11  AWS事業本部コンサルティング部のんピ 

Slide 2

Slide 2 text

2 自己紹介 { "本名": "山本涼太 (覚えなくていいです)", "部署": "AWS事業本部コンサルティング部", "前職": "インフラエンジニア in データセンター", "興味のあること": "面白そうなブログネタ探し", "好きなAWSサービス": [ "AWS Transit Gateway", "AWS Step Functions" "Amazon FSx for NetApp ONTAP" ], "称号" : [ "2022 APN ALL AWS Certifications Engineers", "2022 APN AWS Top Engineers (Networking)" ] }

Slide 3

Slide 3 text

3 知っていますか? Amazon FSx for NetApp ONTAP

Slide 4

Slide 4 text

タイトル  2021/10/5  〇〇部氏名  Amazon FSx for NetApp ONTAPへの愛を語ります LOVE !

Slide 5

Slide 5 text

5 というLTをしたことがあるぐらい私は好きです

Slide 6

Slide 6 text

6 しかしそんなに知名度が伸びていない気がする

Slide 7

Slide 7 text

7 なので今から布教活動をします

Slide 8

Slide 8 text

8 おそらくこのセッションを見ると

Slide 9

Slide 9 text

タイトル  2021/10/5  〇〇部氏名  Amazon FSx for NetApp ONTAP ちょっと気になる . . .

Slide 10

Slide 10 text

10 になると思います

Slide 11

Slide 11 text

11 Amazon FSx for NetApp ONTAP(以降FSxN) とは NetApp ONTAP のフルマネージドサービス

Slide 12

Slide 12 text

12 NetApp ONTAP とは NetAppが提供するストレージOS

Slide 13

Slide 13 text

13 FSxN の特徴的な機能 - マルチプロトコル対応 (NFS / SMB / iSCSI) - データ保護機能 (Snapshot / SnapMirror / SnapVault) - キャッシュ機能 (FlexCache) - クローン機能 (FlexClone) - Storage Efficiency (重複排除 / 圧縮 / コンパクション) - 動的な階層化 (FabricPool) - マルウェア対策 (Vscan / FPolicy) - 高性能 (4,096 MBps / 160,000 IOPS / 各種キャッシュ)

Slide 14

Slide 14 text

14 ちょっと待って機能が多すぎて把握できない

Slide 15

Slide 15 text

15 大丈夫です各機能について紹介しています DevelopersIOのAmazon FSx for NetApp ONTAPの記事はこちらから

Slide 16

Slide 16 text

16 なるほどなんとなくスゴいサービスということは分かった

Slide 17

Slide 17 text

17 でも使い所がよく分からないな

Slide 18

Slide 18 text

18 特に Amazon EFS (以降EFS)や Amazon FSx for Windows File Server (以降FSxW) との使い分けがよく分からないな

Slide 19

Slide 19 text

19 はい説明します

Slide 20

Slide 20 text

20 　 EFSとFSxN比較編

Slide 21

Slide 21 text

21 EFSではなくFSxNを使った方が良い場面常時高パフォーマンスを出すことが求められる

Slide 22

Slide 22 text

22 EFSのスループットモードは3種類 1. バーストモード ○ ファイルシステムのサイズに応じてスループットが拡張 ○ クレジットを消費してバースト可能 ○ 追加コストなし 2. プロビジョニングモード ○ 指定したスループットを一貫して提供 3. エラスティックモード ○ 必要とするスループットを自動で提供 ○ 読み書き量(GB)で課金

Slide 23

Slide 23 text

23 常時高パフォーマンスを出す必要がある場合はプロビジョニングモードを選択 ● バーストモード ○ クレジットが枯渇した場合に性能が出なくなる ■ ベースラインまで制限される ● エラスティックモード ○ 性能は最大Readで3GiBps、Writeで1GiBps出る ○ 読み書き量(GB)で課金されるため、常時読み書きする場合はかなりの金額となる

Slide 24

Slide 24 text

24 EFSのプロビジョニングモードは良いお値段 https://aws.amazon.com/jp/efs/pricing/

Slide 25

Slide 25 text

25 FSxNはその約1/5のお値段 https://aws.amazon.com/jp/fsx/netapp-ontap/pricing/

Slide 26

Slide 26 text

26 ほぼ同じ条件で月額使用料を試算してみる NFS ● ストレージタイプ : 標準ストレージ ● ストレージサイズ : 1TB ● 高頻度アクセスデータの割合 : 20% ● スループットモード : プロビジョンドモード ● スループット : 128MBps FSxN ● デプロイタイプ : Multi-AZ ● ストレージサイズ : 1TB ● キャプールストレージの読み取りリクエスト : 10,000,000 ● キャプールストレージの書き込みリクエスト : 10,000,000 ● SSD IOPS : 3,072 ● SSD のデータ割合 : 20% ● 圧縮と重複排除による削減量 : 65% ● スループット : 128MBps ● バックアップストレージ : 100GB

Slide 27

Slide 27 text

ストレージ料金を差し引いてもFSxNが安い 27 試算結果 EFS : 943.88USD FSxN : 566.71USD

Slide 28

Slide 28 text

28 FSxNではなくをEFS使った方が良い場面 ● ファイルシステムのサイズが数GB ● ファイルシステムのサイズが大きく増減する可能性がある ● 常時高スループット / 高IOPSが求められていない ● 大阪リージョンにバックアップを転送する必要がある ● Multi-AZ構成でオンプレミスからのDirect Connect経由でアクセスが必要だがTransit VIFの用意ができない ● 手間なくAWS LambdaやAWS Fargateと連携させたい

Slide 29

Slide 29 text

29 　 FSxWとFSxN比較編

Slide 30

Slide 30 text

30 FSxWではなくFSxNを使った方が良い場面 64TB以上のストレージ or 高パフォーマンスを出すことが求められる

Slide 31

Slide 31 text

31 FSxWは64TBまでだが、FSxNは実質無制限プライマリストレージ ● SSD ● 性能に最適化 ● 容量は 1〜192TB キャパシティプールストレージ ● オブジェクトストレージ ● プライマリストレージと比較して安価 ● 実質容量制限なし(PBクラス) ● プロビジョニングする必要なし階層化ポリシーに応じてブロックレベルでどちらかのストレージに保存

Slide 32

Slide 32 text

32 FSxWのスループット料金も良いお値段 https://aws.amazon.com/jp/fsx/windows/pricing/

Slide 33

Slide 33 text

33 ほぼ同じ条件で月額使用料を試算してみる FSxW ● デプロイタイプ : Multi-AZ ● ストレージタイプ : SSD ● ストレージサイズ : 1TB ● 重複排除による削減量 : 65% (プロビジョニングするストレージは350GB) ● スループット : 128MBps ● バックアップストレージ : 100GB FSxN ● デプロイタイプ : Multi-AZ ● ストレージサイズ : 1TB ● キャプールストレージの読み取りリクエスト : 10,000,000 ● キャプールストレージの書き込みリクエスト : 10,000,000 ● SSD IOPS : 3,072 ● SSD のデータ割合 : 20% (SSDの最小値が1TBであるため試算結果に影響しない) ● 圧縮と重複排除による削減量 : 65% ● スループット : 128MBps ● バックアップストレージ : 100GB

Slide 34

Slide 34 text

重複排除を差し引いてもFSxNが安い 34 試算結果 FSxW : 763.07USD FSxN : 566.71USD

Slide 35

Slide 35 text

35 こんな時はFSxNではなくをFSxW使った方が良い ● ファイルシステムのサイズが数十GB ● スループット / IOPSもそこまで求められていない ● 大阪リージョンにバックアップを転送する必要がある ● Multi-AZ構成でオンプレミスからのDirect Connect経由でアクセスが必要だがTransit VIFの用意ができない ● ファイルアクセス監査ログをClowdWatch Logs、Kinesis Data Firehoseに出力したい ● Amazon FSx File Gatewayでキャッシュを置きたい ● Amazon Kendraでインテリジェントな検索をしたい

Slide 36

Slide 36 text

36 なるほどケースバイケースはあるが高性能・高機能なファイルサーバーは FSxNを候補に入れても良さそうだな

Slide 37

Slide 37 text

37 ただファイルサーバー使う予定無いです

Slide 38

Slide 38 text

38 はい FSxNはファイルサーバー用途以外でも使える

Slide 39

Slide 39 text

39 覚えていますか? FSxNはiSCSIにも対応しています

Slide 40

Slide 40 text

40 つまりはボリュームをFSxNに集約することも可能未使用領域が多いEBSボリューム = 無駄な課金が発生使用率10% 使用率50% 使用率30% 使用率60% 使用率20% ボリュームの割り当て量を調整 - 無駄なEBSのコストを削減 - 階層化によるコスト削減 - 重複排除・圧縮による使用量削減

Slide 41

Slide 41 text

41 加えてオリジナルのボリュームから書き込み可能なクローンを高速に作成できる

Slide 42

Slide 42 text

42 本番データを使った検証環境が爆速で準備できる EBSボリュームで準備 FlexCloneで準備本番データを保存している EBS ボリューム検証環境EC2インスタンス EBSボリューム EBSボリューム EBSスナップショットデータのコピーに時間かかるファーストタッチペナルティによる性能劣化スナップショット取得に時間かかる本番と検証併せて課金対象のデータ量が2倍に本番データを保存している FSxNボリューム検証用FSxNボリューム検証環境EC2インスタンス FlexCloneにより瞬時に作成 and 課金対象のデータ量は差分のみ iSCSIにより接続

Slide 43

Slide 43 text

43 つまりは FSxNを上手に使うことで金銭コストと時間コストを減らすことができる

Slide 44

Slide 44 text

44 気になったら PoCで使い勝手を確認しましょう

Slide 45

Slide 45 text

タイトル  2021/10/5  〇〇部氏名  Amazon FSx for NetApp ONTAP ちょっと気になる . . .