AWS初心者がS3バケット作ってみた件

2024年11月29日に開催された、「おもにクラウドの話してます - 広島 #4 in 共創ラボ LINKSPARK広島」で発表したスライドです。

イベント詳細 : https://omoni-cloud.connpass.com/event/333864/

Transcript

1. 初心者が S3バケット作ってみた件 おもにクラウドの話してます#4 - ナカオクタカヒロ
2. ナカオク タカヒロ 仕事 : ネットワーク作る人 最初に触ったAWSサービス : Elemental MediaLive コミュニティ クラウド資格 AZ-104 AZ-900
3. https://unityroom.com/users/kamera25
4. おことわり ・本資料にはWebから引用をしている、画像や資料などがあります。 　引用元はURLで示しているので、正しい情報についてはそちらをご確認ください。 ・本資料は個人の見解に基づき作成されたものであり、 所属する組織の見解 や 代表する内容 ではございません。 ・引用以外の情報は クリエイティブコモンズ -表示 4.0 国際 (CC BY 4.0)でご利用いただけます。 ・この情報は2024年12月8日時点の情報となります。
5. Amazon S3 Simple Service Strage
6. https://aws.amazon.com/jp/s3/
7. 最初(大学生の頃)の印象 WebDAVとなにが違うん？
8. S3 Webのプロトコル(？) Amazonの超技術で作られた クラウドの上で動作する SLA 99.99999999%の Web?ベースのストレージ
9. https://dnobori.cyber.ipa.go.jp/ppt/download/20230610_soumu/230610%20%E8%AC%9B%E6%BC%94%20%E7%AC%AC1%E9%83%A8% 20(%E7%99%BB)%20-%20%E3%83%97%E3%83%AC%E3%82%BC%E3%83%B3%E8%B3%87%E6%96%99.pdf
10. S3 Webのプロトコル(？) Amazonの超技術で作られた クラウドの上で動作する SLA 99.99999999%の Web?ベースのストレージ クラウドへの理解が無い　＝　 恐怖 SIerさんのクラウド恐怖事例集 ☝ クラウド破産、権限ミスのセキュリティインシデント、 魔法の呪文のようなリファレンス
11. https://docs.aws.amazon.com/ja_jp/AmazonS3/latest/userguide/Welcome.html
12. https://docs.aws.amazon.com/ja_jp/AmazonS3/latest/userguide/Welcome.html 実際に検証してみよう
13. AWSCLIをインストールします。
14. お馴染み WireShark を起動します。
15. ※お詫び : 検証のため、本番のS3を用いずにクローンサーバで確認しました。 パケットキャプチャ AWSCLI s3 cp test01.txt s3://aaa S3
16. ☝
17. 80/tcp S3 ※お詫び : 検証のため、本番のS3を用いずにクローンサーバで確認しました。 パケットキャプチャ AWSCLI s3 cp test01.txt s3://aaa Webサーバ ☝
18. ☝
20. クライアント HTTPリクエスト サーバ HTTPレスポンス
21. クライアント HTTPリクエスト サーバ HTTPレスポンス HTTP PUT パス/日付/ファイル長/認証データ等 スペース データ(メッセージボディ) 200 OK ETAG (データのMD5SUM値) 日付 ・内部ストレージへ データの保存 ・MD5SUMの計算
22. クライアント HTTPリクエスト サーバ HTTPレスポンス HTTP PUT パス/日付/ファイル長/認証データ等 スペース データ(メッセージボディ) 200 OK ETAG (データのMD5SUM値) 日付 ・内部ストレージへ データの保存 ・MD5SUMの計算 ぶち、シンプルじゃ！！
23. 80/tcp AWSCLI ワシだぞん S3 with ncコマンド ファイル保存して MD5SUMを返せば 楽勝w ☝ クライアント HTTPリクエスト サーバ HTTPレスポンス
24. 80/tcp AWSCLI ワシだぞん S3 with ncコマンド ファイル保存して MD5SUMを返せば 楽勝w ☝ クライアント HTTPリクエスト サーバ HTTPレスポンス 俺が S3 だ！
26. S3サーバ作りたい！
27. 雑ネットワークプログラムを書こう！
28. 雑ネットワークプログラム 鉄の掟とは？ ・エラーハンドリングしない 　　→minioを作りたい訳では無い、四角い車輪を作りたいだけ。 ・分からない応答がきたら、RSTを投げて強制切断 　　→既読スルーじゃないだけ温かみがある ・暗号化しない 　　→平文でOK ・認証と認可の処理をしない 　　→全世界、性善説でいきましょう。 ・非同期で書かない 　　→困らないのであれば。 ・得意な言語 や環境で書く 　　→カッコつけて、不慣れな言語 (私ならRustとか)で書かない。 ・インターネットに公開しない(最重要) 　　→インターネットや NGNで公開したい？ Amazon S3使いなさい！
29. お馴染み Unity でS3サーバを作っていきます。
30. Webブラウザ Webサーバ (Unity) Step1 : Webサーバを作る
31. SQLite(Unity) Step2 : データベースを構築する
32. レスポンス表示 +内部でMD5SUMの計算 Step3 : AWSCLIに正常応答を返す スクリプト AWSCLI - 受信OK
33. データベース(SQLite)の Select * Step4 : データベースに受信したデータを突っ込む AWSCLI - ファイル送信OK
34. コードは200行程度！！
35. データベース(SQLite)の Select * Step4 : データベースに受信したデータを突っ込む AWSCLI - 受信OK 完成！
36. S3 Webのプロトコル(？) Amazonの超技術で作られた クラウドの上で動作する SLA 99.99999999%の Web?ベースのストレージ
37. 80 や 443/tcp S3 AWSCLI s3 cp test01.txt s3://aaa Webサーバ ロードバランサ データベースサーバ 世界規模の分散型のすごいやつ WAF IAM的な制御をやる ポリシーサーバ (たぶんnotAD) AWSネットワーク (ホワイトボックス的な ) CloudWatch的 なサーバ キャッシュ サーバ
38. 80 や 443/tcp S3 AWSCLI s3 cp test01.txt s3://aaa Webサーバ ロードバランサ データベースサーバ 世界規模の分散型のすごいやつ WAF IAM的な制御をやる ポリシーサーバ (たぶんnotAD) AWSネットワーク (ホワイトボックス的な ) CloudWatch的 なサーバ キャッシュ サーバ 車輪を作ると、解像度が上がる
39. https://dnobori.cyber.ipa.go.jp/ppt/download/20230610_soumu/230610%20%E8%AC%9B%E6%BC%94%20%E7%AC%AC1%E9%83%A8% 20(%E7%99%BB)%20-%20%E3%83%97%E3%83%AC%E3%82%BC%E3%83%B3%E8%B3%87%E6%96%99.pdf
40. まとめ Wireshark と nc で 君も今日から S3だ！ S3はプロトコルまでシンプルだった！ 簡単なS3サーバからを作ってみましょう！
41. 初心者が S3バケット作ってみた件 おもにクラウドの話してます#4 - ナカオクタカヒロ で
42. 来年1月 ゲームジャムを開催します！ よろしくお願いします〜 https://hirouni.connpass.com/event/325586/ 宣伝！