Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Jaws 20251018 彩の国埼玉支部
Search
tarekatsu
October 18, 2025
0
82
Jaws 20251018 彩の国埼玉支部
tarekatsu
October 18, 2025
Tweet
Share
More Decks by tarekatsu
See All by tarekatsu
“作ってみたいを形に”今の時代だからこそできる!クラウド×AIで機能マシマシクラウドストレージを構築してみた!
tarekatsu
0
130
“来年のこそは参加したい!”今年のSummitと来年に向けて
tarekatsu
0
63
新卒エンジニア?がAWS認定資格の取得で得られたものと現在の自分
tarekatsu
2
230
Featured
See All Featured
Understanding Cognitive Biases in Performance Measurement
bluesmoon
31
2.7k
Bash Introduction
62gerente
615
210k
Agile that works and the tools we love
rasmusluckow
331
21k
Speed Design
sergeychernyshev
32
1.2k
Raft: Consensus for Rubyists
vanstee
140
7.2k
Balancing Empowerment & Direction
lara
5
700
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
31
9.7k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
35
3.2k
Automating Front-end Workflow
addyosmani
1371
200k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
127
54k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
253
22k
Become a Pro
speakerdeck
PRO
29
5.6k
Transcript
2025/10/18 ΠϨϒϯφΠϯΛ͑Ζʂ ࡾྲྀΦϒδΣΫτετϨʔδͰԽΛ ਤͬͯΈͨ 2025/10/18() JAWS-UG ࠼ͷࠃ࡛ۄࢧ෦ λϨΧπ 1
2025/10/18 ग़ɿେࡕ౦େࡕࢢ ࣄɿؔͰSIerͷاۀʹ৽ଔೖࣾ(ݱࡏݚमத) ܦྺɿࣾձਓҰ,৽ଔೋ(͍ͯ͋͛ͯͩ͘͠͞) झຯɿೣͱ༡Ϳɺॊज़ɺ͓ञ Xɿ@tarekatsu_eng λϨΧπ ࣗݾհ 2
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
DataSync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 3
2025/10/18 ࠓͷ༰ • ࡾͭͷΦϒδΣΫτετϨʔδͰσʔλಉظͬͯΈͨ ͡Ίʹ 4 Amazon S3 Azure Blob
Storage Ceph(オンプレ/RADOS Gateway) • ϚϧνΫϥυʴϋΠϒϦουΫϥυߏΛࢼͯ͠ײͨ͜͡ͱ
2025/10/18 ҙॻ͖ ͡Ίʹ 5 ご指摘などございましたら、 ツッコミや愛のムチはお待ちしております!
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
DataSync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 6
2025/10/18 σʔλʹର͢Δةػײ ܦҢ 7 最近⾃宅サーバおばあちゃん家サーバの ディスクが破損し、データの取り扱いに 危機感を覚えるように ⾃⾝のシステムのS3のデータに対して、S3のデータ耐久性 (イレブンナイン)に対して更に耐久性を持たせたい ※イレブンナインは
あくまでもS3のデー タ耐久性 ※Azureの冗⻑性オプ ションでは、データ の持続性という形で リージョン間を跨ぐ ⽅法なら16ナインで 記載されている
2025/10/18 ిࢠ໊γεςϜ • 現在自作の電子名刺システムを利用中 • ページの表示データをS3に保存 Ø ࠓճͷσʔλԽʹϐολϦͳͷͰʁ ܦҢ 8
参考
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
DataSync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 9
2025/10/18 γεςϜߏ 10 • オブジェクトストレージ+CDNサービスを 利⽤して静的ページの表⽰ • 名前解決はRoute 53で解決 •
フェイルオーバールーティング
2025/10/18 γεςϜߏ 11 • ローカルオブジェクトストレージの データを各クラウドに転送 ü 定期的にOSSのRcloneを⽤いて データの転送を実⾏ ü
OSS分散ストレージCephを使⽤ • Ceph Object GatewayがS3互換の APIを提供
2025/10/18 γεςϜߏ 12 • ローカルが停⽌した時に、緊急⽤の アカウントを作成 ü 本当はアップロードした ユーザから判定してデータ転送を ⾏いたかった
ü AWS DataSyncを⽤いて データ転送(⾚⽮印) EventBridgeで Lambdaを 呼び出して DataSyncの実⾏
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
DataSync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 13
2025/10/18 DataSync • AWSやAWSからのデータの転送を安全に簡単に移行するためのサービス ü Azureに対してのロケーションの設定はコンテナURLとSASトークンの設定 • 移行の対象は下記に記載 σʔλసૹ 14
https://docs.aws.amazon.com/ja_jp/datasync/latest/userguide/what-is-datasync.html
2025/10/18 DataSync • スケジュールで設定するか好きなタイミングでタスクを実行 • エージェント(VMで準備)が必要な場合と不必要なケース ※ 5月のアップデートでS3とBlob Strageのデータ転送に エージェントが必要なしに
σʔλసૹ 15 https://docs.aws.amazon.com/ja_jp/datasync/latest/userguide/do-i-need-datasync-agent.html https://aws.amazon.com/jp/about-aws/whats-new/2025/05/aws-datasync-accelerates-cross-cloud-data-transfers/
2025/10/18 Rclone • ΫϥυετϨʔδ্ͷσʔλΛཧ͢ΔίϚϯυϥΠϯͷπʔϧ • rsyncʹணΛಘͨGoݴޠͰॻ͔ΕͨOSS • UNIXίϚϯυrsyncɺcpɺmvɺmountɺlsɺncduɺtreeɺrmɺcat ʹ૬͢ΔΫϥυετϨʔδ൛ͷػೳΛ࣋ͭ σʔλసૹ
16 https://rclone.org/ …
2025/10/18 Rclone • ԼਤͷΑ͏ʹखॱʹԊͬͯɺϦϞʔτͷઃఆΛߦ͏͜ͱ͕Ͱ͖Δ • ίϚϯυͰετϨʔδʹରͯ͠ૢ࡞Λߦ͏͜ͱ͕Ͱ͖Δ σʔλసૹ 17 https://rclone.org/
2025/10/18 Rclone σʔλసૹ 18 https://docs.aws.amazon.com/ja_jp/prescriptive-guidance/latest/patterns/migrate-data-from-microsoft-azure-blob-to- amazon-s3-by-using-rclone.html#migrate-data-from-microsoft-azure-blob-to-amazon-s3-by-using-rclone-best-practices
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
Data Sync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 19
2025/10/18 ࠓճͷߏʹରͯ͠ • マルチクラウドやローカルの部分に目を向けることの重要性を感じている • ただ、環境が増えることにより大変と感じることが多かった • 学習コスト • 選択肢の増加(メリットでもある)
• セキュリティ • etc... ײͨ͜͡ͱ 20 だからこそ今から意識しておきたい
2025/10/18 ࣗʹର͢Δποίϛ • 今回本当にマルチクラウド構成にする必要ありますか? • 自身の変な要望に振り回されてませんか? • 今回のシステムでは必要ない気が… • コストもかかってしまった
ײͨ͜͡ͱ 21 構成を考える際に、 本当に必要かというとを検討したい
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
Data Sync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 22
2025/10/18 p 自身の使用中の電子名刺のシステムをϚϧνΫϥυʴϋΠϒϦου ΫϥυߏͰࢼͯ͠Έͨ p マルチクラウド構成は更に考えることが増える p だからこそ今から意識はしていきたい p 本当に必要な構成かどうかを検討したい
·ͱΊ 23