Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Jaws 20251018 彩の国埼玉支部
Search
tarekatsu
October 18, 2025
0
110
Jaws 20251018 彩の国埼玉支部
tarekatsu
October 18, 2025
Tweet
Share
More Decks by tarekatsu
See All by tarekatsu
社会人一年目?エンジニアのJAWS-UGでの歩みとこれから
tarekatsu
2
120
エスカレーターからの大転落 大学院卒業後の空白の一年
tarekatsu
2
270
“作ってみたいを形に”今の時代だからこそできる!クラウド×AIで機能マシマシクラウドストレージを構築してみた!
tarekatsu
0
130
“来年のこそは参加したい!”今年のSummitと来年に向けて
tarekatsu
0
64
新卒エンジニア?がAWS認定資格の取得で得られたものと現在の自分
tarekatsu
2
240
Featured
See All Featured
Leading Effective Engineering Teams in the AI Era
addyosmani
9
1.1k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
24
1.5k
Scaling GitHub
holman
463
140k
Being A Developer After 40
akosma
91
590k
The Cost Of JavaScript in 2023
addyosmani
55
9.2k
The Art of Delivering Value - GDevCon NA Keynote
reverentgeek
16
1.7k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.5k
BBQ
matthewcrist
89
9.9k
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
117
20k
Facilitating Awesome Meetings
lara
57
6.6k
Imperfection Machines: The Place of Print at Facebook
scottboms
269
13k
Designing Experiences People Love
moore
142
24k
Transcript
2025/10/18 ΠϨϒϯφΠϯΛ͑Ζʂ ࡾྲྀΦϒδΣΫτετϨʔδͰԽΛ ਤͬͯΈͨ 2025/10/18() JAWS-UG ࠼ͷࠃ࡛ۄࢧ෦ λϨΧπ 1
2025/10/18 ग़ɿେࡕ౦େࡕࢢ ࣄɿؔͰSIerͷاۀʹ৽ଔೖࣾ(ݱࡏݚमத) ܦྺɿࣾձਓҰ,৽ଔೋ(͍ͯ͋͛ͯͩ͘͠͞) झຯɿೣͱ༡Ϳɺॊज़ɺ͓ञ Xɿ@tarekatsu_eng λϨΧπ ࣗݾհ 2
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
DataSync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 3
2025/10/18 ࠓͷ༰ • ࡾͭͷΦϒδΣΫτετϨʔδͰσʔλಉظͬͯΈͨ ͡Ίʹ 4 Amazon S3 Azure Blob
Storage Ceph(オンプレ/RADOS Gateway) • ϚϧνΫϥυʴϋΠϒϦουΫϥυߏΛࢼͯ͠ײͨ͜͡ͱ
2025/10/18 ҙॻ͖ ͡Ίʹ 5 ご指摘などございましたら、 ツッコミや愛のムチはお待ちしております!
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
DataSync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 6
2025/10/18 σʔλʹର͢Δةػײ ܦҢ 7 最近⾃宅サーバおばあちゃん家サーバの ディスクが破損し、データの取り扱いに 危機感を覚えるように ⾃⾝のシステムのS3のデータに対して、S3のデータ耐久性 (イレブンナイン)に対して更に耐久性を持たせたい ※イレブンナインは
あくまでもS3のデー タ耐久性 ※Azureの冗⻑性オプ ションでは、データ の持続性という形で リージョン間を跨ぐ ⽅法なら16ナインで 記載されている
2025/10/18 ిࢠ໊γεςϜ • 現在自作の電子名刺システムを利用中 • ページの表示データをS3に保存 Ø ࠓճͷσʔλԽʹϐολϦͳͷͰʁ ܦҢ 8
参考
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
DataSync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 9
2025/10/18 γεςϜߏ 10 • オブジェクトストレージ+CDNサービスを 利⽤して静的ページの表⽰ • 名前解決はRoute 53で解決 •
フェイルオーバールーティング
2025/10/18 γεςϜߏ 11 • ローカルオブジェクトストレージの データを各クラウドに転送 ü 定期的にOSSのRcloneを⽤いて データの転送を実⾏ ü
OSS分散ストレージCephを使⽤ • Ceph Object GatewayがS3互換の APIを提供
2025/10/18 γεςϜߏ 12 • ローカルが停⽌した時に、緊急⽤の アカウントを作成 ü 本当はアップロードした ユーザから判定してデータ転送を ⾏いたかった
ü AWS DataSyncを⽤いて データ転送(⾚⽮印) EventBridgeで Lambdaを 呼び出して DataSyncの実⾏
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
DataSync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 13
2025/10/18 DataSync • AWSやAWSからのデータの転送を安全に簡単に移行するためのサービス ü Azureに対してのロケーションの設定はコンテナURLとSASトークンの設定 • 移行の対象は下記に記載 σʔλసૹ 14
https://docs.aws.amazon.com/ja_jp/datasync/latest/userguide/what-is-datasync.html
2025/10/18 DataSync • スケジュールで設定するか好きなタイミングでタスクを実行 • エージェント(VMで準備)が必要な場合と不必要なケース ※ 5月のアップデートでS3とBlob Strageのデータ転送に エージェントが必要なしに
σʔλసૹ 15 https://docs.aws.amazon.com/ja_jp/datasync/latest/userguide/do-i-need-datasync-agent.html https://aws.amazon.com/jp/about-aws/whats-new/2025/05/aws-datasync-accelerates-cross-cloud-data-transfers/
2025/10/18 Rclone • ΫϥυετϨʔδ্ͷσʔλΛཧ͢ΔίϚϯυϥΠϯͷπʔϧ • rsyncʹணΛಘͨGoݴޠͰॻ͔ΕͨOSS • UNIXίϚϯυrsyncɺcpɺmvɺmountɺlsɺncduɺtreeɺrmɺcat ʹ૬͢ΔΫϥυετϨʔδ൛ͷػೳΛ࣋ͭ σʔλసૹ
16 https://rclone.org/ …
2025/10/18 Rclone • ԼਤͷΑ͏ʹखॱʹԊͬͯɺϦϞʔτͷઃఆΛߦ͏͜ͱ͕Ͱ͖Δ • ίϚϯυͰετϨʔδʹରͯ͠ૢ࡞Λߦ͏͜ͱ͕Ͱ͖Δ σʔλసૹ 17 https://rclone.org/
2025/10/18 Rclone σʔλసૹ 18 https://docs.aws.amazon.com/ja_jp/prescriptive-guidance/latest/patterns/migrate-data-from-microsoft-azure-blob-to- amazon-s3-by-using-rclone.html#migrate-data-from-microsoft-azure-blob-to-amazon-s3-by-using-rclone-best-practices
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
Data Sync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 19
2025/10/18 ࠓճͷߏʹରͯ͠ • マルチクラウドやローカルの部分に目を向けることの重要性を感じている • ただ、環境が増えることにより大変と感じることが多かった • 学習コスト • 選択肢の増加(メリットでもある)
• セキュリティ • etc... ײͨ͜͡ͱ 20 だからこそ今から意識しておきたい
2025/10/18 ࣗʹର͢Δποίϛ • 今回本当にマルチクラウド構成にする必要ありますか? • 自身の変な要望に振り回されてませんか? • 今回のシステムでは必要ない気が… • コストもかかってしまった
ײͨ͜͡ͱ 21 構成を考える際に、 本当に必要かというとを検討したい
2025/10/18 • ͡Ίʹ • ܦҢ • γεςϜߏ • σʔλసૹ •
Data Sync • Rclone • ײͨ͜͡ͱ • ·ͱΊ ࣍ 22
2025/10/18 p 自身の使用中の電子名刺のシステムをϚϧνΫϥυʴϋΠϒϦου ΫϥυߏͰࢼͯ͠Έͨ p マルチクラウド構成は更に考えることが増える p だからこそ今から意識はしていきたい p 本当に必要な構成かどうかを検討したい
·ͱΊ 23