Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
キミはAmazon FSx for NetApp ONTAPという 激アツストレージサービスを...
Search
のんピ
April 12, 2023
Technology
1
4.7k
キミはAmazon FSx for NetApp ONTAPという 激アツストレージサービスを知っているか
FSxNの何が激アツなのか、他のストレージサービスと比べた有意点、選定ポイントを紹介します。
のんピ
April 12, 2023
Tweet
Share
More Decks by のんピ
See All by のんピ
コスト最適重視でAurora PostgreSQLのログ分析基盤を作ってみた #jawsug_tokyo
non97
0
430
Aurora PostgreSQLがCloudWatch Logsに 出力するログの課金を削減してみる #jawsdays2025
non97
1
540
VPC間の接続方法を整理してみた #自治体クラウド勉強会
non97
1
1.9k
Amazon FSx for NetApp ONTAPを利用するにあたっての要件整理と設計のポイント
non97
1
420
Amazon FSx for NetApp ONTAPのパフォーマンスチューニング要素をまとめてみた #cm_odyssey #devio2024
non97
0
790
Amazon FSx for Net App ONTAPにおけるファイルシステム/SVM/ボリューム/qtreeの分割の考え方を整理してみる #storagejaws
non97
1
1.2k
オンプレミスネットワークとVPCとを接続する際に考慮すべきポイントを考えてみた #自治体クラウド勉強会
non97
1
6.2k
上手く活用すればコスト削減につながる、ONTAPの Temperature Sensitive Storage Efficiency (TSSE) の紹介
non97
0
680
Amazon FSx for NetApp ONTAPへの移行方法を整理してみた
non97
0
1.6k
Other Decks in Technology
See All in Technology
品質文化を支える小さいクロスファンクショナルなチーム / Cross-functional teams fostering quality culture
toma_sm
0
120
PagerDuty×ポストモーテムで築く障害対応文化/Building a culture of incident response with PagerDuty and postmortems
aeonpeople
1
320
「経験の点」の位置を意識したキャリア形成 / Career development with an awareness of the “point of experience” position
pauli
4
100
ここはMCPの夜明けまえ
nwiizo
28
9.9k
Writing Ruby Scripts with TypeProf
mame
0
180
SnowflakeとDatabricks両方でRAGを構築してみた
kameitomohiro
1
420
MCPを活用した検索システムの作り方/How to implement search systems with MCP #catalks
quiver
12
6.8k
30代からでも遅くない! 内製開発の世界に飛び込み、最前線で戦うLLMアプリ開発エンジニアになろう
minorun365
PRO
11
3.3k
持続可能なドキュメント運用のリアル: 1年間の成果とこれから
akitok_
1
190
Notion x ポストモーテムで広げる組織の学び / Notion x Postmortem
isaoshimizu
1
120
ElixirがHW化され、最新CPU/GPU/NWを過去のものとする数万倍、高速+超省電力化されたWeb/動画配信/AIが動く日
piacerex
0
150
今日からはじめるプラットフォームエンジニアリング
jacopen
4
240
Featured
See All Featured
It's Worth the Effort
3n
184
28k
Building Adaptive Systems
keathley
41
2.5k
Stop Working from a Prison Cell
hatefulcrawdad
268
20k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
47
2.7k
Reflections from 52 weeks, 52 projects
jeffersonlam
349
20k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
29
9.4k
Building Applications with DynamoDB
mza
94
6.3k
Git: the NoSQL Database
bkeepers
PRO
430
65k
The MySQL Ecosystem @ GitHub 2015
samlambert
251
12k
Optimizing for Happiness
mojombo
377
70k
Music & Morning Musume
bryan
47
6.5k
Intergalactic Javascript Robots from Outer Space
tanoku
270
27k
Transcript
キミはAmazon FSx for NetApp ONTAPという 激アツストレージサービスを知っているか 2023/4/11 AWS事業本部 コンサルティング部 のんピ
2 自己紹介 { "本名": "山本 涼太 (覚えなくていいです)", "部署": "AWS事業本部 コンサルティング部",
"前職": "インフラエンジニア in データセンター", "興味のあること": "面白そうなブログネタ探し", "好きなAWSサービス": [ "AWS Transit Gateway", "AWS Step Functions" "Amazon FSx for NetApp ONTAP" ], "称号" : [ "2022 APN ALL AWS Certifications Engineers", "2022 APN AWS Top Engineers (Networking)" ] }
3 知っていますか? Amazon FSx for NetApp ONTAP
タイトル 2021/10/5 〇〇部 氏名 Amazon FSx for NetApp ONTAPへの 愛を語ります
LOVE !
5 というLTをしたことがあるぐらい私は好きです
6 しかし そんなに知名度が伸びていない気がする
7 なので 今から布教活動をします
8 おそらく このセッションを見ると
タイトル 2021/10/5 〇〇部 氏名 Amazon FSx for NetApp ONTAP ちょっと気になる
. . .
10 になると思います
11 Amazon FSx for NetApp ONTAP(以降FSxN) とは NetApp ONTAP のフルマネージドサービス
12 NetApp ONTAP とは NetAppが提供するストレージOS
13 FSxN の特徴的な機能 - マルチプロトコル対応 (NFS / SMB / iSCSI)
- データ保護機能 (Snapshot / SnapMirror / SnapVault) - キャッシュ機能 (FlexCache) - クローン機能 (FlexClone) - Storage Efficiency (重複排除 / 圧縮 / コンパクション) - 動的な階層化 (FabricPool) - マルウェア対策 (Vscan / FPolicy) - 高性能 (4,096 MBps / 160,000 IOPS / 各種キャッシュ)
14 ちょっと待って 機能が多すぎて把握できない
15 大丈夫です 各機能について紹介してい ます DevelopersIOのAmazon FSx for NetApp ONTAPの記事はこちらから
16 なるほど なんとなくスゴい サービスということは分かった
17 でも 使い所がよく分からないな
18 特に Amazon EFS (以降EFS)や Amazon FSx for Windows File
Server (以降FSxW) との使い分けがよく分からないな
19 はい 説明します
20 EFSとFSxN比較編
21 EFSではなくFSxNを使った方が良い場面 常時高パフォーマンスを 出すことが求められる
22 EFSのスループットモードは3種類 1. バーストモード ◦ ファイルシステムのサイズに応じてスループットが拡張 ◦ クレジットを消費してバースト可能 ◦ 追加コストなし
2. プロビジョニングモード ◦ 指定したスループットを一貫して提供 3. エラスティックモード ◦ 必要とするスループットを自動で提供 ◦ 読み書き量(GB)で課金
23 常時高パフォーマンスを出す必要がある場合は プロビジョニングモードを選択 • バーストモード ◦ クレジットが枯渇した場合に性能が出なくなる ▪ ベースラインまで制限される •
エラスティックモード ◦ 性能は最大Readで3GiBps、Writeで1GiBps出る ◦ 読み書き量(GB)で課金されるため、常時読み書きする場合は かなりの金額となる
24 EFSのプロビジョニングモードは良いお値段 https://aws.amazon.com/jp/efs/pricing/
25 FSxNはその約1/5のお値段 https://aws.amazon.com/jp/fsx/netapp-ontap/pricing/
26 ほぼ同じ条件で月額使用料を試算してみる NFS • ストレージタイプ : 標準ストレージ • ストレージサイズ :
1TB • 高頻度アクセスデータの割合 : 20% • スループットモード : プロビジョンドモード • スループット : 128MBps FSxN • デプロイタイプ : Multi-AZ • ストレージサイズ : 1TB • キャプールストレージの読み取りリクエスト : 10,000,000 • キャプールストレージの書き込みリクエスト : 10,000,000 • SSD IOPS : 3,072 • SSD のデータ割合 : 20% • 圧縮と重複排除による削減量 : 65% • スループット : 128MBps • バックアップストレージ : 100GB
ストレージ料金を差し引いてもFSxNが安い 27 試算結果 EFS : 943.88USD FSxN : 566.71USD
28 FSxNではなくをEFS使った方が良い場面 • ファイルシステムのサイズが数GB • ファイルシステムのサイズが大きく増減する可能性がある • 常時高スループット / 高IOPSが求められていない
• 大阪リージョンにバックアップを転送する必要がある • Multi-AZ構成でオンプレミスからのDirect Connect経由で アクセスが必要だがTransit VIFの用意ができない • 手間なくAWS LambdaやAWS Fargateと連携させたい
29 FSxWとFSxN比較編
30 FSxWではなくFSxNを使った方が良い場面 64TB以上のストレージ or 高パフォーマンスを 出すことが求められる
31 FSxWは64TBまでだが、FSxNは実質無制限 プライマリストレージ • SSD • 性能に最適化 • 容量は 1〜192TB
キャパシティプールストレージ • オブジェクトストレージ • プライマリストレージと比較して安価 • 実質容量制限なし(PBクラス) • プロビジョニングする必要なし 階層化ポリシーに応じて ブロックレベルでどちらかのストレージに保存
32 FSxWのスループット料金も良いお値段 https://aws.amazon.com/jp/fsx/windows/pricing/
33 ほぼ同じ条件で月額使用料を試算してみる FSxW • デプロイタイプ : Multi-AZ • ストレージタイプ :
SSD • ストレージサイズ : 1TB • 重複排除による削減量 : 65% (プロビジョニングするストレージは350GB) • スループット : 128MBps • バックアップストレージ : 100GB FSxN • デプロイタイプ : Multi-AZ • ストレージサイズ : 1TB • キャプールストレージの読み取りリクエスト : 10,000,000 • キャプールストレージの書き込みリクエスト : 10,000,000 • SSD IOPS : 3,072 • SSD のデータ割合 : 20% (SSDの最小値が1TBであるため試算結果に影響しない) • 圧縮と重複排除による削減量 : 65% • スループット : 128MBps • バックアップストレージ : 100GB
重複排除を差し引いてもFSxNが安い 34 試算結果 FSxW : 763.07USD FSxN : 566.71USD
35 こんな時はFSxNではなくをFSxW使った方が良い • ファイルシステムのサイズが数十GB • スループット / IOPSもそこまで求められていない • 大阪リージョンにバックアップを転送する必要がある
• Multi-AZ構成でオンプレミスからのDirect Connect経由で アクセスが必要だがTransit VIFの用意ができない • ファイルアクセス監査ログをClowdWatch Logs、Kinesis Data Firehoseに出力したい • Amazon FSx File Gatewayでキャッシュを置きたい • Amazon Kendraでインテリジェントな検索をしたい
36 なるほど ケースバイケースはあるが 高性能・高機能なファイルサーバーは FSxNを候補に入れても良さそうだな
37 ただ ファイルサーバー使う予定無いです
38 はい FSxNはファイルサーバー用途以外でも使える
39 覚えていますか? FSxNはiSCSIにも対応しています
40 つまりは ボリュームをFSxNに集約することも可能 未使用領域が多いEBSボリューム = 無駄な課金が発生 使用率10% 使用率50% 使用率30% 使用率60%
使用率20% ボリュームの割り当て量を調整 - 無駄なEBSのコストを削減 - 階層化によるコスト削減 - 重複排除・圧縮による使用量削減
41 加えて オリジナルのボリュームから書き込み可能なク ローンを高速に作成できる
42 本番データを使った検証環境が爆速で準備できる EBSボリュームで準備 FlexCloneで準備 本番データを保存している EBS ボリューム 検証環境EC2インスタンス EBSボリューム EBSボリューム
EBSスナップショット データのコピーに時間かかる ファーストタッチ ペナルティによる性能劣化 スナップショット取得に時 間かかる 本番と検証併せて課金対象の データ量が2倍に 本番データを保存している FSxNボリューム 検証用FSxNボリューム 検証環境EC2インスタンス FlexCloneにより瞬時に作成 and 課金対象のデータ量は差分のみ iSCSIにより接続
43 つまりは FSxNを上手に使うことで 金銭コストと時間コストを 減らすことができる
44 気になったら PoCで使い勝手を確認しましょう
タイトル 2021/10/5 〇〇部 氏名 Amazon FSx for NetApp ONTAP ちょっと気になる
. . .
46 になりましたか?
47