Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
スケールアウトできるManaged RDBMS - Azure Cosmos DB for PostgreSQL
Search
Kuniteru Asami
December 01, 2022
Technology
0
24
スケールアウトできるManaged RDBMS - Azure Cosmos DB for PostgreSQL
2022/11/17 - 第41回 JAZUG Night
先日リリースされたAzure Cosmos DB for PostgreSQLの紹介です
Kuniteru Asami
December 01, 2022
Tweet
Share
More Decks by Kuniteru Asami
See All by Kuniteru Asami
どう買う?Azure
kuniteru
1
250
現場からみた Azure リファレンスアーキテクチャ答え合わせ | Microsoft Build 2022
kuniteru
1
5
Azure Load Testingを利用したパフォーマンステスト
kuniteru
1
10
Understanding Azure Application Gateway
kuniteru
0
7
堅牢&運用楽々な WordPress を Azure App Service で
kuniteru
0
11
Azure PaaS とのよりセキュアな接続 - 初級編
kuniteru
0
6
あらためて Azure Virtual Network
kuniteru
0
6
Azure Virtual Machines設計の勘所 | Microsoft Tech Summit 2017
kuniteru
1
7
Introduction of Azure Database for MySQL / PostgreSQL
kuniteru
0
9
Other Decks in Technology
See All in Technology
社内アプリで Cloudflare D1を プロダクト運用してみた体験談(Tokyo)
haochenx
0
130
LangSmith入門―トレース/評価/プロンプト管理などを担うLLMアプリ開発プラットフォーム
os1ma
5
780
しくじり先生、PharmaXのLLMアプリケーション開発の失敗を語る
pharma_x_tech
0
120
CockroachDB はどのくらい「しぶとい」のか? / How tough is CockroachDB?
kota2and3kan
5
3.4k
IaCジェネレーターとBedrockで詳細設計書を生成してみた
tsukasa_ishimaru
4
940
認知症フレンドリーテックとスタックチャン
naokiuc
0
360
uvを使ってストレスフリーな Python開発をしよう!
r74tech
0
250
【SORACOM UG 東海】あらゆるモノがつながる社会へ、IoT と SORACOM
soracom
PRO
1
160
生成AIの変革の時代に、直近1年で直面した課題とその解決策
ktc_wada
1
760
[2024/04/23]tbls活用事例 〜 ビューポイントから データベースを整理してみた話 〜
tosite
0
110
Documentação de Produtos: Artefatos essenciais na prática
rigolon
1
190
家族アルバム みてねにおけるGrafana活用術 / Grafana Meetup Japan Vol.1 LT
isaoshimizu
1
1.1k
Featured
See All Featured
The Power of CSS Pseudo Elements
geoffreycrofte
62
5k
How GitHub Uses GitHub to Build GitHub
holman
468
290k
Adopting Sorbet at Scale
ufuk
69
8.6k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
22
1.4k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
34
6.1k
Large-scale JavaScript Application Architecture
addyosmani
504
110k
The Cult of Friendly URLs
andyhume
74
5.7k
Designing on Purpose - Digital PM Summit 2013
jponch
111
6.5k
The Invisible Side of Design
smashingmag
294
49k
Unsuck your backbone
ammeep
664
57k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
14
8.4k
XXLCSS - How to scale CSS and keep your sanity
sugarenia
242
1.2M
Transcript
スケールアウトできる Managed RDBMS Azure Cosmos DB for PostgreSQL 2022/11/17 –
第41回 JAZUG Night 株式会社 pnop / Cloudlive 株式会社 浅見 城輝
♥BEER About me kuniteru.asami Find me Database Microsoft Azure 2012~
Microsoft Azure
株式会社pnop 株式会社 pnop は Microsoft Azure に関する課題解決のプロフェッショナル集団です。 皆様のプロジェクトに、 Azure経験豊富なエンジニアがノウハウを提供いたします。 Azure
アーキテクチャ 設計相談 Azure 運用設計 相談 Azure開発 Azure 環境構築 Azure トラブル シューティング Azure トレーニング 新規システムを Azureで稼働させしたい 既存システムを Azureに移行したい パッケージ・ソリューションをAzure に対応したい Azureを利用することで システムコストを下げたい Azureで安全・安心な システムを提供したい Azureを利用することで 運用担当者の負担を軽減したい Azureを利用しているうえで 困っていることを解決したい Azureのスキルを向上したい Azureに関するご相談・お問い合わせ:
[email protected]
https://www.pnop.co.jp
注意事項 このスライドは 2022 年 11 月 17 日 時点の情報を 基にしています
Agenda Azure Cosmos DB for PostgreSQL とは Citus のテーブル型
Azure Cosmos DB for PostgreSQL とは
分散クエリ実行や 高性能なスケールアウトを備えた フルマネージドな PostgreSQL
特徴 スケールアウトできる RDBMS 並列化による 20 倍 から 300 倍以上の 高パフォーマンス
グローバル レプリケーション 列指向ストレージ対応 Citus エクステンション フルマネージド ネイティブ PostgreSQL
ベンチマーク https://techcommunity.microsoft.com/t5/azure-database-for-postgresql/how-to-benchmark-performance-of-citus-and-postgres-with-hammerdb/ba-p/3254918
アーキテクチャ 一つの Coordinator ノードと、複数の Worker ノードで構成される Coordinator ノード クライアントアプリケーションからの接続を受け付ける 分散テーブルや参照テーブルのメタデータと通常のテーブルやその他の
PostgreSQL オブジェクトを保持 分散テーブル、参照テーブルの要求を受けた場合は、対象の Worker ノードに SQL クエリを送信 Worker ノード 通常の PostgreSQL テーブルとして分散テーブル、参照テーブルのデータを保持 https://github.com/citusdata/citus
Citus のテーブル型 分散テーブル 参照テーブル ローカル テーブル
分散テーブル 分散テーブルは、テーブル毎にシャードキー列を指定してユーザーが作成する デフォルトでは 32 のシャードに分割され、Worker ノードに格納される シャード数が Worker ノード数の倍数ではない場合、ノードによってシャード数は異なる SELECT
create_distributed_table('table_name', 'distribution_column'); https://www.citusdata.com/product#citus-diagram
分散テーブルの併置(コロケーション) 異なる Worker ノードをまたいだ Join 操作はできない それを避けるため、異なるテーブル間で、シャードキー値が 同じ場合、同一の Worker ノードに配置させることにより、
Worker ノード内で Join を済ませることができる https://learn.microsoft.com/ja-jp/azure/cosmos-db/postgresql/quickstart-build-scalable-apps-concepts#colocation
参照テーブル すべての Worker ノードに全データが複製されるテーブル ディメンションテーブル(マスタテーブル)に向いている Worker ノードに参照テーブルを作成する SELECT create_reference_table('table_name'); ローカル
テーブル 分散テーブルにも参照テーブルにもしていないテーブルは、 Coordinator ノードで通常の PostgreSQL テーブルとなる ローカルテーブルと分散テーブルとの Join 操作は可能
スケールアウト スケールアウトして Worker ノードを増やしても、 自動では分散テーブルの再配置はされないため、 ユーザー(DB管理者)自身で再配置を実施する オンラインで再配置を実行でき、他のトランザクションが ブロックされるのはメタデータを更新する一瞬だけ SELECT rebalance_table_shards('table_name');
まとめ Azure Cosmos DB for PostgreSQL は、分散クエリ実行や 高性能なスケールアウトを備えたフルマネージドな PostgreSQL 分散クエリやスケールアウトの恩恵を受けるには、テーブル毎
に設定が必要 パフォーマンスを上げるために、分散テーブルのシャードキー を何にするかが重要 異なる Worker ノードをまたいだ Join 操作はできないため、 コロケーション(併置)をする スケールアウトしたら、分散テーブルの再配置を実施する
参考資料 Azure Cosmos DB for PostgreSQL documentation https://learn.microsoft.com/ja-jp/azure/cosmos-db/postgresql/ citusdata https://www.citusdata.com/
GitHub - citusdata / citus https://github.com/citusdata/citus Azure Cosmos DB: Liftoff https://learn.microsoft.com/en-us/events/azure-cosmos-db-liftoff/ Citus Con: An Event for Postgres 2022 https://www.citusdata.com/cituscon/2022/schedule
http://www.pnop.co.jp/