Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
MySQLで高トラフィックに立ち向かう
Search
takashabe
January 15, 2015
Technology
0
1.7k
MySQLで高トラフィックに立ち向かう
社内LT大会#2で話した内容です。
takashabe
January 15, 2015
Tweet
Share
More Decks by takashabe
See All by takashabe
より良いターミナルでの生活を求めて
takashabe
0
21
OpenCensusでcustom context propagationとexporterを書いた話 / OpenCensus with custom context propagation and exporter
takashabe
0
1.5k
pubsub with concurrent
takashabe
1
840
社内ISUCONを開催した話
takashabe
0
1.5k
ISUCON大反省会
takashabe
0
1.8k
gitのブランチ戦略
takashabe
8
5.7k
サルでもわかるgit
takashabe
0
1.3k
playで複数DBする
takashabe
0
1.6k
GitHubの良さ
takashabe
2
2.2k
Other Decks in Technology
See All in Technology
プロダクトチームへのSystem Risk Records導入・運用事例の紹介/Introduction and Case Studies on Implementing and Operating System Risk Records for Product Teams
taddy_919
1
160
Java x Spring Boot Warm up
kazu_kichi_67
2
480
サイバーエージェントにおける生成AIのリスキリング施策の取り組み / cyber-ai-reskilling
cyberagentdevelopers
PRO
2
180
カメラを用いた店内計測におけるオプトインの仕組みの実現 / ai-optin-camera
cyberagentdevelopers
PRO
1
120
Gradle: The Build System That Loves To Hate You
aurimas
2
140
生成AIの強みと弱みを理解して、生成AIがもたらすパワーをプロダクトの価値へ繋げるために実践したこと / advance-ai-generating
cyberagentdevelopers
PRO
1
170
visionOSでの空間表現実装とImmersive Video表示について / ai-immersive-visionos
cyberagentdevelopers
PRO
1
100
大規模データ基盤チームのオンプレTiDB運用への挑戦 / dpu-tidb
cyberagentdevelopers
PRO
1
110
コンテンツを支える 若手ゲームクリエイターの アートディレクションの事例紹介 / cagamefi-game
cyberagentdevelopers
PRO
1
110
AIを駆使したゲーム開発戦略: 新設AI組織の取り組み / sge-ai-strategy
cyberagentdevelopers
PRO
1
130
omakaseしないための.rubocop.yml のつくりかた / How to Build Your .rubocop.yml to Avoid Omakase #kaigionrails
linkers_tech
3
680
Aurora_BlueGreenDeploymentsやってみた
tsukasa_ishimaru
1
120
Featured
See All Featured
Understanding Cognitive Biases in Performance Measurement
bluesmoon
26
1.4k
Being A Developer After 40
akosma
86
590k
Ruby is Unlike a Banana
tanoku
96
11k
Product Roadmaps are Hard
iamctodd
PRO
48
10k
Designing the Hi-DPI Web
ddemaree
280
34k
It's Worth the Effort
3n
183
27k
Put a Button on it: Removing Barriers to Going Fast.
kastner
59
3.5k
Building Flexible Design Systems
yeseniaperezcruz
327
38k
Art, The Web, and Tiny UX
lynnandtonic
296
20k
Automating Front-end Workflow
addyosmani
1365
200k
Faster Mobile Websites
deanohume
304
30k
Agile that works and the tools we love
rasmusluckow
327
21k
Transcript
MySQLで高トラフィックに立ち向かう LT大会#2 Takashi Abe Mynet Inc. 01/15 2015
前提 InnoDB MySQL以外の話もちょっとします 特定のサービス特性にフォーカスするものではありま せんが、ソーシャルゲームをベースにして話します
DBサーバへのトラフィック 参照系クエリ select 更新系クエリ insert, update, delete
よくある最小構成
参照系への負荷対策
スケールアップ 金の弾丸 ioDrive
スケールアウト スレーブの追加 MySQLのレプリケーション機能でマスタのデータを複製する キャッシュレイヤの追加 memcached, RedisなどのKVSを利用する 参照性能はRDBに比べて桁違いに良い 参照頻度の高いデータをメインにキャッシュに乗せる カードステータスなどのマスタデータ ユーザのニックネーム
スケールアウトした構成
更新系への負荷対策
スケールアップ 金の弾丸 ioDrive メモリガン積み インメモリならioDriveと同等以上の性能が出る Amazon RDSの場合最大244GBまで拡張可能
スケールアウト マスタの分割 DB、テーブルを複数サーバに分割し、クエリに応じて 動的に問合せ先サーバを選択する 分割方式より垂直分割/水平分割がある アプリケーション側での実装が多い
垂直分割
垂直分割 関係性の薄いデータをそれぞれ異なるDBに分散 接続先DBを変えるだけなので大して実装コストはそれ ほどない、はず (例) ユーザデータ系 ログ系 マスタデータ系
垂直分割イメージ
水平分割
水平分割 複数サーバで同じDBを用意し、キーとなるデータによっ て格納先を分割する DB名から一意に格納先のテーブルを特定出来ないの でサーバ振り分けの実装が重くなりがち キーの余剰、ハッシュ値などによって分割を行う
水平分割 分割例 userテーブル、user_idをキーにして分割する user_idを100で割った余剰をテーブル名のサフィック スにする user_00 ~ user_99のテーブルに分割可能 サーバA: user_00
~ user_49 サーバB: user_50 ~ user_99
水平分割イメージ
スケールアウトした構成
分割するタイミング 設計、制約がきついため途中から分割しようとするのは つらい スモールスタートする場合、最初から分割しておいて分 割された各DBを1台に格納しておく戦略もアリ 分割されてさえいれば、後から別サーバに乗せること も容易になる
注意点 異なるDBに格納されるのでjoinが使えなくなる 水平分割の場合 分割すればするほどパフォーマンス低下 串刺しで検索したい時など トランザクションが煩雑になる
まとめ
参照系 マスタスレーブ+KVSの鉄板構成 後からでもスケールアウトは比較的容易 更新系 垂直、水平分割でマスタへのトラフィックを分散させる 後からスケールアウトするのがつらいのでプロジェク トの始めに方針を検討する