シャーディング– tag –
-
システム設計 深掘り
レプリケーションとシャーディング — 書き込みは速くならない
書き込みが詰まったのでレプリカを2台足したのに、書き込みは1ミリ秒も速くなりませんでした。レプリケーションが分散するのは「読み」だけで、「書き」は primary 1台に集まったままだからです。この記事では MySQL を Docker Compose で primary 1台 + replica 2台立てて実際にレプリケーションを組み、読みを振り分けたときに primary の CPU がどう下がるかを docker stats で測ります。次にわざと遅延を作り、遅れたレプリカを読むと古い値が返ることを再現します。primary を停めてレプリカを昇格させ、昇格が自動ではないこと、古い primary を戻すと二重書き込みになることも手で確かめます。後半はシャーディングで、範囲・ハッシュ・一貫性ハッシュの3つの分け方を Node のスクリプトで実際に計算し、台数を1台増やしたときに何%のデータが引っ越すかを数えます。最後に2台に分けた MySQL で JOIN・トランザクション・採番が壊れるところまで再現して、全部消します。 -
データベース
書いた直後に読むと無い — レプリケーションとCAP
アプリは2つに増やしたのに、データベースは1台のままでした。そこが落ちたら全部止まります。この回では Docker Compose で MySQL を2台立て、実際にレプリケーションを組んで、書き込み側に入れたデータが読み取り側に出てくるところを見ます。そのうえで「書いた直後に読むと、まだ無い」を意図的に起こし、NoSQLの回で出た結果整合性が MySQL でも起きることを確かめます。最後にコンテナのネットワークを切って、古いデータを返すかエラーを返すかの二択しかないこと(CAP定理)を実験で確認し、シャーディングとフェイルオーバーには手を出さない理由まで書きます。
1