決済ボタンが押せない夜――クーポン・カート・注文画面が一斉にDBをダウンさせたとき、再現から復旧まで

午後8時、クーポンイベントが始まると、決済直前の導線が一斉に崩れます。数百枚のクーポンが並ぶクーポン一覧によるCPU負荷、画面ごとに繰り返されるクーポン検証、カートから注文書へ進むにつれて押し寄せるINSERT・UPDATEをDockerでそのまま再現し、ウォールームで何から止め、何を直すのか、あの夜のタイムラインを追っていきます。

1名 が受講中です。

難易度 中級以上

受講期間 無制限

SQL
SQL
MySQL
MySQL
DBMS/RDBMS
DBMS/RDBMS
database
database
SQL
SQL
MySQL
MySQL
DBMS/RDBMS
DBMS/RDBMS
database
database

この講座で身につくこと

  • 決済リクエスト1件が発生させるSQL呼び出し数を数え、画面ごとに繰り返されるクーポン検証のような増幅を見つけ出します。

  • 保有クーポンが数百枚ある会員のクーポン一覧が何を読み込んでいるのかを実行計画で確認し、インデックスだけでは解決できない本当のCPU負荷の原因を計測によって特定します。

  • カートから注文書への遷移時に発生する小さな書き込みや頻繁なコミットをまとめるかなくすことで、DBの書き込み量と応答時間を削減します。

  • 同じクーポンが二度使われる隙を再現し、条件付きUPDATEの1文で防ぎます。

  • 障害時に機能を停止する順序と再開する順序を指標に基づいて定め、事後分析・再発防止・イベント前のチェックリストを作成します。

  • data_locks・INNODB STATUS・metadata_locksの出力を直接読み取り、レコードロック・ギャップロック・ネクストキーロック、デッドロック、メタデータロック待ち行列の原因を説明します。

  • 悲観ロック・条件付きUPDATE・楽観ロック(version)・原子的な増減を同じ同時リクエストに適用し、結果とコストを比較して状況に応じて選びます。

  • コミット1回あたりのredo・fsyncコストをカウンターで測定し、まとめ書き・冪等キー・プールのデッドロック修正を実際のコード差分に落とし込みます。

午後8時、決済ボタンが押せません。クーポン一覧・クーポン検証・注文書が一斉にDBをダウンさせたあの夜を再現し、何を最初に遮断し、何を修正するのかを追っていきます。

あの夜の数字――この講義で再現し、修正すること

  • 公開から30秒でp95応答時間が90ms → 2,337ms、DB接続待ちが381 → 539

  • オープン時の障害区間の平均:p95 2,399ms · 失敗 12.5%

  • ウォールームでの3つの決定を経て、同じ負荷で p95 77ms・失敗 0%

  • その間に決済ボタンを2回押した人たちによって二重に使用されたクーポン816枚 — 条件付きUPDATEの1文で0枚

  • 改善後の段階的負荷テスト:初期状態では1秒あたり60人のユーザーでp95が1,125ms、改善後は100人でもp95が76ms

すべての数値は、仮想ショッピングモールの再現を実際に実行した記録です。第1講は、説明なしであの夜の崩壊シーンから始まります。

発展編 第39講 — 原理まで自分で測る数値

  • クーポン200枚に同じリクエストを4件ずつ送る場合:読み取り後に書き込む方式では利用記録が799件(重複599件)、条件付きUPDATE・FOR UPDATE・楽観ロックでは200件。ただし、ロック待ちは36・599、競合は600と、コストは異なる。

  • 同じ2,000行の書き込み:自動コミットではfsync 2,058回 → 1つのトランザクションでは277回 → 複数行INSERTでは2回

  • 開いたトランザクション一つで history list が66 → 1,205に、応答指標には表れない

  • イベント中、ALTER 1件の後に接続61件が待機、クーポン一覧の照会失敗率25.6%

  • トランザクションを保持したまま、さらに接続を1つ取得するコード:同じ負荷で失敗率0% → 57.2%

  • 決済の連打:冪等キーなしでは会員20人に注文30件 → 冪等キーを使うと20件

クイズ第4講は、実際の出力原文を読んで判断する問題40問と、追加課題3つを含む課題9つで構成され、setup・verifyスクリプトで合格を自動判定します。

午後8時にクーポンイベントが始まり、決済直前の経路が一斉に崩れます。何百枚ものクーポンがクーポンボックスで消費するCPU、画面ごとに繰り返されるクーポン検証、カートから注文書へ進む際に大量発生するINSERT・UPDATEをDockerでそのまま再現し、ウォールームで何から止め、何を修正するのか、その夜のタイムラインを追っていきます。

クーポン講座の多くは「発行」で終わります。この講座では発行後、決済直前の経路で、クーポン一覧の検索・クーポン利用の検証・カートの検証・注文書の作成が一晩のうちに絡み合い、破綻する場面を扱います。ひとつの仮想ショッピングモールで「その夜」を実際に再現して記録し、すべての講義がそのタイムラインを分かち合う、映画のような構成です。画面上の数字はすべて、その再現を実際に実行した結果であり、大手EC企業で現役のDBAチーム長がイベント対応のウォールームで用いる判断の順序を盛り込みました。本編50講の後には、応用編39講が続きます。本編では設定を一行変えるだけで修正した箇所を、EXPLAIN・オプティマイザートレース・ロック表・fsyncカウンター・実際のコードまで掘り下げ、原理から改めて検証し、出力を読み解くクイズと自動採点課題で確認します。

この講義を終えると

  • 決済リクエスト1件が発生させるSQL呼び出し数を数え、画面ごとに繰り返されるクーポン検証のような増幅を見つけます。

  • 保有クーポンが数百枚ある会員のクーポン一覧が何を読み込んでいるのかを実行計画で確認し、インデックスだけでは解決できない本当のCPUボトルネックを計測で見つけます。

  • カートから注文手続き画面への遷移で発生する小さな書き込みや頻繁なコミットをまとめたりなくしたりして、DBの書き込み量と応答時間を削減します。

  • 同じクーポンが二重に使われる隙を再現し、条件付きUPDATEの一文で防ぎます。

  • 障害時に機能を停止する順序と再有効化する順序を指標に基づいて決め、事後分析・再発防止・イベント前のチェックリストを作成します。

  • data_locks・INNODB STATUS・metadata_locksの出力を直接読み取り、レコードロック・ギャップロック・ネクストキーロック、デッドロック、メタデータロック待ちキューの原因を説明します。

  • 悲観ロック・条件付きUPDATE・楽観ロック(version)・原子的な増分を同じ同時リクエストに適用し、結果とコストを比較して、状況に応じて選びます。

  • 1回のコミットにかかるredo・fsyncコストをカウンターで測定し、バッチ書き込み・冪等性キー・コネクションプールのデッドロック修正を実際のコード差分に落とし込みます。

このような方におすすめです

  • クーポン・カート・注文を扱うコマースバックエンド開発者(経験2~7年)

  • 大型イベントを前に、DBの限界を事前に確認する必要があるDBA・SRE

  • 負荷テストは実施したものの、「どの区間が原因なのか」を説明するのが難しかった方

カリキュラム(13セクション・89講義・約1,091分)

  • セクション0. プロローグ — 午後8時、決済ボタン — 午後8時、決済ボタンが押せない、実習環境とループマーケットの決済直前の経路、ウォールームダッシュボードの読み方、平穏なベースライン

  • セクション1. 第1幕 — クーポンボックスがCPUを焼き尽くす — 会員1人が数百枚のクーポンを持つとき、クーポンボックス検索の実行計画 — 使い切ったクーポンまで読み込む、適用可能なクーポンの計算をDBが行うとき、インデックスの順序とカバリングで読み込む行を減らす、インデックスだけでは不十分だった、おすすめクーポンの計算をアプリに移す、クーポンボックスのキャッシュ — 何をキャッシュし、何を毎回確認するのか、期限切れクーポンの整理バッチがイベント中に動いたら、第1幕の結果 — 同じ負荷、異なるグラフ

  • セクション2. 第2幕 — クーポン使用の検証がDBを叩く — 1回の決済でクーポン検証クエリは何回発行されるのか、画面ごとに同じ検証を繰り返す、確認から使用までの隙間 — 同じクーポンが2回使われる、条件付きUPDATEで確認と使用を1つの文にまとめる、クーポン使用履歴のINSERTが一か所に集中する、短時間のキャッシュと最終確認はDBで行う、検証キャッシュの落とし穴 — 使用済みクーポンがプレビューに表示される、第2幕の結果 — 呼び出し回数が減ればDB Loadも減る

  • セクション3. 第3幕 — カートから注文書へ、書き込みの嵐 — 注文書に進むときに起こること、アイテムごとにUPDATEを1回 — 小さな書き込みと頻繁なコミット、注文書の一時保存でINSERTが急増、たまった注文書を削除するコスト、2つのタブで同じカートを編集するとき、書き込みをまとめてコミットを減らす、不要な書き込みをなくす、第3幕の結果 — 書き込みの嵐が収まる

  • セクション4. 第4幕 — 一斉に噴き出す夜 — 3つの区間が同時に — 原因は1つに見える、ウォールームに入ったら最初に見るもの — 指標を見る順番、待機イベントで3つに分ける、決済ボタンの連打が障害を拡大させる、接続が枯渇しタイムアウトが広がる、何から止めるか — 機能を停止する順番、クーポンは使えなくても決済はできる — 優雅な縮退、再開する順番と第2波、第4幕の結果 — あの夜のタイムライン1枚

  • セクション5. エピローグ — 次のイベント — 事後分析 — 何をいつ、なぜ決定したのか、再発防止リストと担当者、リハーサル — 条件を変えてあの夜をもう一度描く、イベント前の決済経路チェックリスト、次のイベントの限界を測る、まとめと次のステップ

  • セクション6. 課題 — 初めての夜を一人で — 課題1 — クーポン1,000枚の会員、課題2 — 検証が5回実行される決済、課題3 — アイテム50個のカート、課題4 — 3つのタブから同時に編集、課題5 — キルスイッチの順序を決める、課題6 — 初めての夜

  • セクション7. 応用1 — ウォールーム診断ツールボックス — 診断クエリキット — ウォールームで開く5つのウィンドウ、8.0の記事のクエリが8.4で動かないとき、EXPLAINの列の読み方 — type・key・key_len・rows・filtered・Extra、EXPLAIN ANALYZE — 推定と実際が食い違うとき、オプティマイザトレース — なぜそのインデックスを選んだのか、スローログとステートメントフィンガープリント — 負荷テスト1回分を1枚にまとめる

  • セクション8. 応用2 — クーポンボックスの読み解きをさらに深く — インデックスの列順3パターンを実際に測定、イベント中のインデックス追加 — オンラインDDLの進行状況とコスト、クーポンのINリストが長くなるとき — インデックスダイブの限界、クーポンボックスのページ送り — OFFSETからキセットへ、JSONの適用条件と生成列インデックス、午前0時の有効期限境界 — タイムゾーンと半開区間

  • セクション9. 応用3 — ロックと同時実行性 — InnoDBのロックマップ — レコード・ギャップ・ネクストキ―・インサートインテンション、分離レベルと一貫性読み取り — なぜSELECTはまだ残っていると見るのか、悲観ロック・条件付きUPDATE・楽観ロックの比較、1人1回 — 異なるクーポン2枚の同時使用、デッドロックの解剖 — 注文とクーポンのロック順序、存在しない行をロックすると — ギャップロックとupsertのデッドロック、ロック待ちタイムアウト後の中途半端なトランザクション

  • セクション10. 応用4 — 書き込みとコミット — コミット時に起こること — redo・fsync・グループコミット、耐久性設定の代償 — 実験室でのみ変更する、ショッピングカートのlost update対策4つを比較、一括書き込みコード — 複数行INSERT・IN検索・ON DUPLICATE KEY、大量DELETEとpurge — history list lengthの読み方

  • セクション 11. 応用 5 — 運用の夜をさらに深く — 長時間トランザクション1つが夜全体を引きずる、イベント中のALTER TABLE — メタデータロックの待ち行列、INSTANT DDLの限界 — row versionと再構築、決済の連続クリック — 冪等キーの設計と実装、1つのリクエストが2つの接続を使用 — コネクションプールのデッドロック、レプリカで検証すると起きること

  • セクション12. 確認とまとめ — クイズ・追加課題・面接・資料 — 第1幕のクイズ — クーポン一覧の出力を読み解く、第2幕のクイズ — 検証・ロックの出力を読み解く、第3幕のクイズ — 書き込み・コミットの出力を読み解く、第4幕のクイズ — あの夜の決断を読み解く、課題7 — デッドロックログだけを見て順序を修正する、課題8 — メタデータロックの待ち行列を解消する、課題9 — 決済の二重送信を防ぐ、面接質問20選 — 決済直前の処理経路とDB、ダウンロード資料の使い方 — クエリパック・チートシート・ランブック

実習環境

DockerでMySQL 8.4、ECサイトAPI 3台、負荷テストツールk6、1秒間隔のウォールーム指標画面を起動します。仮想ECサイト「ループマーケット」のデータ(会員20万・保有クーポン約275万枚・カート約35万行)は固定ルールで生成され、誰が実行しても同じです。各講義では./scenarios/sNN.shひとつで講義画面を再現し、設定を1行(./set.sh)変えるだけで改善前後を切り替えて確認できます。ダウンロード資料には、ウォールーム診断クエリキット、イベント当日用ランブック、記入済みの事後分析サンプル、チートシート、キルスイッチ手順表、容量計算ワークシート、面接質問20問、さらにsetup・verifyスクリプトで合格を自動判定する課題9つが含まれています。

前提知識

  • SQLのJOINとインデックスの基本

  • Web API・トランザクションを扱った経験

  • Docker がインストールされたコンピューター(メモリは8GB以上の割り当てを推奨)

この講義で扱わないこと

  • クーポン発行・先着順発行の設計

  • 決済代行会社(PG)との連携と承認ロジック

  • Redisによる在庫・メッセージキューへの切り替え

  • SQLの基本構文

ご案内

スライドのナレーションは合成音声です。すべてのデータは教育用の架空データであり、数値は実行環境によって異なる場合があります。

次のような方に
おすすめです

受講対象

  • クーポン・カート・注文を扱うコマースバックエンド開発者(経験2〜7年)

  • 大規模イベントを前に、DBの限界を事前に確認する必要があるDBA・SRE

  • 負荷テストはしてみたものの、「どの区間が原因なのか」を説明するのが難しかった方

前提知識

  • SQLのJOINとインデックスの基本

  • Web API・トランザクションを扱った経験

  • Dockerがインストールされたコンピューター(CPU 6個・メモリ8GB以上の割り当てを推奨)

こんにちは
dorian05202988です。

経歴認証済み

20年以上にわたりデータベースとIT分野でキャリアを積んできたデータ職人です。DBAおよびDB Platformチームのマネージャーとしてデータベースプラットフォームに携わり、MySQL・PostgreSQL・Oracle・MongoDB、SQLチューニング、AWS・Terraform・Pythonを専門分野としています。ゲーム・金融・ITサービス分野での経験をもとに、データベースとクラウドアーキテクチャについて解説しています。『オラ​​クル実務チューニング SQLパターン学習』と『Oracle Pro*C実務プロジェクト活用書』を出版し、AWS Summit 2018・2019と「データよ、遊ぼう」2020では、サーバーレス・データベースの選択・マルチデータベース戦略について発表しました。最近は、Bedrock LLMを利用したスロークエリの分析・チューニング提案、DBスペック算定の自動化、DBメタMCPサーバーとSlackボットを通じた照会フローを扱っています。開発者向けのデータベース自動化と、非開発者向けのAI業務活用について、各コースの対象者と目的に合わせた実習を通じて解説しています。AIの提案をそのまま適用するのではなく、結果の同一性・実行計画・観測条件を確認し、根拠が不足している場合は保留する判断基準を伝えています。会社の運用データや認証情報は講義資料に含めません。

もっと見る

カリキュラム

全体

89件 ∙ (18時間 13分)

講座資料:

授業資料
講座掲載日: 
最終更新日: 

受講レビュー

まだ十分な評価が集まっていない講座です。
ぜひ最初のレビューをお寄せください。

dorian05202988の他の講座

知識共有者の他の講座はこちら

似ている講座

同じ分野の他の講座を見てみましょう!

期間限定セール

¥57,750

25%

¥9,746