マイクロソフトのグローバルサービス停止 調査:4か月間潜んでいた脆弱性、問題発見まで15時間要した
先週、Microsoftのシステムの脆弱性が通常のトラフィック切り替え操作によって引き起こされ、サーバーは急激なトラフィック増加によりメモリ不足となりました。自動化された災害対策システムはトラフィックを「正常」な他のサーバーに転送しましたが、このとき脆弱性も同時に他のシステムへ持ち込まれ、連鎖的に故障が発生しました。最初は点在した障害が現れ、Microsoftが全面的な問題を確認するまで約15時間かかりました。続いてMicrosoftは修復ソリューションの提供開始までさらに約15時間を要し、ダウンタイムは同様の事故より遥かに長くなりました。
Microsoftが4か月間も潜伏していたシステムの脆弱性が、先週、世界規模のサービス障害事故を引き起こしました。これにより、一つのテクノロジー企業に高度に依存することの潜在的なリスクが浮き彫りになりました。
今回の事故は11月11日の定例的なトラフィック切り替え操作から始まり、翌日午前11時30分——米国企業のトラフィックピーク時——にMicrosoftが問題の重大性を認識しました。
その後、会社は約15時間かけて障害の原因を特定し、修復策の導入に着手しました。このため、多くの企業や政府の顧客の業務が停止状態に陥りました。障害が最も深刻だった時間帯には、Outlookのバックエンドサーバーの80%以上が応答不能となり、Teamsのビデオ会議招待が消え、従業員は電話や紙とペンに頼って業務を維持せざるを得ませんでした。
Microsoftの職場向けソフトウェア事業を担当するエグゼクティブバイスプレジデントのCharles Lamanna氏は月曜日、Xプラットフォーム上で今回の障害について正式に謝罪しました。記事執筆時点で、Microsoftは月曜日の取引中に1.2%下落しています。

定例運用が連鎖的な崩壊を引き起こす
Microsoftが顧客に公開した初期レポートによれば、この脆弱性は今年7月にすでに同社のデータセンターに潜伏していたものの、ずっと発見されていませんでした。
事故の引き金となったのは、11月11日ニューヨーク時間午後8時ごろの自動トラフィック切替操作です。Teamsのビデオ会議とインスタントメッセージサービスのトラフィックが、自動的にOutlookのトラフィックも担う別のサーバーグループに移されました。
同時に、今週初めに独立した別の問題で一部サーバーの容量が失われ、二重の負荷によって前述の潜伏していた脆弱性が発動しました——トラフィックが急増した結果、サーバーのメモリが枯渇したのです。
問題はすぐに拡大しました。Microsoftの自動化されたディザスターリカバリーシステムが、トラフィックとメールを健全と判断された他のサーバーに移動しましたが、この脆弱性も同時に持ち込まれ、連鎖的な障害を引き起こしました。
最初に断続的な障害が現れてからMicrosoftが全体的な問題を把握するまで約15時間、その後、復旧策の配信を開始するまでにさらに約15時間かかりました。
自動化システムが裏目に出て、復旧は二転三転
今回の障害は、同様の事故に比べてはるかに長時間に及びました——同種の事故は通常、数時間で解消されるものです。
Microsoft 365製品を利用している技術担当者向けに公開された詳細なタイムラインによると、サービスの安定運用を保つはずだった自動化メカニズムが、逆に今回の連鎖障害を加速させました。
復旧したサーバーには、処理待ちのトラフィックが一気に集中し、再び過負荷でダウンし、修復プロセスがループにはまりました。
さらに、この脆弱性が数か月間システム内に潜伏していたため、最近のアップデートをロールバックして安定化を図るという通常の手段も効果がなく、復旧はさらに遅れました。
ラボテストは実際の環境を再現できず
Charles Lamanna氏は、脆弱性が長期間潜伏し、テストプロセスで発見されなかった理由を説明しました。
Microsoftは、大規模なシステム変更を外部に展開する前に、まずラボ環境や限定的なネットワークでテストを行っています。これは大手インターネットサービス企業の標準的な運用手順です。
しかし今回は、ラボで模擬したトラフィックパターンやハードウェア構成が、実際のサーバー環境とは異なっていたため、脆弱性は検知されませんでした。
Lamanna氏は、Microsoftのテストは通常、性能が低い古いシステムに重点を置き、新しいアップデートで全体アーキテクチャの弱点が悪化しないか評価しています。ところが、今回は最新で高性能なハードウェアこそが脆弱性の被害を大きくし、まさにその想定が抜け落ちていたことが原因です。
免責事項:本記事の内容はあくまでも筆者の意見を反映したものであり、いかなる立場においても当プラットフォームを代表するものではありません。また、本記事は投資判断の参考となることを目的としたものではありません。
こちらもいかがですか?
API.USの2023年第3四半期売上高は前年同期比19%増加し、8四半期連続で黒字を達成
API.USは11月16日、米国株式市場の取引終了後に2026年第3四半期の決算報告を発表しました。
独占報道 - 情報筋によると、DoorDashとInstacartの合併案は米司法省による審査を受ける予定です

BUZZ-英伟达が株式を25%減持した後、インテルの株価が下落
BUZZ-コンアイディソンは株式発行計画のため株価が下落
