コンテンツへスキップ
現在

テクノロジー · Microsoft 365の障害継続報道 · 全5件中5件目のレポート

Microsoftは、世界規模の障害の原因を自社コードに含まれていた7月のバグだとしている。なぜ見逃されたのかは説明していない。

Microsoftの暫定報告書によると、7月に出荷した欠陥、通常のTeamsトラフィックの切り替え、そしてすでに削減されていた容量が重なり、ゲートウェイサーバーの80%超が停止した。報告書は何が壊れたかを説明している。だが、なぜ誰も欠陥を発見しなかったのかは説明しておらず、費用を誰が負担するのかも決着していない。

執筆 11分で読めます · 392件の情報源

原語の動画

英語の原文から翻訳されています。

前回のレポートからの変化

4日後

前回

Microsoft、遅延メールを48時間保護 障害からの復旧は未完了

未解明としていた点

  1. 発端となった原因、影響を受けたユーザーと組織の監査済み総数、損失総額、コネクターが完全に復旧した時刻は、依然として未解明だ。

    未解明

    Microsoftの暫定説明は、今回の障害原因を示した。すなわち、容量がすでに削減されている状況でTeamsのトラフィックが移されたことをきっかけに、7月のゲートウェイの欠陥が表面化したという。説明は独立に検証されていない。影響を受けたユーザーと組織の監査済み件数、損失総額、OpenAIとAnthropicのMicrosoft 365コネクターの復旧時刻は、依然として明らかになっていない。⁠3⁠4

  2. トラフィックが戻るなか、復旧した容量が応答性を維持できるか。そして、Microsoftが約束したインシデント報告書は、復旧の試みが繰り返し失敗した理由を説明するのか。

    判明

今回

Microsoftの暫定報告書によると、7月に出荷した欠陥、通常のTeamsトラフィックの切り替え、そしてすでに削減されていた容量が重なり、ゲートウェイサーバーの80%超が停止した。報告書は何が壊れたかを説明している。だが、なぜ誰も欠陥を発見しなかったのかは説明しておらず、費用を誰が負担するのかも決着していない。

その後判明

  1. トラフィックが戻るなか、復旧した容量が応答性を維持できるか。そして、Microsoftが約束したインシデント報告書は、復旧の試みが繰り返し失敗した理由を説明するのか。

    ラマンナ氏は以前、復旧の試みが失敗したのは、復帰したサーバーに待機中のトラフィックが再び殺到したためだと述べた。Microsoftはコードをロールバックし、サーバーをグループごとに復帰させることで解決したとしており、11月14日の復旧発表以降、サービスは安定しているという。⁠4⁠8⁠27

動いたこと

  • Microsoftが発表した、顧客への影響が続いた期間の終了時刻。
  • Microsoftは、影響を受けた残る顧客と地域でサービスが復旧したと発表し、遅延メールの監視を続ける。
  • 暫定報告書を公表。ラマンナ氏がXで謝罪。

Microsoftは、先週の障害で何が壊れたのかを明らかにした。だが、より難しい問いが残る。Microsoft自身が出荷した欠陥が、誰にも発見されないまま数カ月にわたって本番環境で稼働し、その後、2時間足らずで世界の大部分のメールを停止させたのはなぜなのか。

11月13日、Microsoftのサービス復旧の試みが何度もつまずき、同社が滞留メールを保護するためメールのタイムアウト時間を延長し、完全復旧は確認されておらず、原因も不明だと報じた。それ以降、Microsoftは残るすべての顧客と地域でサービスが復旧したと発表し、11月16日月曜日には障害に関する暫定報告書を公表した。報告書によると、障害の原因は、Exchange Online、Outlook、Teams、CopilotなどMicrosoft 365サービスの手前にあるネットワークゲートウェイサーバー向けの7月の更新に含まれていた欠陥だった。⁠3⁠27

23時間50分Microsoftが示した顧客への影響期間 38
80%超最悪の時点で応答しなかったゲートウェイサーバー 38
約14%事前にオフラインとなっていたゲートウェイ容量 32
740万件超世界のDowndetector問題報告件数。人数ではない 1230

重なり合った3つの不具合

MicrosoftのCopilot、エージェント、プラットフォーム担当エグゼクティブ・バイスプレジデント、チャールズ・ラマンナ氏は、Xへの長文投稿で説明を示した。同氏はこれを、Microsoft 365管理センターに提出した報告書の要約版と呼んだ。欠陥はゲートウェイサーバー専用に書かれた修正に含まれ、特定の負荷条件下でサーバーが過負荷になり、応答しなくなったという。報告書を取り上げた報道では、この欠陥はロック競合と説明されている。内部プロセスのタスクが互いに待ち続けて滞り、最終的にサーバーのプロセッサーとメモリーを使い果たす。iTnewsによると、このバグはゲートウェイ群に3カ月以上潜んでいた。⁠373⁠4⁠372⁠8

欠陥だけでは何も起きなかった。報告書によると、さらに2つの条件が重なった。障害発生の約15時間前、予定されていたTeamsのフェイルオーバーによって、Exchange Onlineのネットワーク基盤に追加のトラフィックが流れ、共有ゲートウェイに負荷がかかった。ラマンナ氏は、2つあるネットワークゲートウェイのうち1つがTeamsで機能せず、もう一方の主要ゲートウェイに過負荷がかかったと説明した。別途、前日に発生した無関係の問題で、ゲートウェイ容量の一部がすでにオフラインになっていた。木曜日に米国のピーク時のトラフィックが到着すると、リクエストが積み上がり、サーバーは応答を停止した。⁠3⁠2⁠4

その容量の一部がどれほどの規模だったかについて、各媒体の報道は一致していない。暫定報告書を報じたBleepingComputerは、ゲートウェイ容量のほぼ14%としている。ラマンナ氏の発言を引用したThe Guardianは、サーバー容量の14%超と伝えた。数値は近く、報告書自体の説明対象はゲートウェイだ。⁠3⁠2

その後、Microsoft独自の安全システムが事態を悪化させた。自動リダイレクトにより、障害が起きたサーバーから正常なサーバーへリクエストが移されたが、移動先にも同じ欠陥があり、順次障害が起きた。問題を単一の地域内に封じ込めるはずの障壁は機能しなかった。n-tvによる報告書の説明では、障害は2時間足らずでほぼシステム全体に広がり、欧州時間の木曜夕方までに、該当するマシンの80%超が応答しなくなった。GeekWireによると、Microsoftはこの動きを「殺到する群衆」と呼んでいる。⁠5⁠371

80%という数字も、2通りに報じられている。BleepingComputerはネットワークゲートウェイサーバーの80%超とし、El Paísは、Microsoftが世界中で管理するサーバーの80%超だというラマンナ氏の発言を報じた。報告書の文言は、報道によるとゲートウェイサーバーを指している。Microsoftが運用するすべてのものの5分の4が停止したのなら、まったく別の、はるかに大きな事態だったことになる。⁠3⁠6

お客様の皆様に影響が及んだことを深くお詫び申し上げます。通常の業務と運営に影響が生じたことも認識しています。

チャールズ・ラマンナ 373

同じ仕組みが、木曜と金曜に復旧が何度も失敗した理由も説明している。ラマンナ氏によると、サーバーが復帰するたびに、待機していたトラフィックが再びサーバーに殺到した。効果があったのは、影響を受けたコードを最後に正常に動作していた状態に戻すロールバックだった。エンジニアはサーバーをサービスから切り離して再起動し、一斉ではなくグループごとに復帰させた。Microsoftはその後、容量を増強し、監視を改善し、保護策を導入したとしているが、報道された暫定報告書には変更の詳細は記載されていない。Microsoftは、今回の障害はサイバー攻撃、悪意ある活動、AIエージェントの誤作動ではなかったとしている。⁠4⁠8⁠3⁠33

この一週間で説明は変化した。金曜日、Microsoftが指摘したのは、以前のネットワーク容量増強中に発生した問題だけで、サービスは広範に復旧しつつあるとし、復旧完了の時期は分からないとしていた。月曜日の説明ははるかに具体的だが、なお暫定的であり、Microsoftだけが示したものだ。外部の調査者による検証は行われていない。⁠1⁠15

7月の修正から月曜日の説明まで

  1. 2026年7月

    ゲートウェイサーバー向けの修正がリリースされ、潜在的な欠陥を含んでいた。

    35
  2. 11月12日(木)午前1:20頃 UTC

    予定されていたTeamsのフェイルオーバーにより、共有のExchange Onlineゲートウェイに追加のトラフィックが流れ込む。

    3
  3. 11月12日(木)午前11:20 ET

    Microsoftが発表した、顧客への影響が始まった時刻。

    3
  4. 11月12日(木)17:54 GMT

    Microsoftが、米州のユーザーがExchange Onlineのメールボックスにアクセスできないことを初めて認める。

    1
  5. 11月13日(金)午前11:10 ET

    Microsoftが発表した、顧客への影響が続いた期間の終了時刻。

    3
  6. 11月14日(土)

    Microsoftは、影響を受けた残る顧客と地域でサービスが復旧したと発表し、遅延メールの監視を続ける。

    2710
  7. 11月16日(月)

    暫定報告書を公表。ラマンナ氏がXで謝罪。

    34

公式の影響期間を見れば、公表された障害時間が食い違う理由も分かる。CBCは24時間超、MyBroadbandは20時間、El Paísは18時間超、Frandroidは約38時間と報じた。Frandroidは、Exchange OnlineのインシデントEX1550543が木曜日17:17に起票されたという時点から、土曜日の復旧発表までを測定した。他の媒体は、顧客への影響や、途中で記録された状況を基準にした。Microsoftが示す影響期間は23時間50分だ。これときれいに一致しない時刻が2つある。Ooklaのネットワークデータでは発生は17:25 UTC頃で、Microsoftが最初に公に認めたのは、同社が示す開始時刻から94分後だった。土曜日に復旧が宣言された後も、Microsoftはメールのタイムアウト時間を48時間に延長した状態で、遅延メールを監視し続けていた。⁠12⁠7⁠6⁠10⁠30⁠124

影響を受けたのは誰か、そして費用を負担するのは誰か

Downdetectorには70を超える国・地域から740万件超の問題報告が寄せられ、ピーク時には1分あたり約20,000件に達した。これは苦情の件数であって、利用者数ではない。Microsoftは、サービスを失った人や組織の数を明らかにしていない。それでも被害は具体的だった。イングランドのNHS職員は紙の記録に戻った。アイルランドのHSEはHealthmailを停止し、一般開業医と薬剤師に対し、GMS制度の下で紙の処方箋を書くよう伝えた。米国の裁判所や政府機関、カナダの病院や鉄道利用者が影響を受け、El Paísによると、日本、オーストラリア、マレーシアでは重要なサービスを中断せざるを得なかった。タイのクルンタイ銀行はメールが使えなくなり、緊急の顧客にコールセンターへの連絡を案内したが、モバイルバンキングへの影響は確認されていない。タウンズビルの株式ブローカーは、市場が大きく動けば、取引指示の遅延が顧客に損害を与えかねないと警告した。英国のサイバー担当相は、999への通報、NHSの最前線の111サービス、交通機関は稼働を続けたと述べた。⁠12⁠15⁠26⁠25⁠6⁠11⁠31

Microsoftが説明を公表した日、イアン・マレー大臣を中心に、下院でこの障害が議論された。入手可能な記録からは、議論の結果、何らかの約束がなされたかどうかは分からない。ドイツ連邦サイバーセキュリティ庁(BSI)はそれ以前に、今回の障害を経済にとって重大な問題であり、デジタル依存への警告だと指摘していた。また、シュレースヴィヒ=ホルシュタイン州のデジタル担当大臣ディルク・シュレーダー氏は、公共部門のデジタル・レジリエンスを高めるよう求めた。⁠387⁠390⁠5

ドイツのIT利用者団体VOICEは、企業に対し、停止時間を記録し、12月末までにサービスクレジットを請求するよう促している。また、Microsoftには実効性のある結果を伴う稼働率保証を求めている。サービスクレジットとは、サブスクリプション料金の割引だ。失われた時間、遅れた処方箋、受注機会の損失を補償するものではなく、オーストラリアのABCに専門家は、Microsoftが企業の生産性損失を補償する可能性は低いと述べた。損失額は推計だ。アナリストのマリオ・デ・チッコ氏は、保険損失を$300 million〜$500 millionとし、保険会社への影響は限定的と見積もった。Il Sole 24 Oreは、少なくとも数億ユーロとの推計を報じた。Microsoft株はほとんど動かなかった。11月11日の終値は$521.13、11月13日は$523.88、11月16日は$517.99で、この下落を障害と結び付けるものはない。⁠388⁠385⁠12⁠386⁠378

分かっていること

  • Microsoftは、障害の原因は7月のゲートウェイの欠陥で、容量の一部がすでに停止している状態でTeamsのフェイルオーバートラフィックが引き金となり、コードのロールバックで修正したとしている。 348
  • Microsoftは、11月14日に残るすべての顧客と地域でサービスが復旧したと発表した。 2726

不明な点

  • 本番環境で欠陥が何カ月も検知されなかった理由と、地域ごとの隔離が機能しなかった理由。
  • サービスを失った人や組織の数、損失総額、Microsoftがサービスクレジットを付与したかどうか。

今後の展開

  • 11月20日金曜日に予定されているMicrosoftの最終報告書では、再発防止策の全容が示されるはずだ。
  • 企業が、VOICEの推奨するサービスクレジットの請求を12月末までに行うかどうか。

タイムライン

8日目 · 5 件のレポート

ストーリーの時系列
  1. Microsoftが発表した、顧客への影響が続いた期間の終了時刻。

  2. Microsoftは、影響を受けた残る顧客と地域でサービスが復旧したと発表し、遅延メールの監視を続ける。

  3. 暫定報告書を公表。ラマンナ氏がXで謝罪。

情報源244

引用した情報源のうち、flavorist.comが最も早く、この報道の配信6 日前に公開しました。 その後、196媒体が報じました。

背景情報として過去の3件の記事を参照しました。日付のない46媒体:Workhorse Group, Inc.apnews.comcloud.microsoftreddit.comAFP.comAnadolu

継続報道 · 全5件中5件目のレポート

媒体別の全情報源

244媒体の392件の情報源· 引用の多い順

放送時の内容
  1. A bug Microsoft shipped in July sat hidden for months, then took email down worldwide.
  2. At the worst point, more than eight in ten of the servers that front Outlook, Teams and the rest of Microsoft 365 stopped responding. Health services went back to paper, and users in more than seventy countries lost their mail for nearly a full day.
  3. On November thirteenth we reported that Microsoft's attempts to bring servers back kept faltering, full restoration wasn't confirmed, and the cause was unknown. Since then, Microsoft has restored service and published a preliminary report that traces it all to a July defect.
  4. What Microsoft still hasn't explained is how that defect ran in production for months without anyone catching it, and nobody has settled who pays for the lost day.
  5. The defect came from a fix Microsoft wrote in July for its networking gateway servers, the machines that sit in front of Exchange Online, Outlook, Teams and Copilot.
  6. Charles Lamanna, the executive who runs Copilot, agents and platform, said that under certain load it caused servers to become overwhelmed and unresponsive. The report describes lock contention inside an internal process, where tasks jam waiting on each other until they eat up a server's processing power and memory.
  7. For months it did nothing. Then, last Thursday, three things lined up.
  8. First, the dormant defect. Second, a planned Teams failover about fifteen hours earlier pushed extra traffic onto the shared gateway. Third, nearly fourteen percent of gateway capacity was already offline from an unrelated problem. Then peak U.S. traffic hit Thursday, and requests piled up until servers froze.
  9. Microsoft's own safety systems then spread the damage. Automatic redirection moved requests off failing servers onto healthy ones, which carried the same defect and failed in turn. The barriers meant to keep trouble inside one region didn't hold.
  10. In under two hours the failure reached almost the entire system. By Thursday evening in Europe, more than eighty percent of the gateway servers were unresponsive. Microsoft calls the pattern thundering herds.
  11. That same pattern explains why the repairs kept failing. Each time servers came back, the traffic waiting for them knocked them over again.
  12. The fix was a code rollback that returned the affected code to its last working version. Engineers pulled servers out of service, restarted them, and brought them back in batches instead of all at once.
  13. Microsoft says it has since added capacity, improved monitoring and put in new safeguards. The preliminary report doesn't spell those changes out.
  14. Microsoft says the outage wasn't a cyberattack, malicious activity or an AI agent gone wrong. Lamanna apologized in a long post on X, saying the company was deeply sorry and recognizes what this did to customers' normal business.
  15. Microsoft's final report is due Friday, and we'll be reading it for how this bug slipped through. Subscribe to this channel to follow it, and the story continues at heyday dot news.
  16. Microsoft now puts active customer impact at twenty-three hours and fifty minutes.
  17. The clock starts at eleven-twenty Thursday morning Eastern and stops at ten past eleven Friday. Microsoft first acknowledged mailbox failures about ninety minutes after that start. The all-clear for the last customers came early Saturday, with delayed mail still being watched.
  18. Microsoft also stretched its email timeout window to forty-eight hours so queued messages wouldn't be lost.
  19. Published figures for the length run from more than eighteen hours, to twenty, to more than twenty-four, to nearly thirty-eight. They're measuring different things, from the hours customers were hit to the final all-clear. Microsoft's own impact window is twenty-three hours and fifty minutes.
  20. Microsoft's explanation sharpened over the week. On Friday it blamed only a problem from an earlier network capacity upgrade, and said it couldn't say when recovery would finish.
  21. Monday's account is preliminary, and it comes from Microsoft alone. No outside investigator has checked it. The capacity already offline is put at nearly fourteen percent or more than fourteen, and the report's own wording applies the eighty percent figure to gateway servers.
  22. NHS staff in England went back to paper records.
  23. Ireland's health service took Healthmail offline and told GPs and pharmacists to write paper prescriptions. U.S. courts and government offices were disrupted, along with Canadian hospitals and rail passengers. Japan, Australia and Malaysia had to interrupt critical services.
  24. In Thailand, Krungthai Bank lost email and sent urgent customers to its call center, with no confirmed hit to mobile banking. A stockbroker in Townsville warned delayed trade instructions could hurt clients if markets moved sharply. Britain's cyber minister said 999 calls, frontline NHS 111 services and transport kept running.
  25. Users filed more than seven point four million problem reports worldwide, peaking near twenty thousand a minute, from more than seventy countries and territories. Those are complaints, and Microsoft hasn't said how many people or organizations actually lost service.
  26. Experts in Australia say Microsoft is unlikely to compensate businesses for lost productivity.
  27. On the day Microsoft published its explanation, Britain's House of Commons debated the outage, led by minister Ian Murray. Germany's cyber-security agency had already called it an alarm signal about digital dependence, and Schleswig-Holstein's digital minister Dirk Schrödter called for more resilience in the public sector.
  28. Germany's IT user association, VOICE, is telling companies to document their downtime and file service-credit claims, and it wants availability commitments from Microsoft with real consequences. A service credit is a discount on the subscription fee. It doesn't cover lost hours, delayed prescriptions or missed orders.
  29. Loss figures are still estimates. One analyst put insured losses at three hundred to five hundred million dollars, with limited impact on insurers, and an Italian estimate ran to hundreds of millions of euros.
  30. Microsoft's stock barely moved. It closed at five hundred twenty-one dollars on November eleventh, about five twenty-four on Friday, and about five eighteen on Monday. Nothing ties that dip to the outage.
  31. Microsoft's final report is due Friday, November twentieth. It has to show how the defect sat undetected in production for months, why the regional barriers failed, and what Microsoft will change. Companies in Germany are being told to file their credit claims before the end of December.

翻訳更新:

最近の放送