piyolog

piyokangoの備忘録です。セキュリティの出来事を中心にまとめています。このサイトはGoogle Analyticsを利用しています。

KDDIの通信障害についてまとめてみた

2022年7月2日、設備障害によりKDDIの携帯電話サービスで障害が発生しました。ここでは通信障害に関連する情報をまとめます。

通信障害発生から復旧発表まで3日以上

au携帯電話サービスがご利用しづらい状況について

  • 障害発生同日8時以降から1時間おきに障害報告が公表されていた。

障害発生・復旧の状況は以下の通り。

対象地域 障害発生日時 復旧作業終了時間 復旧完了日時
西日本 2022年7月2日 1時35分頃 2022年7月3日 11時頃 2022年7月5日15時36分
東日本 2022年7月2日 1時35分頃 2022年7月3日 17時30分頃 2022年7月5日15時36分
  • 影響を受けたのは全国の個人・法人向けのau携帯電話、UQ mobile携帯電話、povo、au回線利用事業者の音声通信、ホームプラス電話、ホーム電話、auフェムトセル、SMS送受信。7月3日11時時点の概算では約3915万回線が影響を受けた。
影響を受けた対象回線 影響を受けた回線数
スマートフォン・携帯電話向け回線 約3580万回線
MVNO向け回線 約140万回線
IoT向け回線 約150万回線
ホームプラス電話 約45万回線

今回の障害は次の流れで生じたことが会見で7月3日の明らかにされている。*1 *2

  1. メンテナンスの一環として行っていたモバイルコア網と中継網をつなぐルーターにおいて、新製品へ交換する作業を行っていたのがきっかけだった。通信トラフィックの設定変更を行っている最中にVoLTE交換機で警告が発生し、何らかの不具合によって一部音声通話が不通となった。
  2. 不具合発生後に音声トラフィックの切り戻しを行ったが、通信の有無に関わらず約50分に1回の頻度で位置登録が発生するVoLTEの仕組みからアクセスが集中(少なくとも通常の倍)したことで再接続要求が多発し全国で輻輳が発生してしまった。
  3. VoLTEでの輻輳発生に伴い、加入者データベースに登録された位置情報をVoLTE交換機に反映が出来ない事態となり、加入者データの不一致がデータベース上で発生してしまった。
  4. これを受けてKDDIでは負荷軽減のためにネットワークトラフィックを50%まで流量制限し、その結果データ通信、音声通話のつながり難い状態が全国で発生する状況となった。
  5. しかし、復旧作業完了後もVoLTE交換機、加入者データベースの負荷が軽減されない状況が継続した。
  6. その後の調査で、VoLTE交換機18台中6台から不要な過剰信号の送信を行っている問題が発覚。これの切り離しを実施した。
  7. 切り離しによる対応で障害前と同水準の負荷状況となり発着信成功率も向上した。これを受けて今回の障害についてほぼ回復とKDDIは判断した。
関連タイムライン
日時 出来事
2022年7月2日 1時35分頃 KDDIがメンテナンスの一環としてトラフィックルート変更を実施中にVoLTE交換機でアラーム発生。
同日 1時50分 一部音声トラフィックが不通となっていることが判明し、当該音声トラフィックの切り戻しを実施。
同日 2時 KDDIが事故対策本部を立ち上げ。
同日 2時17分 切り戻し後のアクセス集中によりVoLTE交換機で輻輳が発生。
同日 2時52分 KDDIがWebサイトに障害情報を掲載。
同日 3時~15時22分 KDDIがVoLTE交換機の負荷低減対処を実施。
同日 15時22分以降 KDDIが加入者データベースの負荷低減対処を実施。
同日 17時31分以降 KDDIが加入者データベースのデータ不一致修正対処を実施。
同日 夕刻頃 総務省よりリエゾンとして審議官をKDDIへ派遣。
2022年7月3日 11時頃 KDDIが西日本エリアの復旧作業を終了。
同日 17時30分頃 KDDIが東日本エリアの復旧作業を終了。
2022年7月4日 12時18分~13時18分 KDDIがVoLTE交換機から加入者データベースに対する過剰送信送出への対処を実施。
同日 14時51分 KDDIが流量制限を解除。
同日 17時頃 KDDIが音声通話、データ通信ともに全国的に利用しづらい状況が回復したと公表。
同日 18時頃 KDDIが通信障害について記者会見。*3
2022年7月5日 15時36分 KDDIが完全復旧を発表。
同日 18時頃 KDDIが通信障害について記者会見。*4

各対処の詳細は以下の通り。*5

対処 詳細
VoLTE交換機の負荷低減対処 ・無線設備での信号接続要求の流量制御
・VoLTE交換機の呼処理プロセスのリセットと流量制御
・無線設備でデータ、音声接続要求の流量制御
加入者データベースの負荷低減対処 ・西日本収容PGW台及び東日本収容のPGW2台の切り離し実施。
加入者データベースのデータ不一致修正対処 ・東日本収容のPGW2台のセッションリセット(及びデータ不一致解消の確認)
・西日本収容のPGW2台のセッションリセット(及びデータ不一致解消の確認)
・東日本収容の残りPGW7台及び西日本収容の残りPGW6台の切り離し、セッションリセット
総務省から早期復旧指示
  • KDDIの担当者より、7月2日同日未明に総務省側も報告を受領。
  • 総務省からKDDIに対して、早期の復旧、顧客への周知、沖縄方面への台風接近に伴い停電等による更なる通信障害が発生しないよう対応するよう要請。*6
  • 電気通信事業法上の重大事故該当事案かどうかは今後KDDIから詳細な報告を受領後に判断する方針だが、2022年7月3日に総務大臣はKDDIからの報告を踏まえ、該当事案との認識を示した。
  • 総務省から障害日夕刻頃リエゾンとして、総務審議官をKDDIへ派遣した。同省では幹部級、かつ技術精通している職員として対応にあたらせたもの。*7

KDDIの通信障害の影響を受けた組織・サービス等

KDDI利用組織において、通信障害により生じた影響として公表や報じられているものは以下の通り。

行政関連

影響を受けたサービス 影響概要
119番等の緊急通報 総務省消防庁は119番通報などにつながらないおそれがあるとして、緊急時の電話は別の携帯会社の携帯電話、固定電話から通報をする、または近くの消防署へ駆けつけて通報を行うよう案内。また全国の消防本部に対しても住民へ周知するよう呼び掛けを行っている。*8
大津市消防局では、夫婦で登山中に夫が転倒して下山が出来なくなったが、二人ともau携帯だったため、通報が出来ず。男性はヘリで救助された。*9 体調不良の男性が消防署に直接駆け込みその後救急搬送される事例もあった。*10
新型コロナ感染者対応 沖縄県ではコロナ対策本部、保健所が行っている感染者への連絡に支障が出た。
神奈川県相模原市では自宅療養中の感染者の健康観察に影響が生じており、登録された連絡先に繋がらない人が複数人いた。*11 東京都、福井県、石川県など複数の地域で影響を受けたケースが報じられている。*12
アメダスでの観測データ収集 複数のアメダス観測点において、観測データの収集ができない。対象箇所は全国約1,300か所の内、897か所に影響が及んだ可能性。(約400か所で実際に影響が生じたことが確認されている。)*13 *14台風等の気象予報への大きな影響は生じていない。
物流関連
影響を受けた事業者 影響概要
ヤマトホールディングス 全国的に発生している通信障害の影響について(2022年7月2日17:00時点)
・同社Webサイト上の荷物お問い合わせシステムに最新の荷物情報が更新されない。
・顧客からセールスドライバーへ、またセールスドライバーから顧客への電話がつながらない。
・同社コールセンターへ電話がつながりにくい。
・オープン型宅配便ロッカーPUDOを利用した一部荷物の発送・受取が出来ない。
日本貨物鉄道 [PDF] 貨物情報システム障害に伴う貨物列車への影響について(7月2日12時現在)
・KDDI回線を利用している同社の貨物情報システムへの障害が発生した。
・各駅において荷役作業への支障、貨物列車の遅延が発生した。
日本郵便 通信キャリアの通信障害に伴う影響について
・貨物列車が遅延したことの影響を受け、郵便物、ゆうパックなどの宅配に遅延が発生する恐れがある。
航空関連
影響を受けた事業者 影響概要
日本航空 ・羽田空港、成田空港等で使用されているスタッフ用無線機が使用できなくなった。*15他社回線を使用する無線機に切替し、運航への影響は出ていない。
ジェットスタージャパン ・社内業務連絡に一部がしにくくなるなどの影響が発生した。他社回線を使用する無線機に切替し、運航への影響は出ていない。
金融関連
影響を受けた事業者 影響概要
大垣共立銀行 ATM通信障害の発生について
・同行の店舗外ATM221台の内、190台が利用できなくなった。障害の影響は長期化し7月4日15時35分頃に全面復旧した。
・銀行内ATMや全国ファミリーマートに設置されたゆうちょ銀行ATMからの利用は可能。
au じぶん銀行 【お詫び】au携帯電話サービスがご利用しづらいことにより一部サービスがご利用しづらい事象について
・Webからの口座開設申し込みやログインパスワード再設定など、取引時にSMSや電子メールを利用するサービスを利用しにくい事象が発生した。
琉球銀行 KDDI回線障害の影響について
・職員の業務用携帯電話につながらない事象が発生した。
水道関連
影響を受けた事業者 影響概要
札幌市水道局 ・水道メーターの検針データの送信が端末から行えず、7月4日の検針作業が中止された。*16
医療関連
影響を受けた事業者 影響概要
いとう王子神谷内科外科クリニック 外科医に連絡がつかず手術が出来ないなどを理由として、心臓疾患で緊急入院が必要な患者の受け入れを5か所の病院に打診するも断られた。*17
バス関連
影響を受けた事業者 影響概要
京成バス KDDIの通信障害に伴うバスロケーションシステムの案内停止について
・バスロケーションシステム(京成バスナビ、高速バスロケWebサイト)においてバスの位置情報、遅延情報等の一部情報が正常に表示できない。バス停において接近表示機での案内を停止。
小田急バス 通信障害の発生について(2022/7/2 9:00現在)
・KDDI回線を利用するバスロケーションシステム、業務無線等に障害が発生した。
東京空港交通 【7/2】携帯電話網障害に伴う通信エラーについて
・リムジンバスにおいて、交通系ICカードを使用した決済が出来ない事象が発生した。
東武バス ・東武バスグループの一部のバスで交通系ICカードを使用した決済が出来ない事象が発生した。*18
神奈川中央交通 車両通信が安定しないことにより不具合が発生した。
その他
影響を受けた事業者・イベント 影響概要
トヨタ 【重要】au回線障害によるコネクティッドサービス障害について
T-connectサービス、ヘルプネット、マイカーSecurity、エージェント/エージェント+、オペレーターサービスが利用できない事象が発生した。
マツダ 【重要】au回線障害によるコネクティッドサービス障害の発生について
コネクティッドサービス、マツダエマージェンシーコール、マツダアドバイスコールが利用できない事象が発生した。
スズキ 【重要】 通信システム障害のお知らせ
・スズキコネクトに接続ができず、スズキ緊急通報が利用できない事象が発生した。
セコム 障害発生のお知らせ
・一部セキュリティシステムの通信、スマホアプリの利用に支障が発生した。
・対象のスマートフォンアプリは「SECOM Home Security App.」「SECOM HS 2」「いつでもみまもり」「SECOM カンタービレ」「SECOM System Security App.」「AZスマホ」「ココセコム」「みまもりホン」。
アイコム IP無線サービスの通信障害発生報告
・同社のIP無線サービスで接続がしにくい、通話しづらい事象が発生した。
ライブコンサート 複数のコンサートで通信障害により電子チケットの表示ができない場合に備え、Wifi環境で事前に準備を済ませておくことや、特例でのスクリーンショットでの入場受付、窓口対応などの呼びかけが行われた。影響を受けたとして報じられていたのは、あいみょん、HYDE、ジャニーズWEST、Sexy Zone、Kis-My-Ft2。*19 *20 *21
Jリーグ 電子チケットのQRコードをスマートフォン画面上に表示できない恐れがあることから、事前にQRコードを印刷するなどして会場へ持参するよう呼びかけが行われた。*22 *23

更新履歴

  • 2022年7月3日 AM 新規作成
  • 2022年7月3日 AM 続報反映(最新状況の反映と影響を受けた事例追記)
  • 2022年7月3日 PM 続報反映(障害原因の追記等)
  • 2022年7月4日 PM 続報反映(障害状況の更新等)
  • 2022年7月6日 AM 続報反映(障害復旧の更新等)

*1:KDDI高橋社長が通信障害を陳謝、原因はコアルーター交換時の不具合とアクセス集中,日経クロステック,2022年7月3日

*2:auの通信障害「ほぼ回復」も復旧宣言は5日夕方に,Impress Watch,2022年7月4日

*3:「au通信障害」KDDIの会見質疑詳報、なぜここまで障害が長引いたのか? スマホ時代の課題とは?,ケータイWatch,2022年7月5日

*4:「au通信障害」完全復旧のKDDI会見質疑詳報、総務省幹部も入った復旧作業の舞台裏は,ケータイWatch,2022年7月5日

*5:KDDI髙橋社長が「au通信障害」謝罪、現時点で判明している経緯とは,ケータイWatch,2022年7月3日

*6:KDDIの通信障害、総務省が早期復旧と周知を要請,日本経済新聞,2022年7月2日

*7:金子総務大臣がKDDI通信障害の情報周知を問題視、幹部派遣は「技術に精通した職員」,ケータイWatch,2022年7月5日

*8:KDDI 通信障害 総務省消防庁 通報に影響のおそれ 注意呼びかけ,NHK,2022年7月2日

*9:KDDI障害“119番つながりにくい”消防が注意呼びかけ,NHK,2022年7月2日

*10:KDDI障害で119番できず…体調不良の20代男性、1人で消防署に駆け込み救急搬送される,読売新聞,2022年7月4日

*11:auなどに通信障害【速報中】「復旧作業終了」も通じにくい状況,NHK,2022年7月3日

*12:KDDIで発生した大規模な通信障害で県内にも影響,NHK,2022年7月4日

*13:アメダスのデータも配信できず KDDIの通信障害が影響,北海道新聞,2022年7月2日

*14:アメダスデータも一部配信できず KDDIの通信不安定の影響,NHK,2022年7月2日

*15:KDDI、全国で通信障害 楽天モバイルにも影響,時事通信,2022年7月2日

*16:KDDIの大規模通信障害 暮らしの幅広い分野に影響,NHK,2022年7月4日

*17:au不通「手術できない」 KDDI障害,朝日新聞,2022年7月4日

*18:東武バス 一部でICカード決済できず KDDIの影響,NHK,2022年7月2日

*19:KDDI通信障害、ジャニーズWESTのライブにも影響 大阪,産経新聞,2022年7月2日

*20:Kis-My-Ft2の電子チケット表示にも影響 au通信障害,毎日新聞,2022年7月2日

*21:au通信障害は芸能界にも波及 ジャニーズファン緊急協力態勢「携帯お貸しします!」,東スポ,2022年7月2日

*22:KDDI通信障害 設備の一部に不具合 復旧メド立たず 影響広がる,NHK,2022年7月2日

*23:KDDI通信障害、物流などに支障 福島県内、119番にも影響,福島民友新聞,2022年7月3日