“過去最大”の通信障害、発生の経緯は？ 緊急会見で判明したこと

通常メンテの一環で起きた大規模障害…
恐ろしい…

会見観てないのでこの記事の内容ベースだけど、輻輳からの影響の出方怖いなぁ。
自分が関連してるのでこういうのあると怖すぎるな( ꒪ͧд꒪ͧ)

au通信障害のわりと詳しい記事。iPhoneではアンテナ表示が不通でも、データ通信が利用できる場合もある(´・ω・`)

"サーバ交換時の障害からの切り戻しを契機に、ユーザ端末からのアクセスが集中。VoLTE交換機の輻輳から加入者データベースにも輻輳が拡大。回復が難しい全国規模の通信障害へとつながった。"

あわ、やっちまった系だな。
かなり荒いけど全部落として順番に起動して、リクエスト受付にすれば早いよ。
まあ、かなりやばい方法だけどな( ˙◊˙ )

大凡復旧したと聞いたが…影響がでかすぎたな
◇

データ通信は安定して復活してるんで標準のVoLTE以外に通話手段があるにしても、未だに通話できんのは大きいな。

冗長構成をとっていてもそのメンテで輻輳。
知らない人は、基盤が弱いって怒るだろうなぁ。あってはならないし、ほしくないけど、全然止められないコアの交換は冗長してるからこそ輻輳が起こる原因になりえる。

勝手な妄想だけど。
作業を始めたのが土曜の午前01時～
この時間帯に想定を越える通信負荷が発生していた可能性、その影響で通信遅延を嫌う音声通信からアラーム、処理を元に戻す過程でさらに負荷が上がり輻輳状態へ。

劇場版パトレイバー2かと思って焦ったわー

いつになったらつながるんですか

謝罪会見で社長の左にいた吉村さんって技術者から役員になったのね＞

正直さっぱりわからん😅ただ、そういうのに詳しそうなツイートがほぼ対応を褒めているのを見ると、KDDIはよく頑張ったんだろう。

土日の間に復旧かつしっかりと会見出来たのは流石と言うべきか
まぁ高い料金払ってるからねw

予想より相当ややこしい状況になってた。
記事だと最初に障害を起こしたのは「交換したサーバ」と書いてあるけど質疑応答だとルータだったような？

auのあれ 掃除のおばちゃんが鯖の電源引っこ抜いたみたいな話だな

発端は「通常メンテナンスの一貫でのサーバ交換」いつもの作業でのちょっとしたミスが膨らんでこうなったってことなの？保守現場を思うと心臓がキュッとなるね…

安心レンタルWiFiならクラウドWiFi東京一択！

割引クーポンコードは→(cloudsmartch2)

復旧お疲れ様でした

KDDIの社長の会見、オンタイムで全部見てしまった。技術がわかる社長はやっぱり強い。

技術者のトップが逃げないで真摯に会見したのはプラスでしたね。

あぁ、まだ根本原因は分かってないのね

> 3日時点では大規模障害への対応は続いており、障害発生の要因や、障害が拡大した原因について詳しく分かっていない点もある。

一時不通になることが正規手順だったのか、不通になったこと自体がメンテの設定ミスだったのか…

> その際に、一時不通となっていた

何で午前一時過ぎの時点で、サーバーがダウンする程のリクエストが発生したんだ？
深夜でも通信量は変わらないのか、バッファに溜まってた？

> 一時不通となっていたスマートフォンなどの端末からの通信リクエストが一斉に発生

メンテナンス中の小規模な不具合が波及して大規模障害になったのか。
ここ数年ドコモやSoftBankでも通信障害は何度かあったけど、結果auが一番ヤバいの起こしたな。
不具合対応したSEの方々ご愁傷様です。

審議中／

『iPhoneでは、画面右上のアンテナ表示が不通になっていても、データ通信が利用できる場合もあるという』これがやっぱり不思議。iOSの通信周りの実装か、KDDIの通信周りの実装か、どっちかが変なことになってない？

加入者DBの一部で「データ不一致」って！なにそれ怖い。。。
AUユーザーに連絡取ろうとすると違う人物に掛かる可能性があるチュー事け 藁
ちぐはぐになった個人DB。バックアップはどうなっとるのかいなぁ。
契約書から抽出すんのとちゃうんやろうなぁwww

読んだ。

結局、使っていなくても常時接続確立のリクエストは数十分おきに送受信しているので、早く障害を終わらせたいなら、回線を使ってない奴はSIMを引き抜けって事よね。

すごく細かく書かれていて「現時点で判明している」事に関してはこの記事を読めばある程度把握できる

仮想敵国と戦争し、
サイバー攻撃を受けたときの、
迫真のドキュメントとして
小説に使えそう。

対処が大変なタイプの障害ってことはなんとなくわかった
そもそも発端のなぜなぜってところはこれからの調査って感じかな

よくまとめられていて、分かりやすい記事でした

この記事見てたら、出てきた広告がこれなので頭に入らない

輻輳怖ひ

通信障害の発端となったのは、1台のサーバ 中略 ルート変更の作業を行っていた2日午前1時35分ごろ、音声通話機能を制御するサーバ群である「VoLTE交換機」で異常を知らせるアラーム（エラー警告）が発生

何が起きたのかとてもわかりやすい記事でした。
さすが専門メディア。
なんでそうなったかはこれから調査して推測するしかないわなあ。あとはKが包み隠さず話すかどうか。

輻輳って怖いな

起点はまぁループ接続とかそれと同程度のチョンボだったんだろうね。
せっかくの旅行が台無し。

全部とは言えないですが大分わかって来ましたね。

発端はサーバ(ルータ？)の交換の為の経路変更。しかしそれがうまく行かず切り戻しをしたが、切り戻した瞬間にVoLTE交換機にアクセス集中して以降輻輳による不具合が連鎖的に拡大して大障害に。
直接原因は現場技術者の＞続く

起きてしまったことはしょうがないし、同じようなこと（同じことではない）を繰り返さないための体制作りが大事。
政府も「基本料金下げろ」とか言うのも程々にしないと、品質保証のための経費かけられなくなるから大概にしてね。

結構詳しく発表してたのね
よくまとまってる記事

原因は中継網の交換機輻輳ということだが、それでこんな全国規模になって復旧に時間かかるのが不可解やね。配布したファームにバグでも入ってた？

まだ繋がってないけど、ａｕユーザーの皆さんは使えますか？

３ページ目が具体的な経緯
定期的なサーバー交換時に異常が発生→連鎖拡大が要因らしい

書きました。3日時点で判明している範囲で、通信障害の経緯を整理しました。

「作業前の状態に戻す『切り戻し』作業」ってむつかしいんだろうな。
去年10月に起きたドコモの通信障害のときも「切り戻し」時に輻輳起きてたよね。

別に謝れとも賠償しろとも言わないが、とにかく再発防止策だけはこれ以上ないくらいしっかりやってほしい、とだけは言いたい。

投稿時間:2022-07-03 19:01:02