この文章を三回読んでも意味がわからない自分の理解力のなさを痛感するぜ＼(^o^)／

とりあえず電話できるようになってよかった😄

主原因はコアルータのルーティング変更で、障害検知から20分で切り戻しているが、その後の輻輳が収まらず丸一日継続するとか凄まじい。IoT回線が多かったのが原因なのだろうか。

ITmedia、Impress Watch、日経クロステックあたりのIT系メディアはちゃんと踏み込んで書いてるな。

新旧ルーター交換によりトラフィックのルートが変更に→ルーターで障害発生→ルートを切り戻ししようとしたがアクセス集中により輻輳、オーバーフロー→データベース不整合発生

地獄😇

そういや障害は切り戻してるからHW障害の交換云々は関係ないなと思ったところ
--
また電話を(略)VoLTE交換機がダウンしていたことで、加入者データベースからVoLTE交換機へアクセスできない状態となり(略)それぞれ保有するデータが一致しない状況にもなっており
--
なるほど

日常メンテこそミスを起こしやすい作業でしょうね。慣れ切っているのでヒューマンエラーをやっちゃうんでは？

しかし久々に聞く専門用語だらけ。“輻輳”なんて何十年ぶりだ。あと traffic は“トラフィック”ではなく“トラヒック”なんだね。

( の画像を整形加色)

障害の原因見てるけど、意味不明やな。
ルーターの新旧切り替えによるルート変更で障害、切り戻そうとしたがアクセス集中により輻輳
なんでこれの復旧がこんな泥沼化するねん。

「au通信障害」、現時点で判明している経緯とは ドコモもそうだけど、端末管理系に障害がでると、被害が大きくなるきがする、そして端末管理トラフィック増大で流路系にも影響が出て…というのはドコモと同じ…端末管理系障害時の対策を6Gに盛り込むべきな気がする…

こんなこともあるのですね。メンテナンスは日々行われているはずでなぜ今回のルーター交換でこんな事態を引き起こしたのかよくわかりません。

メンテナンス作業に、工作員を送り込めば簡単にテロが起こせてしまう

>今回の障害は、日々のメンテナンスの一環として実施された作業のなかで発生した(ルータ交換)
>ルートを切り戻そうとしたが、アクセスが集中して再接続要求が多発し、全国で輻輳が発生してしまった

未だに一部通信制限が掛かっている復旧のようですね。
ルーターを新しい物に交換が今回の通信障害発生の起因のようです。作業員は顔面真っ青通り越して美白？

システム的に橋渡し受け渡しが多重で、それが次々パンクしたってことか？ ヤレヤレ(；´Д｀)

「アクセスが集中して再接続要求が多発し、全国で輻輳が発生してしまった」。

現地点での一連の経緯です

今回の障害において、3G停波の影響はない。
→これはウソでしょ。3G停波していなければ、回避策はあったのだから。

んんー？よくわからんのう。冗長化が利いてなかったってのも謎だし。HWのメンテナンスだから間違えてループさせちゃったとか…？

他メディアよりは障害の詳細が詳しくて分かりやすい記事。新しいルーターに切り替えたら不具合が生じたので切り戻した。これはよくある対処の仕方だし、間違っていないと思う。問題は、VoLTE交換機がネットワーク全体でボトルネックになるような設計だったことかな？

通信、電力など現場担当者の責任感が安定運用に寄与している分野で、原因究明に真摯に取り組む以上の責任を問うことは長期的には大きな損失と思う。

ルーターの入換作業をやろうとしてトラフィックのルート変更をしていたらルーターに障害が発生し、それがVoLTE交換機へのアクセス要求を過大に積み残すことになって通信障害につながった、ということなのね…

ほうほう。

別記事の質疑応答編読んだけどよく対応してるなー＞

引用: 当初予定されていたのは、古いルーターを新しいルーターへの交換。これにより、トラフィックのルート変更となるなかで、一部の音声通話が不通となってしまった。

(2022年7月3日 13:06)


「au通信障害」KDDI髙橋社長の会見質疑詳報、なにが起きたのか、「ドコモの教訓」は？ - ケータイ Watch
(2022年7月3日 18:39)

位置情報のアンマッチも障害の要因かぁ。ドコモでもそんなのあったな。
国内どこにいるかわからんと接続できんから無線ならではの事だけど。

現在判明してる障害経緯はこちらが詳しい。

通信障害は責められて当然ですが、旧電電公社という立場から国内の有線部分のインフラを独占的に保有するNTTと、それを使用しないとサービスが提供できない携帯事業者との関係は意識する必要があると思います。

NTTのドコモ吸収吸で不当競争になっていないか確認が必要。

レポーターの関口 聖さん、長いキャリアだな〜
少なくとも十数年前には記事書いてた。

機器交換による障害よ…

障害は何かしらの形で起きるものとして、切り戻しをするケースのコンティエンジェンシープランがあまかったと思わざるを得ない。

光回線を引く際、適当な嘘をついたあげくに、現場に派遣される業者にクレーマーだから気をつけろ呼ばわりしてくれたKDDI。二度と使うことはないのでどうでもいい。

4Gで日本の衰退が止まらなかったので、無理して5G、さらに高速目指して失敗かな。

ネズミがいそう・・・

原因の説明が事実なら予想できるミスだしミスが起こった場合の対応も想定すべき内容。
1）ミスを起こさない方策
2）それでもミスが起こった場合の方策
以上2点があって当たり前すぎる内容。
これはau復旧ご苦労様ですとか呑気なこと言ってる話じゃないと思うよ。
===

ありがちっちゃあ、ありがちなミス……自分も身に覚えある

しかし、KDDI程の大企業でこんな事故があると「他人事じゃない」と言って品質管理部門が張り切るのがなぁ……ｗ

今のところの経緯

こういう通信障害の時って、ユーザーの端末が稼働しっぱなしの中で復旧しようとするから、再接続要求が何度もされて事態が悪化すると思うのね😗

根本的な原因はメンテナンス作業失敗じゃん。ルーター障害発生というけど、そもそも人的ミスによるもの。

一応、現状わかってる障害原因はこれ。
メンテによるものだから、事前に検証作業はやっているものだろうから、本番で思わぬ障害が発生した感じかな

なるほどなあ……。ルーターメンテの失敗、VoLTE通信仕様故の輻輳、それに伴って関連データベースサーバも不整合を起こすという負の連鎖で近年稀にみる障害に繋がったんだなあ。

作業計画の時点で問題点を見抜けなかったみたいだね。それだけシステム構成が複雑になりすぎて、KDDIの担当者も全容を把握していなかったのだろう。まあ、作業なんて業者丸投げだしね。

この記事が経緯分かりやすかった。

やっぱり、コア装置の工事は怖いよねぇ。。。とゆうか、結局故障じゃなくて工事が原因じゃないか！最初は故障って言ってたよね。復旧遅くて変だとは思ってたけど。

これを読むと本当に紙一重で稼働していた感がありますね。
どこかで障害が起きたら連鎖的に障害が発生してしまうんですから…。
どうでも良い話ですが「Traffic」ってトラヒックなんですね。。

経営陣が内容理解して説明してるとしたら大したもんだよ。
資料に「トラヒック」って書かれてるのが気になるけど

「今回の障害は、日々のメンテナンスの一環として実施された作業のなかで発生。古いルーターを新しいルーターへの交換(要約)」ふつうに行われる作業で起こるネットワークの深淵「 」

VoLTEって1アプリケーションにしてはネットワークに与える負荷がでかいのでは

音声通話がしづらい、途切れたり、と都合よく書いてるけど全然違う(💢'ω')音声通話もショートメールもナビも何も使えない‼️勿論今も‼️

「17時半復旧予定」って期待させないで‼️
まだ全く復旧してません‼️

今日の面接が先方と連絡取れずオジャンだよ💢

1箇所の障害が他に連鎖して対応範囲が広がる… 恐ろしい話や。この連鎖って今回の作業以外でも起こるんかな。復旧した後の方式見直しまであると地獄やな。

なるへそなすね
初手ガバからの迅速なリカバリ、やるやん

なんかよく分からんけどもう数が多すぎて銀行にしろネットワーク会社にしろたいへんよなあ・・・

auの障害説明読んだけど、納得感ないなぁ。
トラフィックが多くなり過ぎて捌けません、ならその対処法はマニュアル化されてるはずだよね。
トラフィックが以前よりも増加したせいで、少しずつ捌いていっても普及に時間がかかるのかな

AUの通信障害では、加入者データベースとVoLTE交換機がそれぞれ保有するデータが一致しない深刻な状況になっているという。とすると、加入者データベースが外部から書き換えられた可能性を疑ってしまう。外国勢力が動いた可能性はないのか。しっかりと検証してもらいたい。

補償がどうのこうのと，そう言いたいのはわかるが，まったく悲しくなるわ

こういう便利機能が邪魔するケースこれからもっと増えるだろな>“深夜ではあるがVoLTEでは50分にいちど端末はネットワークに登録処理をするため、一定の通信が実施されており通話できない時間が発生したことで輻輳に”

初手の交換機アラーム早々に復旧したあとに
3連続コンボで障害の津波ガンガンにきたら
当事者だと吐きそうになりますねコレ。

なるほど、そういう経緯でしたか。うーん、うちではまだ通話ができないですね。

■ より

auまだヤバイ？🤣

"VoLTE交換機がダウンしていたことで、加入者データベースからVoLTE交換機へアクセスできない状態となり、加入者データベース装置も輻輳状態に陥った"

計画作業失敗(想定内)、切り戻し作業で想定外の状況に。
「変更を取り消して、ルートを切り戻そうとしたが、アクセスが集中して再接続要求が多発し、全国で輻輳が発生してしまった」

ちゃんと専門用語とシステム構成図で説明してくれてるからわかりやすくて信頼性が高い印象。
ざっくり言うと、パソコンが調子悪い時やたらとダブルクリックしたり怒りに任せてキーをバンバン連打すると余計再起不能になるのと似ています。

スマホ(子供)A地点にいるよ。
VoLTEの交換機(親)わかった。迎えに行くよ^^
輻輳とは、親は子供の言うことが聞こえない。
聞き間違えてB地点に迎えに行く。
ので会えない(通信通話出来ない)

別に誰も悪くないのだから謝らなくていいのに
携帯電話の初期なんて繋がらないのが当たり前だったじゃない
有り難いことが当たり前になってしまうと感謝されなくなるんだね

なるほど単純な新ルータ交換の予定が予想外の混線となったって感じか複合サービスしてる分そこでの予期せぬ動作したんだなー

だから一時的に「この電話は現在つかわれていません」といわれたのか…

対応した方々本当にお疲れ様でした！

今日中に復旧してくれれば良いが…😥

「au通信障害、影響回線数は最大で3915万。同社史上最大規模」かぁ。auでんきを契約している関係で、楽天モバイルからの移転先はUQ MOBILEにするつもりだったけれど、LINMOなどにした方が（いざという時に）安全なのかもしれない。

やっぱり に した が じゃねーかよ！

の が原因とか、二次的現象で誤魔化して発表してたことも謝れよな。

原因は、このへん とか、このへん の記事とかどうぞ。

詳しい説明が来たか。玉突きのように次々と問題が発生して地獄だ。

つらい

au障害の記事を読むと 身につまされて 現場で作業してる人を思うと悲しくなってくる😥

交換機の輻輳から加入者DBまで行っちゃったら 一旦全部の発呼を止めないと解消できないんじゃないだろうか💦

大変だと思うけど がんばって😢

ケータイ Watch:

なんかもうなるときはなるから仕方ない的なやつだけど規模がでかいからなぁ

通信が輻輳とかどうとかではなく、結局メンテナンス作業を失敗した、それが全ての原因なんだから、まずそこから説明しないと。そしてそれだけ聞けばこっちは十分だから。

なるほど

経緯説明できるとこまでいけてた

システム間通信で宛先が応答返さなかったときにリトライする（これは一般的な設計なので問題無い）のが、宛先の応答が極端に悪くなったときにリトライ通信が嵩んでしまって

会社ケータイが静かで良かった！(ﾟ∀ﾟ)

今回の事の経緯が解りやすい

今回のauの障害で、携帯通信がどういう仕組なのかちょっと触れられているので、興味あれば目を通しておくと良いかも?

ネットワークとはこういうものではある →

>VoLTE交換機がダウンしていたことで、加入者データベースからVoLTE交換機へアクセスできない状態
>加入者データベースとVoLTE交換機がそれぞれ保有するデータが一致しない状況
闇を感じる

原因解説出てた。
作業の切り戻し手順が機能しなかったということなんだろうけど、これならここまで長期化する気がしない。

何より遅い
もっと早く対応せよ

「今回の障害は、日々のメンテナンスの一環として実施された作業のなかで発生した。当初予定されていたのは、古いルーターを新しいルーターへの交換。」
作業ミスなのか？

今のところはこういう状況らしいですよ｡

KDDIクラスの通信会社がルータを取り替えるのなら、予行演習は必須。
そして交換当日は、異常がないか確認させるために各サービスの担当者を待機させる。
設定変更は必ず2人か3人のエンジニアがチェック。
そして設定反映。
これくらいのことをやるリソースはKDDIにはある。

大手ですらシステム再起動 うまく行かないんですね。それなのにユーザには再起動要求するのはなぜだろう。

au復旧してきたか。
原因は
・交換機メンテナンス時の切り戻し想定不足
とかかな・・
輻輳起きないように流量制御が必要、とか。
ふだんはうまくいってるから、切り戻しなかったか>

「VoLTEでは、50分にいちど端末はネットワークに登録処理をするため、一定の通信が実施されており、通話できない時間が発生したことで輻輳に」

事前にNW閉塞掛けておけば防げたかもね。
総務省からガッツリお叱りを受けるでしょう。

データーベースの不一致と見て、南無。。と思わずにはいられないKDDI障害。

加入者データベースとVoLTE交換機がそれぞれ保有するデータが一致しないって話でデータ自体は大丈夫なんだな。なるほど

ほんとうに復旧するでござるか～？

あぅ～：
「古いルーターを新しいルーターへの交換。これにより、トラフィックのルート変更となるなかで」「ルートを切り戻そうとしたが、アクセスが集中して再接続要求が多発し、全国で輻輳」

au通信障害の発端は「ルーターの交換」…他社も他人事じゃないでしょうね(´-ω-`)
『

詳細な仕組みまでは分からないけど、VoLTEの仕組み自体に問題がありそうな話な気がする。広域サービスの基盤としてあまりにも脆弱というか、異常時のリカバリーが考慮されてない感じ。

ルーター？
業界二番手がそんなチョンボやらかすのか…

この記事分かりやすかった

メンテ中は端末側のリクエストを停止するとか出来ないのかな。

安心レンタルWiFiならクラウドWiFi東京一択！

割引クーポンコードは→(cloudsmartch2)