Network Failure at Osaka Region
Incident Report for p1kachu.net
Postmortem

全体的に原因不明 勝手に死んで勝手に治ったことしかわからん

(in JST)
2022/6/28

  • 07:37:20 (Concordia) PPPoE が爆散
  • 07:42:53 (Concordia) 以降 eth1 で transmit queue timed out などのエラーが連発
  • 09:50:00 (全ホスト) このあたりで全体的に大阪側のインターネットが死んだっぽい 東京側から打つ手なし
  • 17:38:20 (全ホスト) 勝手に大阪側のインターネットが復活
    VPN も復活したけど PPPoE が落ちたままで Concordia の HAProxy が死んでたので検知できず

2022/6/29

  • 19:15:00 (Concordia) インターネット復活により osen 経由で SSH アクセスができることに気づいてログイン、手動で PPPoE と HAProxy を復活させる
Posted Jul 01, 2022 - 11:15 JST

Resolved
ねっとおちた
Posted Jun 28, 2022 - 07:30 JST