東証、障害の原因を特定 「自動切り替えできない設定値になっていた」
東証の全取引がまる1日停止した、「arrowhead」の障害。ストレージ内でメモリ故障が起き、サブ機にも切り替わらなかった。メモリ故障による障害が起きた際、自動切り替えできない設定値になっていたという。
www.itmedia.co.jp
https://www.itmedia.co.jp/news/articles/2010/06/news063.html
東京証券取引所は10月5日、株式売買システム「arrowhead」（アローヘッド）で1日に発生した障害の原因を特定し、
4日中に修正したと発表した。
障害は、ストレージ内でメモリ故障が起き、サブ機にも切り替わらなかったことが原因。
メモリ故障による障害が起きた際、自動切り替えできない設定値になっていたという。
https://image.itmedia.co.jp/news/articles/2010/06/l_yx_tos.jpg
東証のニュースリリースより
arrowheadのユーザー情報などを格納するストレージ「共有ディスク装置」の1号機に搭載されたメモリが故障したことに起因。
1号機が障害を検知すると、切り替え用設定値に従って自動で2号機に切り替わるはずが、切り替わらなかった。
調査したところ、メモリ故障が原因の障害パターンが発生した際、自動切り替えできない設定値になっていたという。
設定値を変更すれば、自動切り替えできることが判明。4日にシステムに適用し、自動切り替えが動作することを確認したという。
稼働前のテストでは、1号機と2号機相互の死活監視を途絶えさせても、自動切り替えできていたという。
1日の障害では、東証の全取引が終日停止した。
▼追加ソース![]()
![]()
![]()
![]()
![]()
![]()
arrowhead の障害に関する原因と対策について | 日本取引所グループ
日本取引所グループは、東京証券取引所、大阪取引所、東京商品取引所等を運営する取引所グループです。
www.jpx.co.jp
システム障害に係る調査委員会の設置について | 日本取引所グループ
日本取引所グループは、東京証券取引所、大阪取引所、東京商品取引所等を運営する取引所グループです。
www.jpx.co.jp
エラー｜NHK NEWS WEB
www3.nhk.or.jp
これとトランプ入院が被ってたら危なかった
テスト仕様書作った奴の責任
>>9
指摘しなかったレビュアも同罪
指摘しなかったレビュアも同罪
>>13
うちのシステムも、レビュー後に問題・改善点をリストアップしたけど、なんだかんだ理由つけられて直してもらえなかったぞw
うちのシステムも、レビュー後に問題・改善点をリストアップしたけど、なんだかんだ理由つけられて直してもらえなかったぞw
>>307
結局はお金の問題なんだと思う
結局はお金の問題なんだと思う
だから、何でそんな設定値になっていたの？
>>17
私の推測では
テストするために設定値を書き換えて
テスト終了後に元に戻して無かったんじゃないかな?
私の推測では
テストするために設定値を書き換えて
テスト終了後に元に戻して無かったんじゃないかな?
えー
テストしてないの
他にもしてないテストあるだろう
正直に言いなさい
テストしてないの
他にもしてないテストあるだろう
正直に言いなさい
>>29
設定値があるって事はテストしてるはず
つまり想定されてた障害のケース
設定値があるって事はテストしてるはず
つまり想定されてた障害のケース
切り替わる設定はした
だが、そのあと設定値をいじくって切り変わらなくなってた
だが、そのあと設定値をいじくって切り変わらなくなってた
これで誰も責任取らないつもりなんやな
>>124
富士通「引き渡し後に東証側がやると思った」
東証「そう設定されて設置してくれたと思った」
富士通「引き渡し後に東証側がやると思った」
東証「そう設定されて設置してくれたと思った」
>>129
あれ思い出したわ
現場猫のオアシス運動ｗ
あれ思い出したわ
現場猫のオアシス運動ｗ
メンテ時に一時的に設定変えて戻し忘れたとかかな
[config]
auto-kirikae=false
auto-kirikae=false
いやーよかったなバグじゃなくて。
日本の技術力を見せつけたわ。
設定どおりに動いたんだから。
日本の技術力を見せつけたわ。
設定どおりに動いたんだから。
どこの派遣社員がやらかしたのかな？
更新してもらえないなｗ
更新してもらえないなｗ
ホットスタンバイが有って自動切り替えするとか贅沢運用なので待機系は通電しないは割とある。ホットスタンバイだと2個ライセンスが必要だが止めて有ればライセンスは一個で良い類い。だからiOのエラー割り込みとかデフォルトでパニックダンプ取っておしまいとか多い。
>>232
東証レベルでそれやるかね？
東証レベルでそれやるかね？
手動で再起動出来なかったのはその日の９時前に受け付けた取引が消える恐れがあったとか
約定は翌日になったら全部失効することになるから
後で面倒なことにならないように全日取引停止にした可能性あるぽい
約定は翌日になったら全部失効することになるから
後で面倒なことにならないように全日取引停止にした可能性あるぽい
ハード・ソフト面の問題もあるけどそれ以上に運用面のデメリットが大きかったと
【東証システム障害】東京証券取引所が終日売買停止と発表
blog.yorolog.com
テストした後設定ファイル戻すの忘れたんだなwwww
システムエンジニアが恐れているやつ！！
設定一行で、数字1文字の間違いで
こんなことになっちゃう！！
設定一行で、数字1文字の間違いで
こんなことになっちゃう！！
これは富士通のミスだろ
まぁ、東証の責任もあるだろうけどさ
まぁ、東証の責任もあるだろうけどさ
いやー案外こういうのはあるんだよな
ヒヤリハットだわ
ヒヤリハットだわ
コメント一覧