https://www.itmedia.co.jp/news/articles/2010/06/news063.html
東京証券取引所は10月5日、株式売買システム「arrowhead」（アローヘッド）で1日に発生した障害の原因を特定し、
4日中に修正したと発表した。障害は、ストレージ内でメモリ故障が起き、サブ機にも切り替わらなかったことが原因。
メモリ故障による障害が起きた際、自動切り替えできない設定値になっていたという。
東証のニュースリリースよりarrowheadのユーザー情報などを格納するストレージ「共有ディスク装置」の1号機に搭載されたメモリが故障したことに起因。
1号機が障害を検知すると、切り替え用設定値に従って自動で2号機に切り替わるはずが、切り替わらなかった。調査したところ、メモリ故障が原因の障害パターンが発生した際、自動切り替えできない設定値になっていたという。
設定値を変更すれば、自動切り替えできることが判明。4日にシステムに適用し、自動切り替えが動作することを確認したという。稼働前のテストでは、1号機と2号機相互の死活監視を途絶えさせても、自動切り替えできていたという。
1日の障害では、東証の全取引が終日停止した。
- 富士通みたいな三流企業に頼むから..
- その設定ファイル誰がイジったんだろう
- ズコーッ
- マヌケだな
これは責任問題になるんじゃないの？ - これとトランプ入院が被ってたら危なかった
- なんでちゃんとテストしないのか 学校でと避難訓練とかしてるよ 誰か教えてあげて
- 白谷愛糞くんの正拳
- テスト仕様書作った奴の責任
- >>9
指摘しなかったレビュアも同罪 - アホかよｗ
実際に故障を模してチェックしていなかった
ってことだわな。 - >>10
何を今更
Cocoaで散々見てるだろ
しっかり金入れない体質から来てるんだろなぁ - >>10
本当これ
普通に考えたらメモリが壊れたときの試験くらいやるだろう - >>23
メモリのフォールトインジェクションは難しいよ
ハード開発ならまだしも SI ではやってないケース多いと思う - >>31
難しいからという理由で試験をしないの？
システム開発するだけの能力がないだけじゃん - >>32
お金次第だね - 現場猫のIT版だな
他の人が設定チェックしたと思ったから
自分はチェックせずOK出した - よくわかんねえが、男女関係で言ったらメインの男に捨てられたオンナが
183センチでしか設定してなかったんで、せっかくの174.6センチの
高学歴で家柄良すぎで文京区の大名屋敷の跡地の古いが広い家に住んでて
両親大学教授でイケメンでスタイルよくて、超一流企業勤務でそろそろ
管理職各停で人望もある好青年の求愛をことわっちまう的な？ - 富士通は、何も責任取らないの？
東証は被害者？ - >>14
責任は感じるもの - BPSなら
- だから、何でそんな設定値になっていたの？
- >>17
私の推測では
テストするために設定値を書き換えて
テスト終了後に元に戻して無かったんじゃないかな? - >>34
あるある - >>34
それだな - なんだか残念な話しだね
- 切り替え忘れが悪いんじゃなくて、切り替え忘れを検知する仕組みが必要だね
- あたおか韓国人の嫌がらせか
- 糞富士通にちゃんと賠償させろよ
- Linux だと panic_on_unrecovered_nmi かな
デフォルト 0 の罠パラメーター - 納品時チェックでは動いたって書いてあるんだから後から誰かが弄ったんじゃないの？
- こういうのって定期的にチェック入れるもんじゃないの？
稼働前にテストしたっきりで以後ずっとノーチェックだったのかな - >>25
稼働させたら後は知らなーいくらいのノリだったんだろ
定期的に障害発生しても問題ないかのテストを行うべきだったね - ノーテストで本番リリースか、さすが富士通クオリティ。
- これ、富士通側の責任？
- えー
テストしてないの
他にもしてないテストあるだろう
正直に言いなさい - >>29
設定値があるって事はテストしてるはず
つまり想定されてた障害のケース - 設定値変えても記録残さない
ITあるある - これが日本だ！
みたか海外どもめ - 設定値って01じゃなくてしきい値でもあるのか
- >>36
当たり前だろ
ログの一文からしか分からないケースだってあるぞ - ネットワーク疎通監視までしかしてなかったとか？
- >>39
heartbeatはやってて、止まってても切り替える設定外れてたのかと - はい
人為ミス
損害賠償 - ＞メモリ故障が原因の障害パターンが発生
想定外のパターンが発生?
あらゆる障害を想定しているんじゃないんだな - >>41
設定値を直したら切り替わったんだこら想定内だよ - >>48
なるほど、想定内か。 - 単体でテストしてたのかな
- なんぼに設定したんや
- ファーーーーーーwww
- どうして自動切り替えできない設定値になっていたのかが書いてない
- >>49
そういう作業って記録残さないんだよね～ - 事故ってほんとうにささいな所で起こるもんだよなぁ
- 結局富士通か。あまりタイトな設定値にすると誤作動するから設定値弄ってたんだろｗ
- 誰がいじったのか
- 切り替わる設定はした
だが、そのあと設定値をいじくって切り変わらなくなってた - ダメな会社だな
- ズコー
- テロ確定って事？
- とりあえず、取引できなかった1日分の金利を補償して
- むしろ毎週自動的に設定値が変化してプライマリが変わるぐらいの設計のほうが正しいってこと？
バックアップ機に切り替わったとしても１日の取引に耐えられるかの保証はないわけで
- ヨシッ、アル
- ハートビートは見てましたが心停止したら蘇生せずにそのまま死んでいただく仕様でした
自己責任ですのでういあー自民党
【arrowhead】東証、システム障害の原因を特定「自動切り替えできない設定値になっていた」
ニュー速＋
コメント