0001ノチラ ★2018/02/09(金) 00:02:10.35ID:CAP_USER
三菱UFJニコスは2018年2月7日、2017年末に発生したシステム障害の原因や影響範囲などについて発表した。同社のクレジットカード「NICOSカード」の基幹システムで、ハードディスク（HDD）が3個故障したのが原因だ。2018年1月末時点で一部の会員に対する請求が遅れているなど、事態を収束しきれていない。
マスターデータから中間加工ファイルを作成するバッチ処理のシステムでHDDが故障し、障害が発生した。三菱UFJニコスによれば、HDD15個で一連の機能を果たしており、そのうち3個が同時に故障した。「2個までの同時障害は自動復旧可能な仕組みを設けていたが、3個の故障は想定外だった」（広報）。同社はシステムやHDDの開発企業を明らかにしていないものの、「発生確率は極めて低いとの報告を受けている」という。
故障したHDDは、障害が発生した2017年12月26日中に交換したが、利用会員の売上データ処理などに遅れが発生した。一部の利用会員に2重請求が発生したほか、請求が遅れるなどの事態につながった。同社はシステム機器の監視体制を強化するなどして対策を講じるという。
http://itpro.nikkeibp.co.jp/atcl/news/17/020803126/ 0230名刺は切らしておりまして2018/02/12(月) 11:39:45.34ID:oOtXKe6M
３個同時て
それ同じ電源に接続してたとか？
つか、どっか別の場所でマイグレできるようにしとかんといかん奴なんじゃないの？
>>121
俺もそう思った
そうじゃないと考えられない 0232名刺は切らしておりまして2018/02/13(火) 04:11:40.95ID:IFfvwg4d
RAID0+1とかホットスワップとか、知ったかさん多いな
>>232
学校で勉強して、テストで１文字でも間違えたら、×つけられて？
会社でプレゼン資料作って、１文字でも間違えたら、上司に、×つけられて？
現役の下働きは大変だね。上に行きなよ。
これ、任せたいんだけど、いいかな？から始まって、
やれるだけのことはやりましょう、予算は自由に使うけども、いいよね？
ああ、いいよ、トラブルよりもいいもの
完成、３年ノートラブル。
ほー、いいね。どうやってるの？ コピーしてもいいかな？
そりゃ、いいよ。売ったんだし。
説明はしないけど、ここにドキュメント入ってるから、見て。
誰かに、解析させてもいいかな？
運用終わってからの方がいいんじゃない？
途中で勝手に止めたら、面倒みないよ。
RAIDのレベルがどうのこうのなんてのは、実績の前にはどうでもいいし、客の関心事はそこじゃない。
どんな手段でもいいから、壊れないのを与えたら、なーんにも言わなくなる。
プレゼンする必要もない。
前のと同じ感じで、容量増やしたいんだけど、しか言われない。
そんで、客が勝手に、適当な資料作って、稟議通ればＯＫ
実際に作ったものとプレゼンが違うなんてのはざら。
我が社の過去システムで、これだけの稼働実績のある・・・・の最初の１ページしか、誰も興味ないよ。 技術用語の扱いがいい加減なやつはシステムの扱いもいい加減だからね
RAID0+1はそれ以前の問題だが
0238名刺は切らしておりまして2018/02/14(水) 08:04:59.72ID:On/8Uaf9
RAID6(ホットスワップ付き)を物理的に別筐体で２セット用意して、
さらにミラーリング
これが必須だよ
RAID1+6ってやつ
それホントにRAID1+6って呼ぶの？
ディスクの冗長化じゃないと思うけど
>>238
RAID0+1 & ホットスワップさん乙 0243名刺は切らしておりまして2018/02/15(木) 20:58:51.21ID:MqxmmuV0
ストレージの耐障害性にFTサーバーがどう関係すんのさ？
0245名刺は切らしておりまして2018/02/15(木) 21:20:39.45ID:2cncSgCT
大規模なデータセンターならディスクの多点故障とか日常茶飯事
0246名刺は切らしておりまして2018/02/15(木) 21:32:47.48ID:bnftCxmF
1cm間隔でずらっとSDカードをが刺さってて死んだら自動で排出。
マガジンに空のSDカードがいっぱい入ってて空いたスロットに自動装填、みたいな装置できないかな。
保守は空メディアの補充だけでいいの。
>>244
ＦＴするならＳＳＤしか選択肢ないし
ストレージも２系統
ファイバーのスイッチも２系統
回線もストレージの速度も最高
などのデラックス仕様になって
しかも何かトラブっても予備常時待機でそっちに切り替わるんだから
何の心配もなくなるんだろ
このニコスみたいにケチケチしたようなのだと何が起こっても知らんな
ＦＴじゃないと心配って客はいい客 >>246
テープがそうなってるな
古いのだとMOのオートチェンジャーとか
CDの４００スタックのとかな
SDカードはドライブユニットのコストがほぼゼロだから
チェンジャーで変えるメリットがない
もしSDが１０００枚刺さってるのが欲しいなら、常時１０００枚さしておき、
定格容量を８００枚分にすればノーメンテになる
大規模なの作ると、物理的に力がかかることで死ぬことも心配しなきゃならなくなるから
装置の中に全部収めて、パネルを開けない方が長持ちする 0249名刺は切らしておりまして2018/02/15(木) 22:02:20.35ID:r7vIhHTO
ショッピングのリボ払いで臨時増額返済をATMで受け付けてくれないのはこのせいか？
0251名刺は切らしておりまして2018/02/15(木) 22:13:03.81ID:c0GINld+
同時3台なら他の要因だろ
0252名刺は切らしておりまして2018/02/15(木) 22:15:26.79ID:S6fwokrJ
誰かが障害原因の言い訳で嘘をつくと、業界全体が迷惑を受けるパターンじゃないかと。
15台中3台が同時なんて
0253名刺は切らしておりまして2018/02/15(木) 22:30:28.49ID:r7vIhHTO
最近明細見てないけど何か最近多く引かれてる様な気が
久しぶりに確認してみるか
>>5
2個壊れてたのを気づかず放置してただけじゃないかと思ってしまう。 >>247
問題を全然理解してないよね。。。
単純にストレージを2系統ってのは>>238のRAID6+1的な考え方 >>255
これの解決方法はいくらでも思いつくが
予算ないからこうなってるんだろう
しかも予算を節約するために頭も使ってないし
まずは、ＤＢがダメなんだからオラクル買えよって話
オラクル買えないならストレージで何とかした上で運用で巻き戻しするとかログから再生しかないが、
そんな面倒なことをニコスが出来る筈もないからこのざま
予算も無い上に今まで動いたたから今後も大丈夫って考えとしか思えない
ＦＴ云々ってのは極端な例を出しただけ
予算があるなら全部任せろ
予算が無いなら客が考えろ、その通りに作るから
ってのが私ののやり方
ストレージが死なないとかマシンが落ちても継続ってのはミニマム条件なんすよ
その上でオペミスとか他社のものがぶっ壊れたとかあってもリカバリーどこまで出来るのか
例えサービス止めてでも取り消ししたい場合もあるし
こういう各種アノマリーを上乗せしてやるが客が全部を想定できるはずもなく
説明もメンドイし緊急事態になるまで関心も示さない
なので、予算重視になるわけ
ＦＴの予算出せるってのはそういうこと ディスクが三個同時に壊れるのは確かに相当珍しいし、何か外的要因がある気もする。
とは言え普通はディスク装置ごと飛んでも外部バックアップがあるし、広域災害に備えて遠隔地バックアップもしてるでしょ。
１日くらいは止まってもあとに影響なく復旧できるはず。
ここまで大混乱が起きるほどの重要システムならなおさら。
機器の故障くらいでここまでの影響がでるのは、そもそものシステム設計が悪かったとしか思えない。
>>256
やったことないのにこんな所で知ったかしなくていいよ
RAID6やRAID6+1が何でダメなのかっていう基礎から勉強してくれ
>>257
リビルド時の故障も広義では同時
サクッとシステムが死んでれば傷口はもっと浅かっただろうね 0259名刺は切らしておりまして2018/02/16(金) 23:38:46.81ID:ra4sbVyC
raid6の問題ってホールの話？
固定ブロックの場合トランザクションが必要って奴だっけ
>>259
書き込みホールは理論的にはどのRAIDレベルでも発生しうるけど
ハードウェアRAIDの場合は普通対策済みだから現実的に問題になることはまずないよ RAIDコントローラーが正常に動いてればな
それがSPOFだったら終わり
>>219
海門にやられたからな
ロットごと不良。 >>261
それは全く別の問題だから対策も別だよ
クリティカルなシステムでRAIDコントローラをSPOFにしたりしないしね ニコスはRAIDコントローラの障害じゃないよ
典型的なリビルトの問題
カード会社の基幹システムで
RAIDコントローラがSPOFのストレージユニットなんて使うわけない
リビルドに失敗するようなシステムは良くないと思う
故障検出も含めて
0267名刺は切らしておりまして2018/02/19(月) 19:27:26.49ID:LuOQlpoy
先月の１月１５日にニコスポイントをTポイントに移行申込したのに
いまだに移行されていないのもそのせいなのか？？？
0268名刺は切らしておりまして2018/02/19(月) 19:43:14.84ID:LuOQlpoy
ニコスといえば昔の話だが芸能人の明細が目に留まると社内で話題になってたんだよな
○○が△△△を買ったぜなんてな
今じゃーセキュリティーがガチガチで無理だがね
ｂｙ内部告発ではなく、内部つぶやき者
0269名刺は切らしておりまして2018/02/19(月) 19:48:01.73ID:LuOQlpoy
>>266
今は知らんが当時は汎用系でCOBOL
よってそれを言うならリビルドでなくリコンパイルな >>269
そっちのリビルドじゃなくRAIDのリビルドなw 0271名刺は切らしておりまして2018/02/19(月) 20:33:35.81ID:LuOQlpoy
これは同時に導入したsegateなら、結構あるあるネタだね
まぁsnmpでRAID状態も管理できずに「発見時は同時に壊れていることを認識した」んだろうなぁ。
同時なんかあるわけねーだろが。
普通にあるよ
球数が数百台の小規模なら無いだろうけど
入金を待ってる店側には、ごめんなさい通知が二回。
しかもまだ全額入金されてない
ひどいな
データロストしてて端末側のログと照会してもらう必要あるかもね
ポーリングしてるからパケットロスしても問題なく障害検知できる
なぜUDPを使ってるのか理解すべき