X
【IT】日本HP製ソフトの不具合で京大スパコンのデータ77TBが消失 [田杉山脈★]
■ このスレッドは過去ログ倉庫に格納されています
0001田杉山脈 ★
垢版 |
2021/12/29(水) 14:58:25.98ID:CAP_USER
京都大学学術情報メディアセンターは28日、日本ヒューレット・パッカードが開発したスパコン用ストレージバックアップするプログラムの不具合により、大容量ストレージ(/LARGE0)の一部が意図せず削除されたと発表した。

　不具合が発生したのは、2021年12月14日〜16日の内、12月3日17時32分以降更新がなかったファイルで、消失ファイル数は約3,400万、容量は約77TBに達する。ファイル消失の原因は、バックアッププログラムの機能改修において、不用意なプログラムの修正とその適用手順に問題があったことで、本来は不要になった過去のバックアップログファイルを削除する処理が、/LARGE0ディレクトリ配下のファイル群を削除してしまう処理として誤動作した。

　日本HPでは、京都大学宛の報告書で「弊社100%の責任によりLustreファイルシステムのファイル消失の重大障害を来し、多大なるご迷惑をお掛けしたことを深くお詫び申し上げます」と述べている。

　現在はバックアップ処理を停止しており、プログラムの問題を改善し、確実に再発しない対策をした上で1月末までにはバックアップを再開する予定。

　また、ファイル消失後にバックアップが実行されてしまった領域のファイルの復元ができない状況となったことから、将来的にはこれまでのミラーリングによるバックアップだけでなく、1世代分の増分バックアップを残す等の機能強化を検討する。
https://pc.watch.impress.co.jp/docs/news/1378005.html
0002名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:04:25.32ID:ZLV01J0G
いちばんやっちゃダメなやつ
0004名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:06:37.02ID:X6dsTc7S
だからテープを使えと
0007名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:14:37.97ID:tqjHb9Bn
増分のありがたさ再認識だな
0008名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:14:50.49ID:LLyuPix6
だっさ
0009名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:16:02.53ID:NIrKAB57
どうせ消去しても問題ないデータだろ
0011名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:20:20.20ID:oJs4EDc1
「弊社100%の責任」という表現が出てくるのがすごいな
対処を間違うとHPEクレイが日本のスパコン市場から撤退せざるを得なくなるような事態なんだろうな
0014名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:21:58.06ID:T0c3WvR1
バックアップとってるなら復元できるんじゃね？
ドンぐらい時間かかるか知らんけど
0017名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:24:55.24ID:y2nQvF5p
>>12
まず最初にhpのソフトを全てアンインストールして復元ポイントを作ってようやく普通のＰＣの出荷状態になる
0019名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:26:14.51ID:Gyrxk0G1
>>10
それはいくら何でも少な過ぎじゃね？
今時４０GBはスマホだぞ
0020名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:27:03.20ID:winao7hD
一般企業の業務のデータならすんなり金で解決で良いだろうけど
学術研究データだと、研究者にとってはなかなかつらいだろうな
セクター読んでデータサルベージ出来るならよいけど、テラバイトもあると厳しいか
0021名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:28:21.70ID:q6QI5XzE
>>19
WordとExcelだけなら1年分のデータが数GBで足りる
0022名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:29:17.07ID:ynXuM4cP
笑。
0024名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:32:00.95ID:E6JczKE5
77T分か
俺の無臭ファイルは10Tしかないから、その8倍近くだもんな
俺だったら、ショックで勃ちなおれなくなるわ
0025名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:32:56.72ID:6ynl5J1M
本当に必要なデータは必ず２か所以上に格納しておきましょう
ただし一つの不具合で同時にクラッシュするトコロはいけません
0027名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:35:07.70ID:GG2u2ixQ
20年以上前にHDDからCD-Rへの退避で同じようなことをしたのを思い出した
600MBくらいだったけど、（当時の）貴重なエロ動画を多数失ってショックだった

77TBかあ……
0029名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:37:11.53ID:2TYn2qKf
だからFastCopyを使えとあれほど…
0030名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:37:31.32ID:FbnisgUR
バックアップ用のDBで不要になったテーブルを
TRUNCATEしたら本番環境だったことはある
0031名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:37:50.26ID:vJUvrx7k
こんなシステムなのになぜ複数箇所にバックアップが無いんだ
RAIDなんてゴミじゃなく複数ミラーリングのほうが維持も冗長性も優れておる、RAIDは絵に描いた壮大なくそ
0032名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:38:10.78ID:nHa9EHTq
>>14
まず本体の元データを削除して、その更新を元にバックアップを削除してるから
本体もバックアップも両方ファイルは消失してるんだわ。
0033名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:39:18.25ID:YGezLlBt
百ぱーの責任と認める所がいいね、支那や韓国の
企業ならとことん責任転嫁するだろうな。
0034名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:39:22.62ID:GF2It/FD
>>19
必要な情報はASPタイプのソフトに入ってるから、自社で保管しているデータはサーバー上だとそんなもんしかないんだよ。
各自のパソコンにどの程度のデータが保存されてるかは知らんけど。
0035名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:41:41.86ID:FbnisgUR
ちゃんと不具合認めてるならマシだよな
単なるミスでやらかした時に
ごく稀に起きる大層な理由を考えて
それに対する対応策も考えて全て捏造されたのを
報告するのが普通だから
0036名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:43:15.36ID:oJs4EDc1
京大のスパコンは長年富士通だったが2012年からクレイ（現HPE）が受注、2016年の更新でもクレイ製だった
ちょうど次期更新の入札時期が来ていて、来年2月締切になっている
0038名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:45:47.14ID:swCCVR37
たった2日間の不具合で、上書きされた領域分の77TBが消失したということは
1日30TB以上書き込んでるのか
データ全体では何テラバイトくらいあるんだろうな
0042名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:53:09.57ID:5AxdzKkr
>>6
清岡純子先生の作品なら、俺が提供できるぞ。
0043名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:53:22.56ID:jtjbes7M
77TBって
俺のエロデータに匹敵するレベルの容量でビビるわ
0045名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:54:57.00ID:mEbIGZVb
７７ＴＢなんて
動画や画像なら大したことないが、
研究記録などのドキュメント原本なら悲惨。
0046名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:55:37.33ID:MbKgJTAt
意地でも復元求めないならそこまでのデータ
どちらも想定が甘い
0047名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:57:56.59ID:N2VqcHMG
1世代前のバックアップなんてこの業界では当たり前なんじゃないの？
特に大事なデータは
0048名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:58:12.25ID:Yx8Cjec7
よくある事だろ
0049名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:58:56.45ID:YGezLlBt
>>43
77テラのエロデータ(笑)
0050名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:58:58.76ID:E6JczKE5
77T分か
俺の無臭ファイルは10Tしかないから、その8倍近くだもんな
俺だったら、ショックで勃ちなおれなくなるわ
0051名刺は切らしておりまして
垢版 |
2021/12/29(水) 15:59:21.05ID:E6JczKE5
77T分か
俺の無臭ファイルは10Tしかないから、その8倍近くだもんな
俺だったら、ショックで勃ちなおれなくなるわ
0053名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:01:28.14ID:YGezLlBt
77テラのエロ、頭おかしいですな。
0055名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:02:57.59ID:YGezLlBt
>>54
すごいよね。
0056名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:04:04.51ID:i4sdLG4B
>>1
本当に不具合なの？
中国韓国あたりが紛れ込ませたとかでなく？
0057名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:04:30.51ID:9gdzAh8P
ワロタ
0060名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:08:10.44ID:mAz/ImYV
ヒュー！Let'sパッカーンってこと？
0062名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:09:12.34ID:/w4WMEkq
プリンタの会社の社員に運用を任せるほうがどうかしてる
0063名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:11:17.49ID:G+gWxxYC
謝らない・黙り込む・事故扱いにする
担当者をスケープゴートにする・何度も再発を繰り返す
そういう行為をしないだけある程度の理解はできるが…

前述行為コンプリートした銀行がこの世界にはあるらしいが本当だろうか
ここのは作業者が買収等されていないか身辺調査が必要な位の運用だが…
0064名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:12:01.82ID:A5vYdxsc
ハードが一番でもソフトがクソなら意味ないやん
0065名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:12:57.46ID:FBNkoFat
ヒューレット・パッカード
0068名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:16:32.15ID:PwAkJza9
関数電卓良かったな。
メーカーだけでは食えないから大変だよな。
銀行とかにも下請けで入ってるの見かけるし。
0071名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:20:58.84ID:9eV1Yrnx
何のデータを保存してたんだろう…
0072名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:25:43.08ID:v18PBpoC
中共スパイだらけ。
0074名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:26:57.90ID:9wNkuIEd
京大ともあろうものが完全に
切り離した状態で保存してないのかよ

任せるほうも問題だわ
0077名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:33:54.94ID:LoZvBse6
>>1
元記事では
>日本ヒューレット・パッカードでは...
って書いてあるのに何で「日本HPでは...」に直してるの

日本ヒューレット・パッカードは日本HPE
Enterprise製品を扱う会社で今回やらかしたとこ
日本HPは株式会社日本HPで別の会社。PCとプリンタを扱う
別の会社
もとは同じ会社だけど2015年に分社した
0078名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:35:38.69ID:owAY7jMb
出禁だな
0080名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:38:07.50ID:BkgxzA7U
複数並列バックアップシステムじゃねぇのかい・・・らしくねぇな
0082名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:39:45.44ID:iIl3Uoxk
>>36
富岳ベースで１大学用に縮小したのを入れればいいのに
0083名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:40:48.83ID:GJ3OKEG4
フロッピーに保存しとけよ
0084名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:40:58.40ID:iIl3Uoxk
>>39
日本ガー
工作員かよ
0085名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:42:56.00ID:9eV1Yrnx
>>83
そこはテープだろ…
0086名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:43:24.87ID:csQ0rXXx
確実に年末年始の休暇が飛んだやつが相当数いるなｗ
0087名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:43:43.28ID:iIl3Uoxk
>>72
京大だしな
0089名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:45:33.75ID:uzwVJAuI
消失したものの内容はなんだろ
エロ動画なら問題はないように思えるが
0090名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:46:30.52ID:yd7LLB01
> 深くお詫び申し上げます

え？お詫びだけ？
「ごめ〜ん。ﾃﾍｯ♡」
ってやつ？
0091名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:47:08.86ID:NSDPUFsi
L0が消えたって俺の寝床になんかあるのかね
0092名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:47:11.25ID:iIl3Uoxk
>>85
フジフイルム「弊社にお任せを環境にも優しいですしお寿司」
0094名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:48:32.42ID:K0OAEzrZ
これがコロナの薬開発だったら意図を疑わざるを得ないな
データの詳細は発表した？
0095名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:50:06.98ID:udkAjJUX
10年かかって集めた77TBのエロ動画がっ！
0100名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:54:46.34ID:LoZvBse6
スパコン扱うエンジニアのやるミスじゃないな

https://www.itmedia.co.jp/news/articles/2112/29/news040.html

ファイル消失が発生した原因
バックアッブスクリブトには、findコマンドにより10日以L古いログフアイルを削除する処理が含まれています。
スクリプトの機能改善と合わせて、findコマンドの削除処理に渡す変数名を視認性・可読性を高めるため変更いたしましたが、
この修正したスクリブトのリリース手順に考慮不足がありました。
bashは、シェルスクリプトの実行中に適時シェルスクリブトを読み込みます。
この挙動による副作用を認識できておらず、実行中のスクリプトが存在している状態でスクリブトの上書きにより
リリースしてしまったことで、途中から修正したシェルスクリブトの再読み込みが発生し、
結果的に未定義の変数を含むfindコマンドが実行されてしまいました。
この結果、本来のログディレクトリに保存されたフアイルの削除をする処理ではなく、/LARGE0のファイルを削除して
しまいました。
0101名刺は切らしておりまして
垢版 |
2021/12/29(水) 16:58:47.77ID:9v51T7Ge
HPもいよいよダメか。
おれもいままでHPを使ってきたが最近のサポセンは事務的になって昔のような
丁寧さはなくなった。いまやあさらばを考えているところダニ。
■ このスレッドは過去ログ倉庫に格納されています
ニューススポーツなんでも実況