ringoさん
VIEW
【悲報】日本HPが京大のスパコンのデータを約77TB消失し約28TBは復元不能「100%弊社の責任」「補償はご意向に沿うようにする」と絶望のリリース発表
日本HPが京大のスパコンのデータを約77TB消失してしまったらしい。そのうち約28TBは復元不能…。
お知らせ内にある日本HPから出された報告書には『弊社100%の責任』『補償はご意向に沿うようにする』と絶望しかない文章が並んでる…。
https://t.co/3DW162H8t5 https://t.co/7NFA4iAj2G
お知らせ
スーパーコンピュータシステムのファイル消失のお詫び
2021年12月28日(火曜日)掲載
京都大学学術情報メディアセンター
センター長 岡部 寿男
2021年12月14日 17時32分 から 2021年12月16日 12時43分にかけて,スーパーコンピュータシステムのストレージをバックアップするプログラム(日本ヒューレット・パッカード合同会社製)の不具合により,スーパーコンピュータシステムの大容量ストレージ(/LARGE0) の一部データを意図せず削除する事故が発生しました.
皆さまに大変なご迷惑をおかけすることになり,深くお詫び申し上げます.
今後,再びこのような事態の生じることのないよう再発防止に取り組む所存ですので,ご理解をいただきますよう,どうぞよろしくお願いいたします.
ファイル消失の影響範囲
・対象ファイルシステム:/LARGE0
・ファイル削除期間:2021年12月14日 17時32分 ~ 2021年12月16日 12時43分
・消失対象ファイル:2021年12月3日 17時32分以降,更新がなかったファイル
・消失ファイル容量:約 77TB
・消失ファイル数:約 3400万ファイル
・影響グループ数:14グループ (うち,4グループはバックアップによる復元不可)
障害情報:【スパコン】ストレージのデータ消失について
http://www.iimc.kyoto-u.ac.jp/ja/whatsnew/trouble/detail/211216056978.html
ファイル消失の原因
スーパーコンピュータシステムの納入会社である日本ヒューレット・パッカード合同会社によるバックアッププログラムの機能改修において,不用意なプログラムの修正とその適用手順に問題があったことで,本来は不要になった過去のバックアップログファイルを削除する処理が,/LARGE0 ディレクトリ配下のファイル群を削除してしまう処理として誤動作しました.
日本ヒューレット・パッカード合同会社から提出された報告書を掲載します.
Lustreファイルシステムのファイル消失について (日本ヒューレット・パッカード合同会社)
今後の取り組み
現在バックアップ処理を停止しておりますが,プログラムの問題を改善し,確実に再発しない対策をした上で1月末までにはバックアップを再開する予定です.
ファイル消失後にバックアップが実行されてしまった領域のファイルの復元ができない状況となったことから,将来的にはこれまでのミラーリングによるバックアップだけでなく,1世代分の増分バックアップを残す等の機能強化を検討いたします.機能面だけでなく,再発防止に向けた運用管理についても改善に取り組みます.
一方で,機器故障や災害等によるファイル消失の可能性も含めて完全な対策は困難であるため,利用者の皆様におかれましても,重要ファイルについては別システムへのバックアップをお願い致します.
京都大学学術情報メディアセンターセンター長 岡部 寿男 2021年12月14日 17時32分 から 2021年12月16日 12
「弊社100%責任ある」なんて
京大側が理責めして
自分に非は無い確証獲た後
謝罪広告だせレベルの対応を
求めたからと思われたとしても
違和感ない流れ。
そうなのかもしれないが
こういう時の出方に見るは
本質が滲み出ている感。
日本HP、ご愁傷様です。 https://t.co/jBNlHEwKgu
京大
「太陽みたいに笑う君
(日本hp)はもういない〜wowwow」
日本hp
「やりたいこと(データ削除)
やったもん勝ち(修復不能)」
「もしもし,私リカちゃん 京都大学のスパコンのストレージをバックアップする日本ヒューレット・パッカード合同会社製プログラムの不具合により77TBのデータが吹っ飛んだって」
えっ……!?
「日本HP『弊社100%の責任』」
いや,どーしてくれんだよ!
「切腹しても解決しないしね」
#リカちゃんと私 2655
@potato9841 @alpaka 酷い事態ですね……。
これで修士・博士論文を想定期間内に書けなくなった人とかの人生設計狂った分も補償してくれるんでしょうか?
@ixige @potato9841 @alpaka どうなんですかね…さすがにそれは難しいように思います。「自前のUSBメモリ等にバックアップしておかないのが悪い」でバッサリ切り捨てになってもやむなしです。それに、来春に学位取得予定の人の場合、もう実験はとっくに終わっているはず(=今は論文執筆・スライド作成中のはず)ですし。
@ixige @potato9841 @alpaka 行き違いになりました。
今は2.5インチHDDの主力が4-5TBのようです。
t.co/Y43kGKRDTq
さすがにスパコンユーザーでも「tar.xz形式に圧縮しても4TBでは足りません」という人は滅多にいないと思いますし、万一そうなった場合でも8TB超の3.5インチHDDを複数持ち込むだけの話です。
@potato9841 @yontengoP 余計な一言を…これ、「日本HP」じゃなくて、「hpe=ヒューレットパッカードエンタープライズ」ですね。数年前に分社し、パソコンとプリンタは日本HPに、この案件のような大規模システム案件はhpe管轄となりました。
@yukomiura リンク先が日本HP合同会社という表記だったからあんな感じの一言が入ってるのではないでしょうか?
@A_to_ku ちなみに、エンタープライズシステムやってるのはhpeで正式社名は日本ヒューレット・パッカード合同会社、パソコンやってるのは日本HP= 株式会社 日本HPになります。ややこしい名前です。
@yukomiura なるほど、なかなかややこしい感じになってるのですね。教えていただきありがとうございます。
@A_to_ku いえ。本当に余計な一言…ただ、非常にセンシティブな内容なので、ちょっと気になってしまったのです。
@yukomiura 間違えやすいけどいざ間違えると全然違う方を指してしまう…確かにセンシティブな内容ですね…
日本でも有数のコンピュータメーカーにデータの復元は不能と言われてしまったら絶望的ですな。 t.co/OCWaKisau4
弊社〜100%のせーきにん
もう頑張るしーかなーいさ
僕たちが持てる輝き
永遠に
忘れないでね〜 t.co/emWtkOMcBb
ヤバいってレベルやないぞ
実験データ消失復元不能だと論文書けないとかあるんじゃないかこれ
ましてこの時期に。実験ノートは作っているだろうけど、かかる時間に取り返しがつかない t.co/cyqAFz1oZC
仕事納まらない…
いやそれどころじゃないやーつ
ところで……
日本ヒューレット・パッカード合同会社(今回やってしまった方)≠日本HP
なのねん(ややこしい
HPって略すと後者になっちゃうのでうかつに略せないのねん
HPEって略すことあるみたいっすね(蛇足オブ蛇足) t.co/4aBb9yYJSy
変数名を変えた時の挙動の検討不足か…
それにしても尋常じゃない被害なんじゃないのこれ t.co/0ZpUDuT6fS
年末に起きた恐怖の事案 t.co/EhIzDRY1JW
あぁ…日本HP側の担当者も心配だが、中身が何なのかかは分からないが、データ消失ももっとあかん…補償とかの問題じゃないやん… t.co/MgQwLksFwU
ヒューレットパッカード社が大規模データ損失をやらかしたという。「ごめんなさい何でもしますから」(意訳)とのこと。みんな重要データはRAID1に頼らずにバックアップしとけよしとけよーw t.co/wXKljawaxd