「NTTクラウドのデータ、ぜんぶ消してみた」 原因はDELL EMC Unity 500オールフラッシュストレージ

1 :アークトゥルス(北海道) [US]:2019/12/11(水) 09:38:48 ?PLT ID:Ta8S3fwK0.net
sssp://img.5ch.net/ico/folder1_03.gif
2019年12月10日19時ごろ[編集 | ソースを編集]

EMCジャパンは、12月4日に同社ストレージ装置に故障が発生したことを認めたうえで、
「障害発生後から日本電子計算と復旧対応を行ってきた。ファームウエアを修正するなどして
12月6日午後10時15分にストレージの修復作業は完了し、日本電子計算へ納品した。
現在は日本電子計算で業務復旧作業中であり、当社も復旧へ向け全力で協力している」と述べた。

これに対して日本電子計算は12月10日、「12月6日にストレージ装置のファームウエアの
修正は完了したが、いまだに読み書きできないデータがあるのも事実で、復旧に至っていない。
その原因箇所がストレージ装置を含めシステムのどこなのか、さらにその内容も調査中で、
現状は特定できていない」とコメントした。

https://monobook.org/wiki/%E6%97%A5%E6%9C%AC%E9%9B%BB%E5%AD%90%E8%A8%88%E7%AE%97

579 ::2019/12/14(土) 01:11:53.03 ID:GpmgLhLi0.net

>>577
サーバー持ちたく無いっていう理由が多いけどサーバーくらい持てばいいんのに。
仮想環境無い頃と比べたら遥かに楽だろ。

242 ::2019/12/11(水) 12:39:31.75 ID:D5icfpoZ0.net

>>237
公共放送も他も報道は全部シナチョンのスパイ組織だしねw

7 :カストル(茸) [BR]:2019/12/11(水) 09:40:38 ID:S6Q5YJ4H0.net

バックアップも飛んだの?

424 :ダイモス(大阪府) [ニダ]:2019/12/12(Thu) 11:59:57 ID:XfP1PbEe0.net

>>327
全国50の自治体

286 ::2019/12/11(水) 17:58:23.20 ID:TOf0vv3O0.net

>>285
ついさっきまで、有識者の回答があったのに運営に書き換えられてるわ
ビンゴだな

214 ::2019/12/11(水) 12:03:53.14 ID:4S55xjfI0.net

>>208
まあこの件は全然違う話だけどな

52 ::2019/12/11(水) 09:53:09.95 ID:2s8YumpN0.net

ファームと言ってる以上はSSDのコントローラが原因だろう
DELLにしてもHPにしてもSSDを製造してるわけじゃないんだから
OEM元公表しないと意味ないだろう

378 ::2019/12/12(木) 05:42:46.23 ID:5oZW+pgL0.net

海門馬鹿にできんなwww

488 :亜鈴状星雲(東京都) [CA]:2019/12/13(金) 05:20:11 ID:WLvxZ/o70.net

>>481
これからは
「NTTデータさんがやってた自治体向けのサーバで同様な事故があったので」
って良い説得材料が手に入ったじゃないかw

87 :宇宙定数(広島県) [CN]:2019/12/11(水) 10:07:06 ID:yLH1ObaG0.net

>>59
俺はSynology派

311 ::2019/12/11(水) 20:23:36.47 ID:AmWpuTUE0.net

ここの端末じゃなく
シンクライアントで記録媒体を一括管理して
オンプレミスにするのが一番安全な気がしてきた

202 ::2019/12/11(水) 11:22:52.36 ID:etwps0Xo0.net

>>195
WDってSAN DISKだからずっと上

262 ::2019/12/11(水) 13:28:59.95 ID:+9hpU1620.net

ハイドロ全部ダメ?

593 ::2019/12/14(土) 09:06:42.44 ID:IBvapOuW0.net

>>589
そういうクソ役人を説得できない奴が無能なんだろ。
放置した結果今回のような事態を招くのであれば、さすがに認めざるを
得ないだろ。共同利用で合意が取れない自治体のせいで作業ができない
ならそれを他の客と共有しておけばいい。
それをやっておけば、ある程度責任転嫁できるだろ。
っつかサービス仕様に入れとけよ。

581 ::2019/12/14(土) 02:14:19.71 ID:Yp+7fbS60.net

537 ::2019/12/13(金) 21:04:03.97 ID:NccIfdSR0.net

>>534
仕様を見るとOSレベルのイメージバックアップは週次で一世代、ファイルレベルは日時みたいだから何台動いていたか分からないけど一台ずつイメージ戻しして日次のデータを被せて、動作確認して最後にシステムとしての復旧確認してるんじゃないかな。
あくまでニュースと仕様とKBのバグの挙動からの推測だけども。

597 ::2019/12/14(土) 09:15:51.82 ID:IBvapOuW0.net

システム発注する側も上を説得するのに使った材料をひっくり返えされたら、はいそうですか。とは言えねえだろ。

425 :クェーサー(埼玉県) [NL]:2019/12/12(Thu) 12:09:33 ID:0wL8JIvc0.net

>>393
東芝のSSDってw

504 ::2019/12/13(金) 08:10:52.98 ID:wWW+b7xo0.net

今時signed intの罠に嵌まる男の人って

471 :レグルス(茸) [TW]:2019/12/12(Thu) 21:48:14 ID:NV+fCQOY0.net

練馬区

区システムの障害および復旧状況について
トップページ区政情報広報お知らせ一覧(広報)区システムの障害および復旧状況について
更新日:2019年12月12日
この度は、区のシステムの大規模な障害により、多大なるご不便・ご迷惑をおかけしお詫び申し上げます。
12月4日(水曜)の午前11時頃から、区の20のシステムに障害が発生していましたが、
区公式ホームページの更新と区外部とのメールの送受信システムが8日(日曜)までに復旧いたしました。
現在、その他のシステムにつきましても復旧に向けて作業を進めておりますが、
完全復旧するまでには、もうしばらく時間がかかる見込みです。
今回のシステム障害は、区が利用している民間データセンターの機器障害によるもので、
記憶装置を管理するソフトウェアの故障が原因と特定しています。
なお、障害によるデータの流出・漏洩はありません。
障害が長期におよび真に申し訳ございません。
引き続き復旧を急ぐとともに、今後このような障害を引き起こさないよう対策を講じてまいります。
復旧のお知らせについては、こちらのページに随時更新していきます。
【未復旧のシステム】
図書館ホームページの閲覧、小中学校のホームページの閲覧、ねりまっぷ 等

27 ::2019/12/11(水) 09:44:58.27 ID:pX2ALlfI0.net

練馬区は保険が完全に飛んだらしいからな
どうすんだよ

285 ::2019/12/11(水) 17:39:15.96 ID:TOf0vv3O0.net

545 ::2019/12/13(金) 21:31:33.79 ID:Kyfu6Ncd0.net

>>536
じゃあ複数拠点は同時期に新設してストレージの型番も同じだったって事かな

515 ::2019/12/13(金) 10:16:46.15 ID:QfzU9y280.net

>>489
対策にならんのよ

今回みたいにデータが化けると化けたデータで上書きされるから駄目

だからリモートサイト側に更に差分バックアップなりで論理バックアップを取る必要がある

そこまでやってるケースは稀

490 ::2019/12/13(金) 06:15:15.02 ID:0IWnzuNZ0.net

バックアップのバックアップのバックアップが必要な時代

114 ::2019/12/11(水) 10:18:16.40 ID:3BvROnUH0.net

>>84
寸度

90 ::2019/12/11(水) 10:08:16.35 ID:oSINUYAX0.net

>>78
単純なSSDの不具合とかじゃなくて
コントローラーの不具合と見て良いのかな?

463 ::2019/12/12(木) 19:31:19.49 ID:Q5yQoyu30.net

消すなよw

36 ::2019/12/11(水) 09:48:15.71 ID:zuRVUMf00.net

これどうなるの?

505 ::2019/12/13(金) 08:31:22.67 ID:Rpyk6ONY0.net

まってこれからどんどん被害広がって行くんじゃね?

392 :デネブ・カイトス(東京都) [JP]:2019/12/12(Thu) 07:44:22 ID:LGO6kXaV0.net

>>208
全く無関係の事案でHPEが批判されることになるんだぞ
根底もくそもないだろ

174 ::2019/12/11(水) 10:46:40.60 ID:x/T6Rzrl0.net

Flash! A-ah!
Savior of the Universe
Flash! A-ah!
He’ll save every one of us
Flash! A-ah!
He’s a miracle
Flash! A-ah!
King of the impossible

146 ::2019/12/11(水) 10:32:07.28 ID:I5nFnCh30.net

346 :白色矮星(茸) [US]:2019/12/11(水) 23:04:36 ID:i+xHyjNz0.net

東京都練馬区
@nerima_tokyo
【12月11日(水)現在】12月4日(水)の午前11時頃から発生しているシステム障害ですが、
一部のシステムは復旧しているものの、
全てのシステムが復旧するまでにはもうしばらくかかる見込みです。
ご不便・ご迷惑をおかけしお詫び申し上げます。
午後3:49 · 2019年12月11日·Twitter Web App

137 ::2019/12/11(水) 10:29:09.72 ID:6Qv7T1rr0.net

釈迦念仏だと思うけど
基本、ストレージ機器ってのは壊れても大丈夫ってのを基本に組むんだよ
だからファームのバグだろうがなんだろうが、構成組んだ人間が悪いって話に終始する
EMPでその辺全域イカれたわけじゃないんだから

198 ::2019/12/11(水) 11:14:25.51 ID:KnM0EUUK0.net

>>157
自治体はクラウドサービスを利用していただけでサーバー側がどういう機器を使用しているかなんて
関知していないだろ。 仮想サーバーなのが実体があるのかすら知らないかも

391 :ハッブル・ディープ・フィールド(東京都) [MX]:2019/12/12(Thu) 07:37:39 ID:7OafY6z+0.net

中身がサムスンなのかどうか調べて

172 :アルゴル(埼玉県) [CA]:2019/12/11(水) 10:46:00 ID:j4I4fQpN0.net

>>169
この手のストレージはペタやエキサバイト単位の世界だぞ

594 ::2019/12/14(土) 09:09:15.44 ID:xhNp2A+Q0.net

>俺の納得する答え持ってくるまで止めさせない

とかそんな馬鹿いねーよw
今どきセキュリティ対策でパッチ当ては必須だ
やらないと旧自治省(総務省)様から呼び出されてボコボコにされるw
頭が悪いあり得ない嘘つくんじゃねーw

502 ::2019/12/13(金) 07:54:01.41 ID:vkZ+Eunt0.net

>>408
それをバックアップだと思ってる利用者のなんと多いことか。

353 ::2019/12/11(水) 23:09:56.29 ID:OIxc2SVE0.net

>>290
インフラの提供だけです
バックアップはお客様が勝手にお取りください

105 ::2019/12/11(水) 10:13:39.47 ID:y5OL7Y3Q0.net

>>101
mac miniを並べてクラスタリングを組むのがベスト

251 :アークトゥルス(群馬県) [US]:2019/12/11(水) 12:59:04 ID:jzEmZwVw0.net

>>203
韓国の責任を認めないで人のせいにする気質は不具合のときどう対応するんだろう

11 ::2019/12/11(水) 09:41:13.80 ID:wQt/UISw0.net

ぶっちゃけデータの復旧ってできるかできないかの二択で可否はすぐわかるから
今できてないもんはこの先もできないよな

216 :オベロン(茸) [MX]:2019/12/11(水) 12:09:57 ID:PJrXVX960.net

>>205
ぶっちゃけ野良(民生品)で鍛えられてるバッファローやネットギアのほうが信頼性は高い。

496 ::2019/12/13(金) 07:23:42.59 ID:e1uAAXtg0.net

>>475
データセンタに押し掛けてこられても邪魔なだけだよなw

210 :アルデバラン(東京都) [KR]:2019/12/11(水) 11:56:03 ID:vzzZsw660.net

AWSじゃあかんのか?

175 :黒体放射(石川県) [EU]:2019/12/11(水) 10:49:00 ID:EDt5FRUS0.net

|゚Д゚)ノ 漏れが設置したサーバじゃキャッシュ切ってたけどな

|゚Д゚)ノ どこの会社が使ってんの?

4 ::2019/12/11(水) 09:39:39.15 ID:RmW7uzox0.net

なんでHPと同時多発的に起こってるの??

74 :黒体放射(石川県) [EU]:2019/12/11(水) 09:59:57 ID:EDt5FRUS0.net

|゚Д゚)ノ キャッシュのバグとか言ってる人いるけど

|゚Д゚)ノ 普通サーバでディスクキャッシュなんか使わないだろ?

|゚Д゚)ノ SSDって切れないのか?

511 ::2019/12/13(金) 09:15:00.17 ID:NmhsN36k0.net

HDDは遅いんじゃない?

430 ::2019/12/12(木) 12:36:20.24 ID:jCdAadWa0.net

チョン法則発動

530 :熱的死(SB-Android) [CN]:2019/12/13(金) 17:21:12 ID:qCt1KAWE0.net

https://tech.nikkeibp.co.jp/atcl/nxt/news/18/06701/?n_cid=nbpnxt_twbn

こんな状況みたいだからバックアップデータから一生懸命リストアしてるんだと思うよ。

574 :ニクス(東京都) [US]:2019/12/14(土) 00:50:17 ID:UiJ7fn7e0.net

おいおいUnityやべーな
Unrealエンジン使うわ

484 ::2019/12/12(木) 23:16:05.60 ID:KNjjMC3j0.net

つーか、少しまともなITドカタなら責任回避の為にそうする
しない=予算ヤバイ案件だからな

456 ::2019/12/12(木) 16:35:17.32 ID:AIy/Mag60.net

>>421
BCPどうなってんだろね。SLAがダウン4h未満だったって言う割には見合った対策を行っていたようには思えないんだけど。

共有ストレージが死ぬのは想定してなかったのかな。
取り合えず別のストレージ手配してストレージプールに追加して、そっちで暫定的にサービスを再開させる、とか考えないのかな。

360 ::2019/12/11(水) 23:17:47.76 ID:i+xHyjNz0.net

千葉県浦安市
@urayasu_koho
システム障害により介護保険業務に支障がでています|浦安市公式サイト
現在、システム障害により、介護保険業務の一部に支障が出ています。
申請や手続きの際にはお問い合わせのうえ、ご来庁ください。
ご迷惑をおかけいたします。(介護保険課)
システム障害により介護保険業務に支障がでています(12月11日午後6時)
午後7:29 · 2019年12月11日·Twitter Web App

436 ::2019/12/12(木) 13:36:00.51 ID:9tfSvTqN0.net

>>428
emcはないかも知れないけど、jip-baseはそういう訳にはいかんでしょ
実際にもう訴訟の話しでてきてるね

319 ::2019/12/11(水) 21:47:15.26 ID:SNyiHXLs0.net

>>290
あほ

112 :リゲル(やわらか銀行) [US]:2019/12/11(水) 10:16:25 ID:9O7pR3e30.net

中華娘が責任とってくれんの?

598 ::2019/12/14(土) 09:27:09.90 ID:71JLZ0Mw0.net

EMCジャパン「だから”フラッシュ”」って書いてあるじゃないですか❗

294 ::2019/12/11(水) 18:46:43.00 ID:+9hpU1620.net

>>288
同期してると消えるな

485 ::2019/12/12(木) 23:19:46.68 ID:11mc5AdM0.net

>>484
それでもな、それでも何とかしたいと考えるんだよ
予算やばくても何とか自立アラート組み込んでみたりとか
でもな、納品段階で跳ねられるんだよ。金取ってないのに。
あぁこんなんで未来有るのかね?今の日本のITに

おまえら満足か? 俺は、やだね・・・

127 :ソンブレロ銀河(茸) [US]:2019/12/11(水) 10:21:15 ID:y5OL7Y3Q0.net

>>118
キャッシュと実データの不整合なら壊れたデータをバックアップしてる感じじゃないの?

302 ::2019/12/11(水) 19:17:40.75 ID:wqo7P0HD0.net

飛んだ時にOSが持ってたディスクキャッシュとジャーナルは喪失してるだろうからなあ
整合性の回復は難しいかも

351 ::2019/12/11(水) 23:08:47.47 ID:EU9m3IDC0.net

実際それで今のところ上手くいってるしなベンダー側は

236 :太陽(岩手県) [CN]:2019/12/11(水) 12:33:21 ID:ZfF4D6Ok0.net

なんかもう別の器用意してバックアップ書き戻して復旧させたほうが早そうな気がするな。
自治体の仕事を1週間以上麻痺させるとかかなりヤバイと思うんだけどね。

68 :アルゴル(埼玉県) [CA]:2019/12/11(水) 09:56:58 ID:j4I4fQpN0.net

>>6
ストレージのファームウェア障害だから管理テーブルがイカれた可能性がある

その場合たとバックアップを含めて死ぬ
データがどこに書かれているかわからなくなるからバックアップもクソもなくなる

リモートバックアップやDR構成を組んでれば別だけど

地方自治体レベルだとまずそのまでの保守はやってない

543 ::2019/12/13(金) 21:25:04.89 ID:NccIfdSR0.net

>>541
その認識が根本的に違う

106 ::2019/12/11(水) 10:13:52.09 ID:+cysoIKl0.net

>>53
何言ってんだ

コメントする

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です

このサイトはスパムを低減するために Akismet を使っています。コメントデータの処理方法の詳細はこちらをご覧ください




RSS


%d人のブロガーが「いいね」をつけました。