mabots' blog

知のレバレッジを最大化せよ (旧はてなダイアリーから移転しました。)

NTTデータの運用するDoblog、一週間近くDBサーバ障害でサービス停止。

春山さんのblog(おかねのこねた : 賢く、楽しく、ユックリ投資 by 春山昇華)が読めない、、とおもったらdoblogでサービス障害が発生していました。
2/8から2/16現在まで、またDBサーバ故障とそれに伴うデータ復旧の失敗でまだ沈黙を保っているようです。。。多分「RAIDコントローラもしくはRAID配下disk全滅状態 => パーシャルバックアップのみとっていて、それの復旧ができなかったです」というケースかとおもうのですが、影響としてはもしフルバックアップ地点まで戻ることになると、フルバックアップ地点から障害発生までの期間についてのデータ消滅ということになってしまう可能性があります。
Raidコントローラ壊れても他のDBサーバのものを使えばいいのでこれだけ時間がかかっているということはdisk全滅系なんでしょう。だとしたらヒューマンエラー的ななにかが要因の可能性もあります。

DoblogNTTデータが運用していますが、「2/13 21:50現在、翌週(2/16週)に延期せざるを得ない状況」のあたりに気合不足を若干感じるのですが、はたして大丈夫なのでしょうか・・

http://www.doblog.com/

2/8 10:00頃、Doblogのデータベースサーバー及び、バックアップサーバーの両サーバーにハードディスク障害が
発生し、当日より内部データの復旧作業を行っております。
現在も復旧作業を継続中ではございますが、当初2/13に復旧完了予定であったデータにエラーが発生、
2/13 21:50現在、翌週(2/16週)に延期せざるを得ない状況となりました。
長期のサービス停止となり誠に申し訳ございません。