HDDの信頼性（データ化け）について

Question

ごくごく一般的（ヤマダ電機などで売っている）なデスクトップパソコンで、
10TB程度のデータを毎回バックアップするとどの程度の確率で壊れますか？

パソコンは正常でもこのようなことは起こるのでしょうか？
また、企業などデータが化けるのはまずいという環境の場合どのように対策をされているのでしょうか？

lbn0915 · Accepted Answer

＞HDDが気づかないエラーと言うことでしょうか？
そう考えておいた方が良いかと思います。
HDDが気がつくエラーは実はしょっちゅう出ていて、ECCやその他のエラー回復手段によって元に戻してホスト側へ送っています。そういった機能を通り越してきてしまうのが、先程のエラーかと。
（元に戻せないエラーはHDDからOSに通知があります）

なので人間にしかデータ化けは分かりませんから、多重バックアップが基本でしょう。

＞企業などどのように対策しているのでしょうかね？
私の勤めている会社では、一応世代バックアップ（１週間分）は取ってあるので、社内の共有ストレージのデータが壊れている場合、情報システム部門に問い合わせれば、残っている過去のデータを出してくれます。
後は、渋いですが磁気テープに書き出すのも結構良いソリューションです。
ソフトエラーは全然関係ありませんし、保管庫がしっかりしていれば50年くらいはデータは壊れないとか。

＞ハード面について（略）データ化けの対策も同時に行われているのでしょうか？
クラウド分散型ストレージの場合はデータが冗長化してあるので、一つくらいのサイトが吹き飛んでもデータを復元出来ます（普通のRAIDと同じです）。一般的なデータ化けはこの処理で復元されるので（ネット越しなのでデータ化けはより高頻度になります）、HDD一発でデータを保管するよりかは安全かと思われます。

その他、データの完全性を保つのに、掛けるコストによって様々なソリューションがあると思います。
安い方法としては、RAR圧縮で冗長化してしまう。ビット化けくらいでは完全に元に戻してしまいます。
普通の企業では、データが壊れた壊れていないの判断はユーザに任せるとして、データを多重でバックアップしておく（HDDのデータ化け対策）。
原発とかのミッションクリティカルなシステムの場合、システムまるごと多重化して、全ての計算結果の一致不一致をチェックして、データの一致を保証するなどの方法があります。

ts3m-ickw · Answer

データ化けは主にHDD側の問題です。
もちろんパソコン内部でデータ化けする可能性も0ではありませんが、
HDD記録時の書き込み不良発生率をスペックで表し、カタログにも載っています。

データ化けが問題になる場合、多くはRAIDを組むか定期的にバックアップを取ります。
同時に2つ以上のHDDに同じデータを書き込むRAID1（1TB×2=1TB）
パリティを利用してデータ化けを自動補正するRAID5（1TB×4=3TB）
RAID5のパリティ台数を2台にしたRAID6（1TB×5=3TB）
安全性と高速性を考えるとRAID10がいいですね（1TB×4=2TB）。

うちでは9TBのRAID5が2台、6TBのRAID5が1台稼働してます。
バックアップが取れる容量ではないので、リビルドできないほど壊れたら泣いて諦めます。

kimamaoyaji · Answer

あの10ＴＢですよね、ごく一般的なＰＣで毎回10ＴＢ程度ってそんな軽々しく、バックアックするって、いったい何100ＴＢそれとも何ＰＢ（ペタバイト）のＨＤＤを使うのでしょう、そしてごく一般的なＰＣからはコントロールできない容量なんですが？スパコンかサーバーセンター規模の容量ですが。
データー化けなど起きませんよ、一般的にパリティビットを入れてチェックしているので、パリティが合わない時点で書き直しです、何度かリトライしてダメなセクターはパッチを当てて使えないようにして別の場所から書き始めます。
それでもまずいなら、１から読んだデータを２に書いて２の書いたデーターがメモリ上もしくは１と一致するか比較して、ＯＫなら次に行くと言う方法にすれば確実ですが、転送時間は倍になります。

m_and_dmp · Answer

高い頻度ではありませんが、バックアップしたデータを読めなかった（ファイルが破損）ことはあります。どのくらいの確率で、といわれてもそのような目的で調査をしたことがないのでわかりません。
ご自分で調べるなら、CrystalDiskInfo など、ＨＤＤのS.M.A.R.T（Self-Monitoring Analysis and Reporting Technology）情報を分析するツールを使用して、大量のデータを転送した後、どのくらいのリードエラーが出ているか見ると多少の情報は得られると思います。
私の1600時間ほど使用した2TBのHDD（高頻度でデータバックアップをします。）のリードエラーレートは「ゼロ」と表示されています。

lbn0915 · Answer

＞10TB程度のデータを毎回バックアップするとどの程度の確率で壊れますか？
データ化けの頻度はHDDのスペックシートに書いてあります。
私のお気に入りのDT01ACA300の場合、エラーレートは10の14乗bitとありますので、12.5TB読み書きしたら1ビットほどデータ化けが出るのかも知れません。

なお、上記はHDDのみに起因したエラーレートであって、チップセットやメモリに起因するエラーを考えた場合、より頻度が高くなるでしょう。（具体的な数値は分かりません。最近のソフトエラーについての論文などを参照して頂ければと）

↓SRAMの記事ですがご参考
http://pc.watch.impress.co.jp/docs/news/event/20120427_529947.html

＞パソコンは正常でもこのようなことは起こるのでしょうか？
起こりえます。

＞また、企業などデータが化けるのはまずいという環境の場合どのように対策をされているのでしょうか？ 
（少しは）ソフトエラーに強いECC等を積んだサーバ機を使い、RAIDで多重化したり、世代バックアップとフルバックアップを併用してデータが複数ある状態にするのが良くあるパターンかと思います。
最近はクラウドでデータを各国に分散させるのも流行かも知れません。

greias · Answer

10TB程度のデータをバックアップって・・・
それほどのサイズのデータを頻繁にバックアップするような状況にありそうなのでしょうか？

基本的にバックアップ時にデータが壊れるような可能性よりはHDDそのもののハード的な破損の方が可能性は高いと思います。
結局のところ諸々の要因を考慮すれば、バックアップの機会が多くなればその分破損の可能性も高くなるとしか言い様がありません。どちらかといえば10TBが本当にバックアップ対象として存在するのならば、それを一括でバックアップして全部が駄目になるようなリスクを負うよりは、１～数TB程度に分割してデータが全滅するリスクを軽減する方が得策なのでは？

バックアップデータはともかく、実データの保管についてもRAID組んで対策したとしてもRAIDコントローラのハード的破損でHDDそのものは無事でもデータの読み書きができなくなるというリスクはついて回りますからね。

つまるところ大量のデータを保管するのなら、一括保存するのではなく分散してリスクを軽減すべき、これはプライベートでも企業でも同じことです。

HDDの信頼性（データ化け）について

＞HDDが気づかないエラーと言うことでしょうか？

データ化けは主にHDD側の問題です。

高い頻度ではありませんが、バックアップしたデータを読めなかった（ファイルが破損）ことはあります。

＞10TB程度のデータを毎回バックアップするとどの程度の確率で壊れますか？

10TB程度のデータをバックアップって・・・

似たような質問が見つかりました

関連するカテゴリからQ&Aを探す

デイリーランキングこのカテゴリの人気デイリーQ&Aランキング

マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング