Re: Gibt es kein Raid, das Bitstürze erkennt?

Gibt es kein Raid, das Bitstürze erkennt? (23 Beiträge, 678 Mal gelesen)

Du bist nicht angemeldet. [ Login/Registrieren ]

Ich habe gelegentlich korrupte Dateien.

Problem 1:

Dies merke ich oft zu spät, sodaß auch das Backup bereits beschädigt ist.

Somit suche ich eine automatisierte Lösung, die

- mehrere Festplatten abgleicht (mindestens 3), idealerweise ohne Paritätsbitberechnung
- BEI FEHLERN DIE MEHRHEIT DER PLATTEN ENTSCHEIDEN LÄSST
- das Bit auf der fehlerhaften Platte korrigiert
- wie bei S.M.A.R.T. die Durchführung der Korrektur auf der fehlerhaften Platte hinterlegt
- bei zu vielen Fehlern zum Austauschen der Platte auffordert.

Soweit ich mich informiert habe, gibt es diese Lösung nicht.

Raid 1 arbeitet nur mit zwei Platten und kann somit nur Lesefehler ausgleichen, aber bei Unstimmigkeiten der Bits ist es ratlos und gibt bestenfalls eine Fehlermeldung aus. Was ja schon einmal besser als nichts wäre.

Alle anderen Raid Levels arbeiten nur mit Paritätsbits und werden dadurch zwar schneller im Dateizugriff, worauf ich pfeife, machen aber andererseits keinen multiplen Abgleich der Daten und können somit Bitstürze genauso wenig korrigieren.

Was brauche ich?

a) Entweder eine Raid-Lösung, die eben aufgrund der obigen Vorgaben Bitstürze findet und korrigiert
b) Wenn es das nicht gibt, eine Software-Lösung, die beschädigte Videodateien wieder so weit korrigiert, dass sie wieder abspielbar sind (wie beim digitalen Bändern, da gehen ja auch höchstens einige Frames verloren).

Ich glaube, dass dieses Thema eigentlich nicht nur mich trifft, sondern eigentlich alle und warte auf eine rege, konstruktive Beteiligung.

31.10.2016, 07:52 Uhr - Editiert von Michael, alte Version: hier

Re: Gibt es kein Raid, das Bitstürze erkennt? (hellbringer am 31.10.2016, 08:54:47)

Re: Gibt es kein Raid, das Bitstürze erkennt? (HITCHER am 31.10.2016, 08:57:11)

Re: Gibt es kein Raid, das Bitstürze erkennt?

(Bart Simpson am 31.10.2016, 10:23:59)

Re(2): Gibt es kein Raid, das Bitstürze erkennt? (user86060 am 31.10.2016, 12:01:53)

Re: Gibt es kein Raid, das Bitstürze erkennt? (Beel_Zebub am 31.10.2016, 12:37:09)

Re: Gibt es kein Raid, das Bitstürze erkennt? (user86060 am 31.10.2016, 13:02:33)

Dies merke ich oft zu spät, sodaß auch das Backup bereits beschädigt ist.

Hebst du bei deinem Backup nicht ältere Versionen eine Weile auf?

Leute rümpfen ja gerne die Nase über Backups auf optischen Medien weil die verfaulen würden... aber das schöne an denen ist, einmal geschrieben, überschreibt man sie nicht mehr, und sie überleben Blitzschlag, solange die Bude davon nicht abbrennt.

bei Unstimmigkeiten der Bits ist es ratlos

Unstimmigkeiten bei Bits gibt es eigentlich nicht. Dafür sorgen die Festplatten selber, die für jeden Sektor eine Prüfsumme haben. Und beim Umstieg auf 4K Sektoren ist dieses System nochmal verbessert worden. Wenn da ein Bit kippt dann werden nicht falsche Daten zurückgeliefert sondern Lesefehler.

Die Frage ist also, wo kommt deine Korruption eigentlich her? Wenn dein RAM futsch ist oder eine Software einen Bug hat und schon kaputte Dateien schreibt, dann hilft dir keine Storage und kein Dateisystem der Welt, die ZFS/BTRFS werden dann eben Prüfsummen von den kaputten Daten führen.

Mal davon abgesehen, daß sich ein echter Bitfehler, z.B. in einem JPEG Bild, ohne weiteres korrigieren ließe. Ein einzelnes geflipptes Bit könnte man problemlos wieder zurück-flippen. Aber so sieht die Datenkorruption halt eben in der Praxis niemals aus, da liegt der Hase woanders im Pfeffer.

Der häufigste Fehler bei RAID ist daß die Festplattenüberwachung fehlt. Lesefehler können über Jahre unentdeckt bleiben, und bis das RAID dann anfängt eine Platte rauszuwerfen, ist es schon zu spät. Regelmäßige Lesetests machen und bei Fehlern (Reallocated/Pending/Uncorrectable Sectors in SMART usw.) auch in den sauren Apfel beissen und den Müll austauschen.

RAID kann zwar keine Bitfehler korrigieren, aber RAID kann abgleichen ob die Spiegelung / die Parität zu den Daten passt. Unter Linux mdadm ist das RAID check und danach schauen ob `cat /sys/block/md42/md/mismatch_cnt` gleich 0 ist. RAID kann das zwar dann nicht korrigieren aber du weißt dann wenigstens schon mal, daß eine der Platten aus der Reihe tanzt und könntest dann entsprechende Schritte ergreifen (bei RAID 1, das RAID trennen, beide Seiten einzeln mounten und Dateien vergleichen).

Re(2): Gibt es kein Raid, das Bitstürze erkennt? (Michael am 01.11.2016, 18:58:38)

Re: Gibt es kein Raid, das Bitstürze erkennt? (Bucho am 01.11.2016, 16:54:51)

Re(2): Gibt es kein Raid, das Bitstürze erkennt? (Michael am 01.11.2016, 20:29:53)

Re(3): Gibt es kein Raid, das Bitstürze erkennt? (user86060 am 01.11.2016, 21:44:20)

Re(3): Gibt es kein Raid, das Bitstürze erkennt? (HITCHER am 02.11.2016, 07:59:52)

Re(4): Gibt es kein Raid, das Bitstürze erkennt? (user86060 am 02.11.2016, 16:09:21)

Dieses Forum ist eine frei zugängliche Diskussionsplattform.
Der Betreiber übernimmt keine Verantwortung für den Inhalt der Beiträge und behält sich das Recht vor, Beiträge mit rechtswidrigem oder anstößigem Inhalt zu löschen.
Datenschutzerklärung