Software Raid 5. 1 Platte raus; Raid funktioniert icht mehr

Software Raid 5. 1 Platte raus; Raid funktioniert icht mehr (36 Beiträge, 856 Mal gelesen)

Du bist nicht angemeldet. [ Login/Registrieren ]

Was hat /proc/mdstat denn angezeigt als die Platte abgesteckt war?

Theoretisch sollte da aus dem [UUUU] ein U durch _ ersetzt werden, also z.B. [UU_U].

Zugreifbar sollte es dennoch sein...

was für eine Fehlermeldung gibt er aus wenn die eine Platte fehlt?

Hi.

Wie hat das RAID ausgesehen wenn eine Platte "defekt" war ?

Normalerweise geht der Vorgang so:

- Sys meldet /dev/sdX ist defekt.
- root markiert Platte als defekt (mdadm --fail /dev/mdN /dev/sdX) => Raid geht in Zustand "Clean, Degraded".
- root tauscht Platte aus, formattiert auf Linux Raid Autodetect => Raid geht in Zustand "Clean, Degraded, 1 Spare Drive".
- root added Platte wieder zum Raid, Resync geht los (siehe dazu den super Beitrag von Kombipaket!!!)

In jedem Zustand lässt sich das Raid bedienen (selbst schon leidvoll mehrfach getestet

). Eine fehlerhafte Platte ist kein Disasterfall für das Raid5.

ich weiß, dass ein echtes Hardware-Raid um Ecken besser ist als ein Software
Raid.

Nein nicht wirklich. Bei HW Raids könntest beim Fail von 2 platten im schlechtesten Fall (Seriennummer der HD in der ODS) garnix mehr machen. Beim SW kannst eine der Platten kopieren und wieder hinzufügen => voila. (auch selbst getestet).
Where there is a shell, there is a way!

danke!

kann ich euch später sagen wenn der rebuild fertig ist.

ich verwende Ubuntu 11.04.

Ich habe das Raid schon sicher 10 mal neu erstellt. Auch mit grafischem Tool.

Es funktioniert sweit alles. NUr habe ihc wie gesagt keinen zugriff, sobald eine PLatte weggenommen wird.

Ich werd euch die Infos nachliefern.

Kannst mir mal bitte den Output von "cat /proc/mdstat" posten ?

Wegen dem Rebuild kann ich Dir noch http://forum.geizhals.at/t757899.html ans Herz legen, falls Du diese Tips noch nicht berücksichtigt hast.

Was hastn "oben" auf dem MD Device ? LVM2 oder direkt FS ?

Where there is a shell, there is a way!

/cat/proc/mdstat

Personalities : [raid6] [raid5] [raid4] [linear] [multipath] [raid0] [raid1] [raid10]
md0 : active raid5 sdc1[1] sdb1[0] sde1[4] sdd1[2]
5860538880 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/4] [UUUU]
[=============>.......] resync = 68.1% (1331641600/1953512960) finish=119.4min speed=86770K/sec

darauf hab ich im moment ein fs mit ext4.

Ok na momentan resyncts ja das würd ich einfach mal durchlaufen lassen.

Where there is a shell, there is a way!

soda rebuild is fertig und mdstat sagt folgendes:

cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4] [linear] [multipath] [raid0] [raid1] [raid10]
md0 : active raid5 sdc1[1] sdb1[0] sde1[4] sdd1[2]
5860538880 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/4] [UUUU]

unused devices:

Ok na das passt ja jetzt mal.

Na dann kannst mal probieren ob Du 1 Platte als fault markierst => raid sollte online bleiben mit dem Vermerk "Clean, Degraded".

Where there is a shell, there is a way!

hmmm....moment:

also bei einem meiner vorherigen versuche hab cih die platte vorab mal aus dem raid genommen (mit mdadm als faulty oder so markiert). als ich dann die platte abgesteckt habe lief das raid 5 mit 3 platten und ich konnte zugreifen.

ich weiß nr nicht ob ich dem vertauen kann. was ist wenn die festplatte einen hardwaredefekt hat? kann ich sie dann imme noch mit madm als faulty markieren? oder nicht, weil das gerät gar nciht mehr erkannt wird.

aber is auf jeden fall eine heiße spur, danke

ich weiß nr nicht ob ich dem vertauen kann. was ist wenn die festplatte einen
hardwaredefekt hat? kann ich sie dann imme noch mit madm als faulty markieren?
oder nicht, weil das gerät gar nciht mehr erkannt wird.

Ja genauso funktioniert das System. Du markst eine als fault und entfernst sie (hardwaremässig)

Where there is a shell, there is a way!

also das würde heißen, dass wenn ich die festplatte nur so abstöpsle, das raid sich stoppt. und erst wenn ich die festplatte als fault markiere ich normal auf da raid 5 zugreifen kann?

sorry; ich durschaus noch nicht so ganz.

04.07.2011, 13:59 Uhr - Editiert von hardwaresusi, alte Version: hier

So ist es am saubersten. Du sagst damit das eine Platte als fehlerhaft markiert ist, entfernt sie und bindest ne neue ein.

Sollte auch ohne gehn, aber ich habs sicherheitshalber immer gemacht.

Where there is a shell, there is a way!

Also alle Platten, die mir in Betrieb eingegangen sind, waren automatisch als Faulty markiert....

ah gut zu wissen.

vielen dank!

wie gesagt. ich werd das ncohmals testen sobald ich physisch vor der macshine sitze.

vielen dank!

Also alle Platten, die mir in Betrieb eingegangen sind, waren automatisch als
Faulty markiert....

Wäre ja jetzt auch nur ein Test gewesen in welchem Zustand dann das Raid ist, weil er ja meint das wenn 1 Platte von 4(?) weg ist das das R5 nimmer geht.

Where there is a shell, there is a way!

Er ? Der Susi ? Du bist schon zu lange im GHF

Bzgl. des Raids glaube ich übrigens:
http://forum.geizhals.at/t758893,6494065.html#6494065

04.07.2011, 18:02 Uhr - Editiert von kombipaket, alte Version: hier

Er ? Der Susi ? Du bist schon zu lange im GHF

Mhh jaaa ok Internet-Foren = Männlich

Bzgl. des Raids glaube ich übrigens:
http://forum.geizhals.at/t758893,6494065.html#6494065

Ja des ist natürlich richtig, mich hätte echt gewundert wenn das Raid im Betrieb so stirbt bei 1 Platte.

Where there is a shell, there is a way!

Mhh jaaa ok Internet-Foren = Männlich

Naja. Eher technisches Forum, "hardwaresusi" scheint auch know-how zu haben und liest auch manpages, ... - hast recht, ist ein Mann

.

Bleibt die Frage, ob Astroman auch ein Fake ist

04.07.2011, 19:06 Uhr - Editiert von kombipaket, alte Version: hier

Naja. Eher technisches Forum, "hardwaresusi" scheint auch know-how zu haben
und liest auch manpages, ... - hast recht, ist ein Mann .

JAAA

ich hab halt auch ned am Nickname geschaut

Bleibt die Frage, ob Astroman auch ein Fake ist

Für Graz hoffe ich es

Where there is a shell, there is a way!

Bei mir auch.
Aaaaber. Aus leidvoller Erfahrung mache ich kein RAID 5 mehr mit Platten des gleichen Fabrikates.

Ich hab jetzt schon zweimal erlebt, dass innerhalb einer Nacht zwei von drei Platten gleichzeitig an einigen bad blocks verstorben sind.

Und da schaut man mit einem 5er dann blöd drein. Bei einem 1er muss man nur die paar unlesbaren Dateien aus dem Backup ziehen... .
--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Ich hab jetzt schon zweimal erlebt, dass innerhalb einer Nacht zwei von drei Platten gleichzeitig an einigen bad blocks verstorben sind.

Unterlasse es bitte _AB_SOFORT_, meinen Paniklevel zu steigern

.

Wobei ich zugeben muss, dass mir in den letzten 25 Jahren @home nur 1x Platten eingegangen sind... Im Rahmen einer "Ich bestrafe jetzt den Rechner mit einer Fusstritt-Aktion", während er grad schrieb

. Aber auch damals lies sich noch alles Recovern - ausser den Sektoren, wo der Schreiblesekopf es da grad genauer wissen wollte...

Und da schaut man mit einem 5er dann blöd drein. Bei einem 1er muss man nur die paar unlesbaren Dateien aus dem Backup ziehen... .

Beim RAID5 kannst ja noch genauso retten, oder ?

Ergänzend:
Im Zeitalter von SMART erwarte ich nicht größere Ausfälle in sehr kurzen Zeiträumen... Wobei für mich 1 Woche schon drin sein sollte zwischen 2 Ausfällen, bis eine neue Platte da ist... STOP. Lies noch mal oben: Unterlasse es bitte...

1.) Wenn Du ein Raid audbaust, brauchst es nicht syncen (wenn keine Daten drauf sind). Das spart Zeit beim Testen. Einfach neu anlegen und mkfs...

2.) Wie genau hast "die Platte abgestöpselt" ? Ein Controller sollte Hotplugfähig sein, wenn Du das tust.

3.) Coole Geschwindigkeit der Platten... 100MB/sec beim Reconstruct ? Cool.

4.) Es wäre spannend, was "dmesg" sagt, wenn Du grad auf das Array nicht zugreifen kannst... Könntest Du das liefern ?

1) danke für die info

2) bei dem mainboard unterstützt der sata controller leider kein hot-plug:
http://geizhals.at/a453923.html

is aber nicht weiter schlimm wenn ich mal runterfahren muss, da es kein extrem wichtiger server ist.

ich habe deshalb den rechner runtergefahren, eine platte abgestöpselt, wieder hochgefahren. und ab da hatte ich keinen zugriff mehr auf mein raid.

3) fand ich auch. zuerst war die performance wirklich im keller (4K platten); da hatte ich so 20-30 MB/sec writeperformance. das damalige rebuild hat auch um einiges länger gedauert.

Aber nach richtigem alignment passts nun. bin mehr als zufrieden.

Schreib Performance:
1048576000 bytes (1.0 GB) copied, 8.98506 s, 117 MB/s

Lese Performance:
1000+0 records in
1000+0 records out
1048576000 bytes (1.0 GB) copied, 0.281854 s, 3.7 GB/s

is auch flux fertig

4) kann ich nachliefern

04.07.2011, 17:01 Uhr - Editiert von hardwaresusi, alte Version: hier

is aber nicht weiter schlimm wenn ich mal runterfahren muss, da es kein extrem wichtiger server ist.

Das passt!

Normalerweise werden degraded Raids nicht hochgenommen - das ist ein Sicherheitsfeature. Wenn im Raid-Betrieb eines stirbt, fahren sie aber weiter. Man kann ein md "zwingen", auch degraded hochzufahren... Keine Sorge für die Produktion, dieser Test war nur nicht valide.

Du brauchst dann ein

mdadm -Af /dev/md. /dev/sd....

statt

mdadm -A /dev/md. /dev/sd....

3.7 GB/s

Da hast aber den Cache gemessen... Hast es nach invalidieren der Buffer (
sync; echo 3 > /proc/sys/vm/drop_caches ) ausprobiert ?

04.07.2011, 18:21 Uhr - Editiert von kombipaket, alte Version: hier

als ich die platte wieder darngehängt und ins raid geaddet habe, hat sich der rebbuild wieder gestartet. dauerte aber nciht so lange; die geschwinfdigkeit lag bei ca 113 M/s.

danke nochmals!

05.07.2011, 08:41 Uhr - Editiert von hardwaresusi, alte Version: hier

Ich bin mir nicht 100%ig sicher, aber ich glaube ab ICH5R (und damit auch bei einem ICH7) gibt es bei Intel AHCI-Support fuer den SATA-Controller. Wenn du den bei deinem Board im CMOS-Setup/BIOS aktivieren kannst (Update auf das neueste ROM-Image schadet dabei bestimmt auch nicht), dann kriegst du Hotplug-Support gratis dazu.

danke für dei Info!

werd ich mal probieren.

Ich hab nur irgendwo im Handbuch gelesen dass explizit "SATA, not Hot-Plug able" steht.

Aber is auch scho länger her

Dieses Forum ist eine frei zugängliche Diskussionsplattform.
Der Betreiber übernimmt keine Verantwortung für den Inhalt der Beiträge und behält sich das Recht vor, Beiträge mit rechtswidrigem oder anstößigem Inhalt zu löschen.
Datenschutzerklärung