N40L + Openmediavault + Seagate ST2000DL004 HD204UI

Re(15): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

MG — Mon, 10 Sep 2012 12:03:25 GMT

Du kqannst es mit
fdisk -H 224 -S 56 /dev/sda
probieren. Sollte auf 4k aligned Partitionen machen.

Re(14): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Mon, 10 Sep 2012 11:47:53 GMT

Ok muss es dann zuhause versuchen da ich in der Firma nur mit ssh zugreifen kann

Hmmm versteh i echt ned das i des ned ganz check mit dem Partitionieren.

Würde es sonst mit parted oder so versuchen über die shell

Lg

Re(13): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

MG — Mon, 10 Sep 2012 11:14:24 GMT

Jetzt hast du halt die Partitionen wieder schräg angelegt.
mach das bitte mit gparted. Alles andere ist extrem mühsam!

Das Raid machst du dann mit
mdadm --create --verbose /dev/md0 --auto=yes --level=5 --raid-devices=3 /dev/sda1 /dev/sdb1 /dev/sdc1 /dev/sdd1 --spare-devices=1

(oder raid-devices=4, spare-devices=0)

dann schreibst du die mdam.conf neu
mdadm --detail --scan >> /etc/mdadm.conf
(vorher die alten Zeilen des Raids auskommentieren)

das raid sollte jetzt stehen und rebuilden. mit cat /proc/mdstat kannst du den
Fortschritt verfolgen, wenns dir Spaß macht.

Auf das /dev/md0 legst du jetzt dein lvm
pvcreate /dev/md0
erzeugst deine Volumgroup namens meintollesnas:

vgcreate meintollesnas /dev/md0

auf der kannst du dann Laufwerke ein Laufwerk namens datenplatz erzeugen:

lvcreate -L 5G -n datenplatz meintollesnas

das kannst du jetzt wie folgt formatieren:
mkfs.ext4 /dev/mapper/meintollesnas-datenplatz
oder auch
mkfs.ext4 /dev/meintollesnas/datenplatz

Das mountest du dann noch dorthin wo du es haben willst.

zum guten Schluss, erstelle noch die initiale RAM-Disk neu, dass RAID und LVM beim booten auch da sind:
update-initramfs -u

Dann sollten deine Platten schon mit guter Performance laufen. Auch wenn der rebuild noch läuft.

Re(12): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Mon, 10 Sep 2012 10:40:19 GMT

Hmmm finde ich echt komisch.

Gibts vlt wo eine Anleitung wie ich das per Hand machen kann?

Ich finde nämlich nur das:

http://www.itwelt.org/anleitungen-howto/linux-740817696/285-software-raid-einrichten-ubuntudebian

Danke und Lg Wolfgang

Re(12): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Mon, 10 Sep 2012 10:40:19 GMT

Hmmm finde ich echt komisch.

Gibts vlt wo eine Anleitung wie ich das per Hand machen kann?
Oder könnten wir die Konfig mal zusammen durchgehen?

Ich finde nämlich nur das:

http://www.itwelt.org/anleitungen-howto/linux-740817696/285-software-raid-einrichten-ubuntudebian

Danke und Lg Wolfgang

Edit:

Habe jetzt folgendes gemacht:

cfdisk -h224 -s56 /dev/sda-d
sfdisk -d /dev/sda | sfdisk --force /dev/sdb
sfdisk -d /dev/sda | sfdisk --force /dev/sdc
sfdisk -d /dev/sda | sfdisk --force /dev/sdd

mdadm --create /dev/md0 --level=5 --chunk=128 --raid-devices=4 /dev/sda1 /dev/sdb1 /dev/sdc1 /dev/sdd1

root@nas:~# mdadm --detail /dev/md0
/dev/md0:
        Version : 1.2
  Creation Time : Mon Sep 10 14:55:37 2012
     Raid Level : raid5
     Array Size : 5860521600 (5589.03 GiB 6001.17 GB)
  Used Dev Size : 1953507200 (1863.01 GiB 2000.39 GB)
   Raid Devices : 4
  Total Devices : 4
    Persistence : Superblock is persistent

    Update Time : Mon Sep 10 14:59:34 2012
          State : clean, degraded, recovering
Active Devices : 3
Working Devices : 4
Failed Devices : 0
  Spare Devices : 1

         Layout : left-symmetric
     Chunk Size : 128K

Rebuild Status : 0% complete

           Name : nas:0  (local to host nas)
           UUID : b4e22484:a2026e79:b2a66f78:e0f26075
         Events : 106

    Number   Major   Minor   RaidDevice State
       0       8        1        0      active sync   /dev/sda1
       1       8       17        1      active sync   /dev/sdb1
       2       8       33        2      active sync   /dev/sdc1
       4       8       49        3      spare rebuilding   /dev/sdd1

root@nas:~#  sfdisk -d /dev/sda
# partition table of /dev/sda
unit: sectors

/dev/sda1 : start=       56, size=3907016904, Id=83
/dev/sda2 : start=        0, size=        0, Id= 0
/dev/sda3 : start=        0, size=        0, Id= 0
/dev/sda4 : start=        0, size=        0, Id= 0

root@nas:~# parted /dev/sda align-check opt
Partition number? 1
1 not aligned

Re(12): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Mon, 10 Sep 2012 10:40:19 GMT

Hmmm finde ich echt komisch.

Gibts vlt wo eine Anleitung wie ich das per Hand machen kann?
Oder könnten wir die Konfig mal zusammen durchgehen?

Ich finde nämlich nur das:

http://www.itwelt.org/anleitungen-howto/linux-740817696/285-software-raid-einrichten-ubuntudebian

Danke und Lg Wolfgang

Edit:

Habe jetzt folgendes gemacht:

cfdisk -h224 -s56 /dev/sda-d
sfdisk -d /dev/sda | sfdisk --force /dev/sdb
sfdisk -d /dev/sda | sfdisk --force /dev/sdc
sfdisk -d /dev/sda | sfdisk --force /dev/sdd

mdadm --create --assume-clean --level=5 --raid-devices=4 --chunk=128 /dev/md0 /dev/sde1 /dev/sdc1 /dev/sd1 /dev/sda1

root@nas:~# mdadm --detail /dev/md0
/dev/md0:
        Version : 1.2
  Creation Time : Mon Sep 10 14:55:37 2012
     Raid Level : raid5
     Array Size : 5860521600 (5589.03 GiB 6001.17 GB)
  Used Dev Size : 1953507200 (1863.01 GiB 2000.39 GB)
   Raid Devices : 4
  Total Devices : 4
    Persistence : Superblock is persistent

    Update Time : Mon Sep 10 14:59:34 2012
          State : clean, degraded, recovering
Active Devices : 3
Working Devices : 4
Failed Devices : 0
  Spare Devices : 1

         Layout : left-symmetric
     Chunk Size : 128K

Rebuild Status : 0% complete

           Name : nas:0  (local to host nas)
           UUID : b4e22484:a2026e79:b2a66f78:e0f26075
         Events : 106

    Number   Major   Minor   RaidDevice State
       0       8        1        0      active sync   /dev/sda1
       1       8       17        1      active sync   /dev/sdb1
       2       8       33        2      active sync   /dev/sdc1
       4       8       49        3      spare rebuilding   /dev/sdd1

root@nas:~#  sfdisk -d /dev/sda
# partition table of /dev/sda
unit: sectors

/dev/sda1 : start=       56, size=3907016904, Id=83
/dev/sda2 : start=        0, size=        0, Id= 0
/dev/sda3 : start=        0, size=        0, Id= 0
/dev/sda4 : start=        0, size=        0, Id= 0

root@nas:~# parted /dev/sda align-check opt
Partition number? 1
1 not aligned

Re(12): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Mon, 10 Sep 2012 10:40:19 GMT

Re(11): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

MG — Mon, 10 Sep 2012 07:36:14 GMT

Da sind schon wieder so wie zuerst, die nackten Platten im md device.
Da scheint dieses Openmediavault, deine ganze Partitionierung rückgängig zu machen, und Müll zu bauen.

Wahrscheinlich kann man dort irgendwo konfigurieren, welche Partitionen es ins RAID nehmen soll.

Re(10): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Mon, 10 Sep 2012 05:00:48 GMT

Schaut irgendwie ned gut aus oder?

root@nas:~# pvs
  PV         VG     Fmt  Attr PSize PFree
  /dev/md0   datavg lvm2 a-   5.46t 469.04g

root@nas:~# lvs
  LV         VG     Attr   LSize Origin Snap%  Move Log Copy%  Convert
  Multimedia datavg -wi-ao 5.00t

root@nas:~# parted /dev/sda align-check opt
Partition number?
Partition number? 1
Error: Partition doesn't exist.

root@nas:~# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sdd[3] sdc[2] sdb[1] sda[0]
      5860538880 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/4] [UUUU]

unused devices:

root@nas:~# parted /dev/md0 align-check opt
Error: /dev/md0: unrecognised disk label

Re(10): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Sun, 09 Sep 2012 17:43:00 GMT

Er baut gerade das Raid auf und des dauert leider ein Paar Stunden

Erst dann kann ich Testen.

Vielen Dank für deine Hilfe ....

Stand echt auf der Leitung ....

Unter AIX tu ich mir da wesentlich leichter gg

Re(9): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

MG — Sun, 09 Sep 2012 17:41:47 GMT

Schaut sehr viel besser aus. Sollte jetzt um einiges performanter sein.

Re(8): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Sun, 09 Sep 2012 17:00:37 GMT

Also hab jetzt folgendes gemacht:

parted -a optimal /dev/sdx
mklabel msdos
quit

Und wenn ich jetzt folgendes mache:

root@nas:~# parted /dev/md0 align-check opt
Partition number? 1
1 aligned

Passt des jetzt so?

Re(7): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

MG — Sun, 09 Sep 2012 16:24:45 GMT

Ja. Das ist wie ich befürchtet habe. Unpartitionierte Platten in ein md device gezwungen.

Das erscheint mir als schwer ungesund.
Daten runter. Und platt machen. Auf den Platten jedenfalls eine anständige Partition mit Typ Linux RAID anlegen. Dabei auf alignment achten. Hinweis: gparted macht das automatisch.

Diese kommen dann ins Array. Und auf dem dann das lvm.

Re(6): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Sun, 09 Sep 2012 16:18:22 GMT

Bitte sehr:

root@nas:~# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md127 : active raid5 sda[0] sdd[3] sdc[2] sdb[1]
      5860538880 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/4] [UUUU]

unused devices:

root@nas:~# pvs
  PV         VG     Fmt  Attr PSize PFree
  /dev/md127 datavg lvm2 a-   5.46t 3.46t

root@nas:~# lvs
  LV         VG     Attr   LSize Origin Snap%  Move Log Copy%  Convert
  Multimedia datavg -wi-ao 2.00t

root@nas:~# parted /dev/sda align-check opt
Error: /dev/sda: unrecognised disk label

root@nas:~# parted /dev/sdb align-check opt
Error: /dev/sdb: unrecognised disk label

root@nas:~# parted /dev/sdc align-check opt
Error: /dev/sdc: unrecognised disk label

root@nas:~# parted /dev/sdd align-check opt
Error: /dev/sdd: unrecognised disk label

Lg Wolfgang

Re(5): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

MG — Sun, 09 Sep 2012 16:10:21 GMT

gib mal:
sudo cat /proc/mdstat

sudo pvs

sudo lvs

und prüfe das Alignment mit folgendem Befehl für alle Partitionen.
sudo parted /dev/sda align-check opt

Re(4): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Sun, 09 Sep 2012 15:37:07 GMT

Hmmm jetzt komm ich mir schon blöd vor ....

Also ich habe das Raid erstellt und dann drauf ext4 angelegt.

Und ja per CIFS kann ich es Mounten und Daten draufpacken mit 90MB pro Sek aber da ist die CPU beim NAS dann bei 80 bis 90 %

Ich glaub i hab echt grad an Denkfehler

Re(4): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

user86060 — Sun, 09 Sep 2012 12:26:23 GMT

Du hast doch nicht etwa die unparti8tionierten Geräte in das Raid device
gesteckt?

bzw.

entweder das hier wurde schlecht formuliert:

"Wenn ich per ssh auf das NAS einlogge und über die /dev/md0 etwas kopiere oder erstelle "

oder da ist ein fataler Denkfehler passiert .....

@TE - funktioniert das NAS denn per CIFS noch?

Re(3): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

MG — Sun, 09 Sep 2012 11:28:11 GMT

Da sieh ich überhaupt kein Alignment.

Du hast doch nicht etwa die unparti8tionierten Geräte in das Raid device gesteckt?
Dann wundert mich nichts mehr.

Re(2): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Sun, 09 Sep 2012 11:05:06 GMT

Hi OMV ist ähnlich wie freenas bzw nas4free nur auf Debian basis.

http://www.openmediavault.org/

Alignment auf /dev/md127:

root@nas:~# fdisk -l -u /dev/md127
Disk /dev/md127: 6001.2 GB, 6001191813120 bytes
2 heads, 4 sectors/track, 1465134720 cylinders, total 11721077760 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 524288 bytes / 1572864 bytes
Disk identifier: 0x00000000

Disk /dev/md127 doesn't contain a valid partition table

Alignment auf /dev/sdb:

root@nas:~# fdisk -l -u /dev/sdb

Disk /dev/sdb: 2000.4 GB, 2000398934016 bytes
255 heads, 63 sectors/track, 243201 cylinders, total 3907029168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000

Disk /dev/sdb doesn't contain a valid partition table

Lg Wolfgang

Re: N40L + Openmediavault + Seagate ST2000DL004 HD204UI

MG — Sun, 09 Sep 2012 10:48:48 GMT

Keine Ahnung was OMV ist. Aber für schlechte Performance ist meistens nicht vernünftig partitionierte Platten schuld. Teste mal das Alignement deiner Partitionen.

Re(2): N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Sun, 09 Sep 2012 08:15:52 GMT

Ah ok das dachte ich mir mit /dev/random usw ...

Ich test mit rsync und zwar synce ich /var aufs Raid und das mit nur 1,8 MB pro sek ...

Ich versteh echt nicht was da los is ...

Re: N40L + Openmediavault + Seagate ST2000DL004 HD204UI

kzanol — Sun, 09 Sep 2012 05:50:24 GMT

Das erste was mir dazu einfällt: /dev/random liefert nicht beliebig viel Daten, d.h. das bleibt hängen sobald die verfügbaren Zufallsdaten "aufgebraucht" sind.
wenn Du /dev/urandom verwendest, bekommst Du zumindest beliebige Datenmengen ohne hängenzubleiben, aber: auch das ist sehr langsam, da ist das lesen/generieren der Zufallsdaten mit Sicherheit der limitierende Faktor des Tests.

wie/was genau testest Du nach login über ssh lokal auf dem gerät?

N40L + Openmediavault + Seagate ST2000DL004 HD204UI

hintereingang — Sat, 08 Sep 2012 20:34:16 GMT

Hi

Habe OMV installiert und ein /dev/md0 über 4 2TB Platten angelegt.
Das System startet von USB.
Eingerichtet wurde alles mit LVM2 auf ext4.

Folgendes Problem:

Wenn ich mit CIFS Verbinde und einen NAS Test mache habe ich geschwindigkeiten von mehr als 90 MB. Die CPU läuft dabei auf über 60%.

Wenn ich das ganze per nfs4 mounte mit:

mount.nfs4 -w 192.168.0.131:Multimeida /mnt/nasneu -o rsize=8192,wsize=8192

und folgendes Test ausführe:

dd if=/dev/random of=wolly.test bs=8192 count=9999

Und ich nach Minuten abbreche:

^C0+160 Datensätze ein
0+160 Datensätze aus
1445 Bytes (1,4 kB) kopiert, 312,531 s, 0,0 kB/s

Dann kann da was nicht stimmen ....

Wenn ich per ssh auf das NAS einlogge und über die /dev/md0 etwas kopiere oder erstelle bringe ich nur 1,89 MB zusammen was echt sehr sehr sehr sehr langsam ist.

Raid usw wurde über das WebGUI eingerichtet.

Hat vlt irgendwer eine Idee was da los sein kann?

Danke und lg Wolly