N40L + Openmediavault + Seagate ST2000DL004 HD204UI

N40L + Openmediavault + Seagate ST2000DL004 HD204UI (23 Beiträge, 465 Mal gelesen)

Du bist nicht angemeldet. [ Login/Registrieren ]

Hi

Habe OMV installiert und ein /dev/md0 über 4 2TB Platten angelegt.
Das System startet von USB.
Eingerichtet wurde alles mit LVM2 auf ext4.

Folgendes Problem:

Wenn ich mit CIFS Verbinde und einen NAS Test mache habe ich geschwindigkeiten von mehr als 90 MB. Die CPU läuft dabei auf über 60%.

Wenn ich das ganze per nfs4 mounte mit:

mount.nfs4 -w 192.168.0.131:Multimeida /mnt/nasneu -o rsize=8192,wsize=8192

und folgendes Test ausführe:

dd if=/dev/random of=wolly.test bs=8192 count=9999

Und ich nach Minuten abbreche:

^C0+160 Datensätze ein
0+160 Datensätze aus
1445 Bytes (1,4 kB) kopiert, 312,531 s, 0,0 kB/s

Dann kann da was nicht stimmen ....

Wenn ich per ssh auf das NAS einlogge und über die /dev/md0 etwas kopiere oder erstelle bringe ich nur 1,89 MB zusammen was echt sehr sehr sehr sehr langsam ist.

Raid usw wurde über das WebGUI eingerichtet.

Hat vlt irgendwer eine Idee was da los sein kann?

Danke und lg Wolly

Das erste was mir dazu einfällt: /dev/random liefert nicht beliebig viel Daten, d.h. das bleibt hängen sobald die verfügbaren Zufallsdaten "aufgebraucht" sind.
wenn Du /dev/urandom verwendest, bekommst Du zumindest beliebige Datenmengen ohne hängenzubleiben, aber: auch das ist sehr langsam, da ist das lesen/generieren der Zufallsdaten mit Sicherheit der limitierende Faktor des Tests.

wie/was genau testest Du nach login über ssh lokal auf dem gerät?

Ah ok das dachte ich mir mit /dev/random usw ...

Ich test mit rsync und zwar synce ich /var aufs Raid und das mit nur 1,8 MB pro sek ...

Ich versteh echt nicht was da los is ...

Keine Ahnung was OMV ist. Aber für schlechte Performance ist meistens nicht vernünftig partitionierte Platten schuld. Teste mal das Alignement deiner Partitionen.
--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Hi OMV ist ähnlich wie freenas bzw nas4free nur auf Debian basis.

http://www.openmediavault.org/

Alignment auf /dev/md127:

root@nas:~# fdisk -l -u /dev/md127
Disk /dev/md127: 6001.2 GB, 6001191813120 bytes
2 heads, 4 sectors/track, 1465134720 cylinders, total 11721077760 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 524288 bytes / 1572864 bytes
Disk identifier: 0x00000000

Disk /dev/md127 doesn't contain a valid partition table

Alignment auf /dev/sdb:

root@nas:~# fdisk -l -u /dev/sdb

Disk /dev/sdb: 2000.4 GB, 2000398934016 bytes
255 heads, 63 sectors/track, 243201 cylinders, total 3907029168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000

Disk /dev/sdb doesn't contain a valid partition table

Lg Wolfgang

Da sieh ich überhaupt kein Alignment.

Du hast doch nicht etwa die unparti8tionierten Geräte in das Raid device gesteckt?
Dann wundert mich nichts mehr.

--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Du hast doch nicht etwa die unparti8tionierten Geräte in das Raid device
gesteckt?

bzw.

entweder das hier wurde schlecht formuliert:

"Wenn ich per ssh auf das NAS einlogge und über die /dev/md0 etwas kopiere oder erstelle "

oder da ist ein fataler Denkfehler passiert .....

@TE - funktioniert das NAS denn per CIFS noch?

Hmmm jetzt komm ich mir schon blöd vor ....

Also ich habe das Raid erstellt und dann drauf ext4 angelegt.

Und ja per CIFS kann ich es Mounten und Daten draufpacken mit 90MB pro Sek aber da ist die CPU beim NAS dann bei 80 bis 90 %

Ich glaub i hab echt grad an Denkfehler

gib mal:
sudo cat /proc/mdstat

sudo pvs

sudo lvs

und prüfe das Alignment mit folgendem Befehl für alle Partitionen.
sudo parted /dev/sda align-check opt
--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Bitte sehr:

root@nas:~# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md127 : active raid5 sda[0] sdd[3] sdc[2] sdb[1]
      5860538880 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/4] [UUUU]

unused devices:

root@nas:~# pvs
  PV         VG     Fmt  Attr PSize PFree
  /dev/md127 datavg lvm2 a-   5.46t 3.46t

root@nas:~# lvs
  LV         VG     Attr   LSize Origin Snap%  Move Log Copy%  Convert
  Multimedia datavg -wi-ao 2.00t

root@nas:~# parted /dev/sda align-check opt
Error: /dev/sda: unrecognised disk label

root@nas:~# parted /dev/sdb align-check opt
Error: /dev/sdb: unrecognised disk label

root@nas:~# parted /dev/sdc align-check opt
Error: /dev/sdc: unrecognised disk label

root@nas:~# parted /dev/sdd align-check opt
Error: /dev/sdd: unrecognised disk label

Lg Wolfgang

Ja. Das ist wie ich befürchtet habe. Unpartitionierte Platten in ein md device gezwungen.

Das erscheint mir als schwer ungesund.
Daten runter. Und platt machen. Auf den Platten jedenfalls eine anständige Partition mit Typ Linux RAID anlegen. Dabei auf alignment achten. Hinweis: gparted macht das automatisch.

Diese kommen dann ins Array. Und auf dem dann das lvm.
--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Also hab jetzt folgendes gemacht:

parted -a optimal /dev/sdx
mklabel msdos
quit

Und wenn ich jetzt folgendes mache:

root@nas:~# parted /dev/md0 align-check opt
Partition number? 1
1 aligned

Passt des jetzt so?

Schaut sehr viel besser aus. Sollte jetzt um einiges performanter sein.
--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Er baut gerade das Raid auf und des dauert leider ein Paar Stunden

Erst dann kann ich Testen.

Vielen Dank für deine Hilfe ....

Stand echt auf der Leitung ....

Unter AIX tu ich mir da wesentlich leichter gg

Schaut irgendwie ned gut aus oder?

root@nas:~# pvs
  PV         VG     Fmt  Attr PSize PFree
  /dev/md0   datavg lvm2 a-   5.46t 469.04g

root@nas:~# lvs
  LV         VG     Attr   LSize Origin Snap%  Move Log Copy%  Convert
  Multimedia datavg -wi-ao 5.00t

root@nas:~# parted /dev/sda align-check opt
Partition number?
Partition number? 1
Error: Partition doesn't exist.

root@nas:~# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sdd[3] sdc[2] sdb[1] sda[0]
      5860538880 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/4] [UUUU]

unused devices:

root@nas:~# parted /dev/md0 align-check opt
Error: /dev/md0: unrecognised disk label

Da sind schon wieder so wie zuerst, die nackten Platten im md device.
Da scheint dieses Openmediavault, deine ganze Partitionierung rückgängig zu machen, und Müll zu bauen.

Wahrscheinlich kann man dort irgendwo konfigurieren, welche Partitionen es ins RAID nehmen soll.
--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Hmmm finde ich echt komisch.

Gibts vlt wo eine Anleitung wie ich das per Hand machen kann?
Oder könnten wir die Konfig mal zusammen durchgehen?

Ich finde nämlich nur das:

http://www.itwelt.org/anleitungen-howto/linux-740817696/285-software-raid-einrichten-ubuntudebian

Danke und Lg Wolfgang

Edit:

Habe jetzt folgendes gemacht:

cfdisk -h224 -s56 /dev/sda-d
sfdisk -d /dev/sda | sfdisk --force /dev/sdb
sfdisk -d /dev/sda | sfdisk --force /dev/sdc
sfdisk -d /dev/sda | sfdisk --force /dev/sdd

mdadm --create /dev/md0 --level=5 --chunk=128 --raid-devices=4 /dev/sda1 /dev/sdb1 /dev/sdc1 /dev/sdd1

root@nas:~# mdadm --detail /dev/md0
/dev/md0:
        Version : 1.2
  Creation Time : Mon Sep 10 14:55:37 2012
     Raid Level : raid5
     Array Size : 5860521600 (5589.03 GiB 6001.17 GB)
  Used Dev Size : 1953507200 (1863.01 GiB 2000.39 GB)
   Raid Devices : 4
  Total Devices : 4
    Persistence : Superblock is persistent

    Update Time : Mon Sep 10 14:59:34 2012
          State : clean, degraded, recovering
Active Devices : 3
Working Devices : 4
Failed Devices : 0
  Spare Devices : 1

         Layout : left-symmetric
     Chunk Size : 128K

Rebuild Status : 0% complete

           Name : nas:0  (local to host nas)
           UUID : b4e22484:a2026e79:b2a66f78:e0f26075
         Events : 106

    Number   Major   Minor   RaidDevice State
       0       8        1        0      active sync   /dev/sda1
       1       8       17        1      active sync   /dev/sdb1
       2       8       33        2      active sync   /dev/sdc1
       4       8       49        3      spare rebuilding   /dev/sdd1

root@nas:~#  sfdisk -d /dev/sda
# partition table of /dev/sda
unit: sectors

/dev/sda1 : start=       56, size=3907016904, Id=83
/dev/sda2 : start=        0, size=        0, Id= 0
/dev/sda3 : start=        0, size=        0, Id= 0
/dev/sda4 : start=        0, size=        0, Id= 0

root@nas:~# parted /dev/sda align-check opt
Partition number? 1
1 not aligned

10.09.2012, 13:14 Uhr - Editiert von hintereingang, alte Version: hier

Jetzt hast du halt die Partitionen wieder schräg angelegt.
mach das bitte mit gparted. Alles andere ist extrem mühsam!

Das Raid machst du dann mit
mdadm --create --verbose /dev/md0 --auto=yes --level=5 --raid-devices=3 /dev/sda1 /dev/sdb1 /dev/sdc1 /dev/sdd1 --spare-devices=1

(oder raid-devices=4, spare-devices=0)

dann schreibst du die mdam.conf neu
mdadm --detail --scan >> /etc/mdadm.conf
(vorher die alten Zeilen des Raids auskommentieren)

das raid sollte jetzt stehen und rebuilden. mit cat /proc/mdstat kannst du den
Fortschritt verfolgen, wenns dir Spaß macht.

Auf das /dev/md0 legst du jetzt dein lvm
pvcreate /dev/md0
erzeugst deine Volumgroup namens meintollesnas:

vgcreate meintollesnas /dev/md0

auf der kannst du dann Laufwerke ein Laufwerk namens datenplatz erzeugen:

lvcreate -L 5G -n datenplatz meintollesnas

das kannst du jetzt wie folgt formatieren:
mkfs.ext4 /dev/mapper/meintollesnas-datenplatz
oder auch
mkfs.ext4 /dev/meintollesnas/datenplatz

Das mountest du dann noch dorthin wo du es haben willst.

zum guten Schluss, erstelle noch die initiale RAM-Disk neu, dass RAID und LVM beim booten auch da sind:
update-initramfs -u

Dann sollten deine Platten schon mit guter Performance laufen. Auch wenn der rebuild noch läuft.
--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Dieser Beitrag bezieht sich auf eine ältere Version des beantworteten Postings!

Ok muss es dann zuhause versuchen da ich in der Firma nur mit ssh zugreifen kann

Hmmm versteh i echt ned das i des ned ganz check mit dem Partitionieren.

Würde es sonst mit parted oder so versuchen über die shell

Lg

Du kqannst es mit
fdisk -H 224 -S 56 /dev/sda
probieren. Sollte auf 4k aligned Partitionen machen.
--
Der einzige Weg, wahre Liebe für Geld zu kaufen, ist, sich einen Hund anzuschaffen.

Dieses Forum ist eine frei zugängliche Diskussionsplattform.
Der Betreiber übernimmt keine Verantwortung für den Inhalt der Beiträge und behält sich das Recht vor, Beiträge mit rechtswidrigem oder anstößigem Inhalt zu löschen.
Datenschutzerklärung