LINUX RAID + Virtueller Fileserver = langsam?

Re(2): LINUX RAID + Virtueller Fileserver = langsam?

Raucher — Thu, 24 Jan 2008 17:46:39 GMT

also bei heutiger CPU Leistung und im heimgebrauch wird mal ein softraid net viel langsamer sein als ein hardware raid das man sich leisten kann

Re: LINUX RAID + Virtueller Fileserver = langsam?

ICH — Mon, 21 Jan 2008 10:29:51 GMT

hallo,
will dir ja nix ausreden, aber software raid is immer langsamer als hardware.
du hast ja auch einen raidcontroller onboard - hast mal versucht ob der vielleicht auch untersützt wird? dann müssts nicht das OS übernehmen und dürfte meiner meinung nach auch schneller sein.

zum thema vm: ich persönlich würd zu XEN greifen. is bei suse auch schon dabei.

Re: LINUX RAID + Virtueller Fileserver = langsam?

ICH — Mon, 21 Jan 2008 10:29:51 GMT

Re: LINUX RAID + Virtueller Fileserver = langsam?

Raucher — Sun, 20 Jan 2008 16:01:08 GMT

ich würde die vmware auf der standalone platte laufen lassen, habe ich hier zu hause auch so, wesentlich schneller als auf dem raid1 vom system.

Re(4): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Sun, 20 Jan 2008 09:57:59 GMT

ja vll. nicht genau die selbe...! Aber ich wollte damit sagen, dass ich ziemlich sicher bin das es sich hierbei um kein vmware problem handelt.

Sondern irgendwas an der Konfiguration des Raids / bios / allgemein nicht stimmt...

Viele Grüße

David

Re(3): LINUX RAID + Virtueller Fileserver = langsam?

mjy@geizhals.at — Sun, 20 Jan 2008 08:59:47 GMT

Ob ich jetzt vmware nehme oder den samba ist eigentlich egal. Die Geschwindigkeit wäres icher die selbe :/

Unwahrscheinlich, schließlich muß vmware auf "emulierte" Festplatten zugreifen ...

Re(10): LINUX RAID + Virtueller Fileserver = langsam?

ChrisS — Sat, 19 Jan 2008 14:06:38 GMT

brauchst du im moment nicht, der controller wird ja korrekt erkannt.

Re(9): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Sat, 19 Jan 2008 10:12:47 GMT

Unter "/usr/src/linux/drivers/scsi"

gibt es bei mir auch kein Sata_Sil Modul/ Treiber?

Kann das die Ursache sein? Wie kann ich den Nachinstallieren?

Re(8): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Sat, 19 Jan 2008 09:10:57 GMT

gesendet

Re(7): LINUX RAID + Virtueller Fileserver = langsam?

ChrisS — Fri, 18 Jan 2008 17:55:08 GMT

aja, kann bei sata nicht funktionieren.

schick mir mal eine PM mit der gesamten dmesg ausgabe, eventuell findet man dort was.

Re(6): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 17:34:13 GMT

und was bedeutet MultSect?

Re(6): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 16:54:05 GMT

dabei kam das raus:

/dev/sda:
setting using_dma to 1 (on)
HDIO_SET_DMA failed: Inappropriate ioctl for device
HDIO_GET_DMA failed: Inappropriate ioctl for device

Re(5): LINUX RAID + Virtueller Fileserver = langsam?

ChrisS — Fri, 18 Jan 2008 16:51:26 GMT

probier mal hdparm -d 1 /dev/sda

Re(4): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 16:46:43 GMT

Sie standen unter 0 Auslast

und das ist kein Raid sondern eine normale Samsung 500GB Festplatte.

Verstehe die Aussage nicht...

Wie schnell sind die Platten bei dir einzeln angesprochen?

/dev/sda:
Timing cached reads:   1104 MB in  2.00 seconds = 551.44 MB/sec
Timing buffered disk reads:  208 MB in  3.00 seconds =  69.27 MB/sec
mc01:~ # hdparm -Tt /dev/sdb

/dev/sdb:
Timing cached reads:   1652 MB in  2.00 seconds = 826.45 MB/sec
Timing buffered disk reads:  220 MB in  3.01 seconds =  73.19 MB/sec
mc01:~ # hdparm -Tt /dev/sdc

/dev/sdc:
Timing cached reads:   1384 MB in  2.00 seconds = 692.08 MB/sec
Timing buffered disk reads:  246 MB in  3.01 seconds =  81.72 MB/sec
mc01:~ #

Re(5): LINUX RAID + Virtueller Fileserver = langsam?

juwb — Fri, 18 Jan 2008 16:43:36 GMT

Bei mir genauso:

# hdparm -i /dev/sda

/dev/sda:

Model=SAMSUNG HD501LJ                         , FwRev=CR100-10, SerialNo=S0MUJ1FP826285
Config={ Fixed }
RawCHS=16383/16/63, TrkSize=34902, SectSize=554, ECCbytes=4
BuffType=DualPortCache, BuffSize=16384kB, MaxMultSect=16, MultSect=?16?
CurCHS=16383/16/63, CurSects=16514064, LBA=yes, LBAsects=268435455
IORDY=on/off, tPIO={min:120,w/IORDY:120}, tDMA={min:120,rec:120}
PIO modes:  pio0 pio1 pio2 pio3 pio4
DMA modes:  mdma0 mdma1 mdma2
UDMA modes: udma0 udma1 udma2 udma3 udma4 udma5
AdvancedPM=no WriteCache=enabled
Drive conforms to: unknown:  ATA/ATAPI-3,4,5,6,7

* signifies the current active mode

Re(5): LINUX RAID + Virtueller Fileserver = langsam?

juwb — Fri, 18 Jan 2008 16:43:36 GMT

Re(3): LINUX RAID + Virtueller Fileserver = langsam?

juwb — Fri, 18 Jan 2008 16:42:33 GMT

Das ist in der Tat langsam. Oder war die Festplatte gerade noch anderweitig unter Last?

# hdparm -Tt /dev/sda
/dev/sda:
Timing cached reads: 1644 MB in 2.00 seconds = 821.84 MB/sec
Timing buffered disk reads: 246 MB in 3.02 seconds = 81.40 MB/sec

und das ist kein Raid sondern eine normale Samsung 500GB Festplatte.

Wie schnell sind die Platten bei dir einzeln angesprochen?

Re(4): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 16:39:12 GMT

hmmm der Ausgabe nach zu urteilen:

___
mc01:~ # hdparm -i /dev/sda

/dev/sda:

Model=SAMSUNG HD501LJ                         , FwRev=CR100-12, SerialNo=S0MUJ1KPA90762
Config={ Fixed }
RawCHS=16383/16/63, TrkSize=34902, SectSize=554, ECCbytes=4
BuffType=DualPortCache, BuffSize=16384kB, MaxMultSect=16, MultSect=?1?
CurCHS=16383/16/63, CurSects=16514064, LBA=yes, LBAsects=268435455
IORDY=on/off, tPIO={min:120,w/IORDY:120}, tDMA={min:120,rec:120}
PIO modes:  pio0 pio1 pio2 pio3 pio4
DMA modes:  mdma0 mdma1 mdma2
UDMA modes: udma0 udma1 udma2 udma3 udma4 udma5
AdvancedPM=no WriteCache=enabled
Drive conforms to: unknown:  ATA/ATAPI-3,4,5,6,7
___

läuft meine Disk in keinen Modus oO

Re(4): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 16:39:12 GMT

Re(6): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 16:34:00 GMT

mit vmware!

Re(5): LINUX RAID + Virtueller Fileserver = langsam?

Knurz — Fri, 18 Jan 2008 15:09:00 GMT

wenns sata disc sind ist der DMA eingeschalten vom Kernel aus.

Hast du schonmal in-VM-Gast eine Performancemessung gemacht ?

Kurz noch: Womit virtualisierst du ?

Re(3): LINUX RAID + Virtueller Fileserver = langsam?

ChrisS — Fri, 18 Jan 2008 14:50:36 GMT

Ahhh kann es vll. daran liegen, dass noch dma abgeschalten ist? Wie kann ich
das prüfen bzw. unter linux aktivieren?

hdparm -i /dev/sd(x)

Bei dem jeweiligen Modus ist dann ein Stern.

Re(4): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 14:21:49 GMT

Boah also das ist eindeutig zu langsam! Sind das IDE oder SATA Discs ?

Jo sind bei weitem zu langsam!
Es sind SATA Discs... :/

Ich halt mich immer an phys.Ram*2, hat bis jetzt (grad mit VMs) gut geklappt.

Werde ich mal probieren umzustellen... Aber glaube das das wenig ausweikungen hat.

Hast Du da auch aufgepasst, dem VMWare Host und der Vmware-Guest nicht
dieselbe IP zu geben ?

Jup das ist definitiv so!

Re(3): LINUX RAID + Virtueller Fileserver = langsam?

Knurz — Fri, 18 Jan 2008 14:02:54 GMT

Ergebnis:
50+0 records in
102400+0 records out
52428800 bytes (52 MB) copied, 10.2707 s, 5.1 MB/s

hmmm irgendwie nicht so das ware...

Boah also das ist eindeutig zu langsam! Sind das IDE oder SATA Discs ?

Swap:
Insgesamt 2GB ram... Meinst du es könnte wirklich an der swap liegen?

Ich halt mich immer an phys.Ram*2, hat bis jetzt (grad mit VMs) gut geklappt.

Ethernet 1: Bridged

Hast Du da auch aufgepasst, dem VMWare Host und der Vmware-Guest nicht dieselbe IP zu geben ?

Re(2): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 14:02:31 GMT

Bezweifle ich, ich habe jetzt wie oben beschrieben einen Geschwindigkeitstest der Festplatten durchgeführt und das Ergebnis zeigt, dass es wohl am raid/ festplatten liegt.

Re(2): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 14:01:14 GMT

Ob ich jetzt vmware nehme oder den samba ist eigentlich egal. Die Geschwindigkeit wäres icher die selbe :/

Ergebnis -Tt /dev/md0:

/dev/md0:
Timing cached reads: 1102 MB in 2.00 seconds = 551.15 MB/sec
Timing buffered disk reads: 186 MB in 3.42 seconds = 54.36 MB/sec

Re(2): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 13:58:47 GMT

probiers aus am besten wie performant es liest/schreibt:

Ergebnis:
50+0 records in
102400+0 records out
52428800 bytes (52 MB) copied, 10.2707 s, 5.1 MB/s

hmmm irgendwie nicht so das ware...

Wie schaun die Einstellungen für die VM aus ?

Edit: Wie schauts mit Swap (sollte bei Betrieb mit VM sein: phys.Ram*2) ?

Einstellungenen der VM:

MEMORY: 1024 MB
Hard Disk: (SCSI 0:0) 65.0 GB (pre-allocated)
Hard Disk: (SCSI 0:1) 325.0 GB "
Ethernet 1: Bridged
Processors: 2

Swap:
Insgesamt 2GB ram... Meinst du es könnte wirklich an der swap liegen?

Ahhh kann es vll. daran liegen, dass noch dma abgeschalten ist? Wie kann ich das prüfen bzw. unter linux aktivieren?

Re(2): LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Fri, 18 Jan 2008 13:58:47 GMT

probiers aus am besten wie performant es liest/schreibt:

Ergebnis:
50+0 records in
102400+0 records out
52428800 bytes (52 MB) copied, 10.2707 s, 5.1 MB/s

hmmm irgendwie nicht so das ware...

Wie schaun die Einstellungen für die VM aus ?

Edit: Wie schauts mit Swap (sollte bei Betrieb mit VM sein: phys.Ram*2) ?

Re: LINUX RAID + Virtueller Fileserver = langsam?

nergal — Fri, 18 Jan 2008 06:27:59 GMT

Ich tippe da eher auf ein Netzwerkproblem.

Ich selbst habe VMware im Einsatz. Das virtuelle Filesystem mag nicht das schnellste sein. Aber wenn die Platte des Host schnell und entkoppelt ist, dann kommt man beim FTP auf ungefähr 11Mb/sec. Gemessen Client im Intranet auf den FTP-Server der VM.

Re: LINUX RAID + Virtueller Fileserver = langsam?

juwb — Fri, 18 Jan 2008 01:12:04 GMT

vmware ist langsam - und wozu überhaupt? Windows Freigaben können doch auch von Linux selbst angeboten werden? Geschwindigkeit deiner Platten kannst du mit hdparm -Tt /dev/raiddevice rausfinden. Wenn du Dateisystemoverhead noch dazuhaben willst, gerne auch eine grosse Datei mit dd erzeugen / einlesen. Diese Ergebnisse werden dann aber gerne vom Dateisystemcache verfälscht. Manche Festplatten funktionieren einfach nicht gut im RAID, manche Controller sind nicht gut für (Software)-RAID.

Re: LINUX RAID + Virtueller Fileserver = langsam?

Knurz — Thu, 17 Jan 2008 19:07:31 GMT

Hi!

- an der Virtuellen Maschine?

Kannst ja mal Benchmarkprogramme in der VM ausführen.

- am Linux Raid?

probiers aus am besten wie performant es liest/schreibt:

vdr@vdr:~$ dd if=/dev/zero of=bla.dmp ibs=1M count=50
50+0 records in
102400+0 records out
52428800 bytes (52 MB) copied, 0.580822 seconds, 90.3 MB/s

kannst natürlich mit dd if=bla.dmp of=/dev/null wieder lesen lassen etc.

- irgendwelche Einstellungen?

Wie schaun die Einstellungen für die VM aus ?

Edit: Wie schauts mit Swap (sollte bei Betrieb mit VM sein: phys.Ram*2) ?

Re: LINUX RAID + Virtueller Fileserver = langsam?

Knurz — Thu, 17 Jan 2008 19:07:31 GMT

Hi!

- an der Virtuellen Maschine?

Kannst ja mal Benchmarkprogramme in der VM ausführen.

- am Linux Raid?

- irgendwelche Einstellungen?

Wie schaun die Einstellungen für die VM aus ?

LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Thu, 17 Jan 2008 17:51:37 GMT

Hallo,

ich habe einen SuSE Linux 10.3 Rechner mir 3 Festplatten und folgender Raid Konfiguration:

http://img443.imageshack.us/img443/3746/partitionierungph1.png

Sprich:

Festplatte 1 und Festplatte 2: Raid1
Festplatte 3: standalone

auf "/vm" liegt eine Virtuelle Maschine (vmware Server) mit Windows Server 2003.

Diese Virtuelle Maschine bietet Daten als normale Windows Freigabe an.
(und läuft parallel zu Suse)

Leider läuft das dermaßen langsam...

z.B. wenn ich etwas von einer setup.exe von der Windows Freigabe installieren möchte oder eine größere Datei/ Ordner lesen oder schreiben möchte, hängt sich die Virtuelle Maschine komplett auf. Folge: Verbindung zum Netzlaufwerk bricht ab und Dateitransfer bricht ab... Nach 10 sek. läuft das teil dann aber wieder weiter.

Meine Frage(n):

1. Wo ist hier die Ursache zu finden?

- an der Virtuellen Maschine?
- am Linux Raid?
- irgendwelche Einstellungen?

2. Wie kann ich das Problem beheben?

ich hoffe jemand kann mir hierbei helfen...

ich freue mich auf sämtliche antworten

Viele Grüße

David

EDIT:

zum Rechner selber:

Athlon X2 BE-2400
2048 MB DDR2 Ram (1024 Host, 1024 Gast)
ASUS M2A-VM Mainboard
1 Intel Gigabit PCI-E Netzwerkkarte [onboard = Host, Intel Gigabit = Gast(bridged)]
3x Baugleiche SATA-2 500GB Festplatten

LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Thu, 17 Jan 2008 17:51:37 GMT

LINUX RAID + Virtueller Fileserver = langsam?

-"Dave"- — Thu, 17 Jan 2008 17:51:37 GMT

Hallo,

ich habe einen SuSE Linux 10.3 Rechner mir 3 Festplatten und folgender Raid Konfiguration:

http://img443.imageshack.us/img443/3746/partitionierungph1.png

Sprich:

Festplatte 1 und Festplatte 2: Raid1
Festplatte 3: standalone

auf "/vm" liegt eine Virtuelle Maschine (vmware Server) mit Windows Server 2003.

Diese Virtuelle Maschine bietet Daten als normale Windows Freigabe an.

Leider läuft das dermaßen langsam...

z.B. wenn ich etwas von einer setup.exe von der Windows Freigabe installieren möchte oder eine größere Datei/ Ordner lesen oder schreiben möchte, hängt sich die Virtuelle Maschine komplett auf. Folge: Verbindung zum Netzlaufwerk bricht ab und Dateitransfer bricht ab... Nach 10 sek. läuft das teil dann aber wieder weiter.

Meine Frage(n):

1. Wo ist hier die Ursache zu finden?

- an der Virtuellen Maschine?
- am Linux Raid?
- irgendwelche Einstellungen?

2. Wie kann ich das Problem beheben?

ich hoffe jemand kann mir hierbei helfen...

ich freue mich auf sämtliche antworten

Viele Grüße

David