This is the old XigmaNAS forum in read only mode,
it will taken offline by the end of march 2021!



I like to aks Users and Admins to rewrite/take over important post from here into the new fresh main forum!
Its not possible for us to export from here and import it to the main forum!

ZFS Raidz1 Geschwindigkeitsproblem

German community

Moderators: b0ssman, apollo567, Princo, crowi

Forum rules
Set-Up GuideFAQsForum Rules
Post Reply
Schorschlhuber
NewUser
NewUser
Posts: 13
Joined: 02 Sep 2012 21:13
Status: Offline

ZFS Raidz1 Geschwindigkeitsproblem

Post by Schorschlhuber »

Servus,

da der Samba jetzt läuft, nervt mich nun ZFS: Kopiere ich über Samba, bekomme ich maximal 52MB / sek Transferrate hin. Die zu kopierende Datei hat dabei 4 GB.

mit dd bekomme ich exakt:

Code: Select all

Welcome to NAS4Free!nas4free:~# dd if=/dev/zero of=/mnt/Storage/test.txt bs=2048 count=1m
1048576+0 records in
1048576+0 records out
2147483648 bytes transferred in 33.083531 secs (64910957 bytes/sec)
Hardware:
Asus E35M1-M
3x WD30EZRX
8GB RAM

Software:
9.1.0.1 Rev 431 x64 full
ZFS Kerntune installiert, Tuning Switch an:

Code: Select all

loader.conf
kernel="kernel"
bootfile="kernel"
kernel_options=""
kern.hz="100"
hw.est.msr_info="0"
hw.hptrr.attach_generic="0"
kern.maxfiles="65536"
kern.maxfilesperproc="50000"
kern.cam.boot_delay="8000"
autoboot_delay="5"
isboot_load="YES"
zfs_load="YES"
# ZFS kernel tune
vm.kmem_size="6656M"
vfs.zfs.arc_min="5120M"
vfs.zfs.arc_max="5120M"
vfs.zfs.prefetch_disable="0"
vfs.zfs.txg.timeout="6"
vfs.zfs.vdev.max_pending="1"
vfs.zfs.vdev.min_pending="1"
vfs.zfs.write_limit_override="0"
vfs.zfs.no_write_throttle="0"
freenas.png


Danke für die Hilfe!
You do not have the required permissions to view the files attached to this post.

User avatar
shakky4711
Advanced User
Advanced User
Posts: 273
Joined: 25 Jun 2012 08:27
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by shakky4711 »

Hallo,

wenn ich Deinen DD Wert runterrechne komme ich auf 61,9MB pro Sekunde direkte Schreibleistung NAS-intern von Prozessor direkt auf das Array. Das bei einem E35 System ist doch eigentlich gar nicht so übel, da hatten Leute mit ATOM Boards schon mit Geschwindigkeiten von 20-25MB/Sekunde zu kämpfen...

Und die theoretisch maximalen 61,9 in Relation zu der praktischen Samba Leistung von 52 sieht eigentlich logisch verhältnismäßig aus.

Interessant wäre noch eine vergleichbare Platte als Single Laufwerk anzuschließen und da mal Benchmarks laufen zu lassen.

Gruß
Shakky

Schorschlhuber
NewUser
NewUser
Posts: 13
Joined: 02 Sep 2012 21:13
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by Schorschlhuber »

Servus Shakky,

ein Kollege zieht aus seinem E350 mit Ubuntu+ mdRaid 5 entspannt 100MB / Sek. Klar, andere Welt als ZFS, dennoch mit der Hardware möglich. Daher habe ich gerade OMV installiert und teste das. Ich hänge halt ziemlich an ZFS und traue mdRaid nicht so ganz über den Weg...

Auf der anderen Seite hinterlässt OMV gerade mal wieder einen super Eindruck bei mir...

User avatar
lux
Advanced User
Advanced User
Posts: 193
Joined: 23 Jun 2012 11:37
Location: Bielefeld, Germany
Contact:
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by lux »

afaik hat OMV welches auf Linux basiert aber kein ZFS

und ausserdem mit was für einem Client hast du getestet?? Wenn XP dann geht nicht sehr viel mehr wie ~50Mb/s - der Networkstack ist halt kacke bei XP...

Ich lese/schreibe mit einem Win7 32bit Client so 80-90MByte/s per smb
Home:11.3.x.7538/emb@32GB USB|1270v2@X9SCA-F|ECC32GB|i340-T4[lagg@GS108Tv2&smb-mch]|M1015@IT|9HDD~40TB@3xRaidZ1+1HDD+2SSD i335&i520+1xi800P@ZIL|~44W idle@SS-400FL2|Nanoxia Deep Silence 6B|24/7
Services: CIFS, FTP, TFTP, SSH, NFS, Rsync, Syncthing, Webserver, BitTorrent, VirtualBox | Extensions: OBI, TheBrig[certbot, Asterisk] | Extensions via vBox: Pi-hole, Jellyfin & zigbee2mqtt @DebianVM's
Test:12.x/emb@16GB USB|X3 420e@M4A88TD-V|16GB|i350-T2|M1015@IT|8xHDD+3xSSD[different Size&Brand]RaidZ1+2|for TESTing only

Schorschlhuber
NewUser
NewUser
Posts: 13
Joined: 02 Sep 2012 21:13
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by Schorschlhuber »

Genau, OMV hat kein ZFS - leider. Ich habe mit Windows 7 getestet.

Schorschlhuber
NewUser
NewUser
Posts: 13
Joined: 02 Sep 2012 21:13
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by Schorschlhuber »

Hier mal die Zahlen mit OMV mdRaid5 mit ext4:

Code: Select all

root@openmediavault:~# dd if=/dev/zero of=/media/67b74aa4-8403-4fb1-9517-8d6edc70d864/test.dat bs=1024 count=10000
10000+0 records in
10000+0 records out
10240000 bytes (10 MB) copied, 0.118405 s, 86.5 MB/s
root@openmediavault:~# dd if=/dev/zero of=/media/67b74aa4-8403-4fb1-9517-8d6edc70d864/test.dat bs=1024 count=100000
100000+0 records in
100000+0 records out
102400000 bytes (102 MB) copied, 1.7397 s, 58.9 MB/s
root@openmediavault:~# dd if=/dev/zero of=/media/67b74aa4-8403-4fb1-9517-8d6edc70d864/test.dat bs=1024 count=1000000
1000000+0 records in
1000000+0 records out
1024000000 bytes (1.0 GB) copied, 16.0049 s, 64.0 MB/s
root@openmediavault:~# dd if=/dev/zero of=/media/67b74aa4-8403-4fb1-9517-8d6edc70d864/test.dat bs=1024 count=10000000
10000000+0 records in
10000000+0 records out
10240000000 bytes (10 GB) copied, 100.296 s, 102 MB/s
root@openmediavault:~# dd if=/dev/zero of=/media/67b74aa4-8403-4fb1-9517-8d6edc70d864/test.dat bs=1024 count=15000000
15000000+0 records in
15000000+0 records out
15360000000 bytes (15 GB) copied, 173.587 s, 88.5 MB/s
root@openmediavault:~#
Die CPU-Auslastung liegt dann irgendwo bei 70%. Mit Samba liegts bei 80 - 100 MB (4GB Datei), mehr schafft die Lieferplatte wohl nicht.


Alles in allem eine Ansage, wie ich finde.

Schorschlhuber
NewUser
NewUser
Posts: 13
Joined: 02 Sep 2012 21:13
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by Schorschlhuber »

So,

ich möchte mal kurz eine Aussage nach 6 Tagen OMV in produktion geben:

1. OMV ist sehr schnell! Über SMB mach ich eine Gigabitleitung dicht.
2. OMV funktioniert exakt so, wie erwartet. Keine Bastelei, keine Frickelei, keine unendliche Rumpfuscherei in Konfig-Dateien.
3. Plugins extrem einfach zu installieren, diese Perfekt in Funktion und Aussehen.
4. Einfach genial!

Um mir das Leben leichter zu machen, kehre ich FreeNAS / NAS4Free nach vielen Jahren den Rücken. Ich hoffe nur, irgendwann ein brauchbares ZFS unter Linux zu bekommen / ein BTRFS mit RAID5/6.

Ich kann nur jedem empfehlen: Schaut Euch OMV mal an.

jfoerster
Starter
Starter
Posts: 33
Joined: 25 Jun 2012 08:19
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by jfoerster »

Was hast du denn für eine LAN Anbindung?
Mit 1GBit dürfte das doch schon ein guter Wert sein!?
Oder verstehe ich grad was nicht?
HP ProLiant MicroServer N36L mit Remote Card, 2x2TB, NAS4Free
Wer sich was Gutes, Günstiges und Problemfreies zulegen möchte, hat meite Kaufempfehlung, wenn Lüfterlärm keine Rolle spielt. :D

maulbongo
Starter
Starter
Posts: 48
Joined: 25 Jun 2012 08:59
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by maulbongo »

Servus,

Da will ich auch kurz mal meine Erfahrungen mitteilen.
Ich bin ein alter Openfiler user, war lange begeistert, allerdings stagnierte dort irgendwie die Entwicklung und auch ist der Kommerz für rufio und Co. scheinbar wichtiger.
Nachdem ich dann auch noch das Problem hatte, dass einige Files in meinem Raid 5 korrupierten war dies der Wink mit dem Zaunpfahl zu wechseln.
Da kam mir gerade der Phoenix aus der Asche (nas4free) sehr gelegen.
Habe nun ein schönen zfs pool am laufen, klar es ist schon langsamer als Raid 5 aber so ist es eben, es geht schnell und Sicherheitsanfällig (write hole http://de.wikipedia.org/wiki/RAID#RAID- ... system_ZFS) oder aber nicht ganz so flott, aber dafür Prüfsummen und die Möglichkeit durch scrub sogar fehlerhafte Dateien wieder herzustellen.
Des Weiteren nutze ich es auch in meiner Firma als zfs backup pool und iscsi target mit vmware esx (natürlich sind dies verschiedene Maschinen) und bin begeistert, wie die Entwicklung voran geht.
OMV habe ich auch angetestet, schon schön, aber auch hier ist die Entwicklung doch recht ermüdend, da geht es ja nicht wirklich weiter.
greetings maulbongo

Schorschlhuber
NewUser
NewUser
Posts: 13
Joined: 02 Sep 2012 21:13
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by Schorschlhuber »

Servus,

ich weiß um die Vorzüge von ZFS und irgendwo trauere ich der Geschichte auch nach. Ich habe zum Glück schon seit über einem Jahr ein mdRaid5 im 24/7 Betrieb und nie ein Problem gehabt. Ein Arbeitskollege hat ebenfalls seit über einem Jahr ein mdRaid 5 laufen und auch nie Probleme. In den letzten Jahren hat sich verdammt viel in dieser Richtung getan.

Natürlich ist ZFS dadurch nicht zu ersetzen.

Ich hab mich mit FreeNAS viel ärgern müssen und selten hat auf Anhieb was gut funktioniert. Das ist jetzt ganz anders. Welche Funktionen fehlen dir in OMV denn noch? Außer einer LCDProc-Implementierung habe ich bisher nichts vermisst. Ich habe mit FreeNAS 0.6 angefangen und bis heute auch immer verfolgt und nie war ich wirklich zufrieden. Ich müsste stromfressende Hardware für ein richtig Leistungsfähiges FreeNAS verbauen. Das würde mich doch sehr ärgern.

Schorschlhuber
NewUser
NewUser
Posts: 13
Joined: 02 Sep 2012 21:13
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by Schorschlhuber »

jfoerster wrote:Was hast du denn für eine LAN Anbindung?
Mit 1GBit dürfte das doch schon ein guter Wert sein!?
Oder verstehe ich grad was nicht?
Welchen Wert meinst du? Den von OMV? Der ist natürlich perfekt. Der von NAS4Free ist ätzend :mrgreen:

maulbongo
Starter
Starter
Posts: 48
Joined: 25 Jun 2012 08:59
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by maulbongo »

Ja das ZFS fehlt mir ;)
Und eben ein fortlaufender Entwicklungsprozess.
nas4free ist ja ein quasi rolling release, einfach embedded upgraden, ist eine Sache von 2 Minuten und mein System läuft auf dem Brandaktuellen Stand.
Nebenbei, mein Raid 5 hatte auch nie Probleme, lief drei Jahre 24/7 aber es sind eben einige, wenn auch wenige files korrupiert, dies kann mit zfs nicht passieren.

Aber da brauchen wir auch gar nicht drüber diskutieren, Du hast Dich eben für OMV entschieden, ich mich für nas4free, schön das es Entscheidungsfreiheiten gibt.
greetings maulbongo

jfoerster
Starter
Starter
Posts: 33
Joined: 25 Jun 2012 08:19
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by jfoerster »

Schorschlhuber wrote:
jfoerster wrote:Was hast du denn für eine LAN Anbindung?
Mit 1GBit dürfte das doch schon ein guter Wert sein!?
Oder verstehe ich grad was nicht?
Welchen Wert meinst du? Den von OMV? Der ist natürlich perfekt. Der von NAS4Free ist ätzend :mrgreen:
Ach, ich dachte du machst das übers Netzwerk, aber du meinst einen lokalen Kopiervorgang?
Hatte mich nur gewundert, was du übers LAN für Raten erwartest...hihi!
Naja, ZFS ist ja recht ressourcenfressend, da ist der Wert bei der Plattform doch nachvollziehbar, würde ich meinen.

Ich selbst nehme weder Raid noch ZFS, da ich meine Kiste nur privat nutze und das dabei alles der Overkill darstellen würde. ;)
Für Privat => nur Probleme + keinerlei Vorteile
Für Firmen, mit Badarf an sekundenscharfer Datensicherheit ist sowas natürlich Pflicht!

... wusste garnicht, dass OMV jetzt tatsächlich am laufen ist!? Aber ich bleibe auf jeden Fall bei NAS4Free! :D
HP ProLiant MicroServer N36L mit Remote Card, 2x2TB, NAS4Free
Wer sich was Gutes, Günstiges und Problemfreies zulegen möchte, hat meite Kaufempfehlung, wenn Lüfterlärm keine Rolle spielt. :D

User avatar
shakky4711
Advanced User
Advanced User
Posts: 273
Joined: 25 Jun 2012 08:27
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by shakky4711 »

Hi,
Für Privat => nur Probleme + keinerlei Vorteile
Um diese grundsätzliche These herum habe ich mich mal in einem anderen Forum bis aufs Blut mit einem anderen User immer und immer wieder gestritten.

In Firmen mit geschäftskritischen Daten oder CAD Workstations die wegen einer verreckten Festplatte nicht ausfallen dürfen ist Raid und Backup in allen Varianten ja (zumeist) ohnehin Standard.
Das Problem im Heimbereich ist meiner festen Überzeugung nach, was mir auch immer wieder Tag für Tag bestätigt wird, definitiv der Schwachpunkt Mensch. Vielleicht 10% aller Heimnutzer machen sich Gedanken um Backups. Und dann passiert es hat dass die Diplomarbeit an der mein Kollege wochenlang gearbeitet hat im digitalen Nirvana verschwunden ist weil der USB-Stick verreckt ist.
In der Fimra hast Du i.d.R. einen festen Backup Plan, Streamer, Backup NAS, Cronjobs die automatisch laufen und ihren Report brav an den Admin schicken und und und. Der Heim-user ist und bleibt faul, da ist es teils schon zu viel verlangt sich unter den Schreibtisch zu begeben um eine freie Steckdose für das Netzteil der 3 1/2" USB Platte zu finden, viel lieber wird diese Zeit in Facebook oder irgendwelche tolen Browsergames investiert...

Ich habe erst neulich beim Reanimieren eines virenverseuchten Vista Rechners mitbekommen, dass unsere Freunde alle Bilder Ihrer Kinder (Von Geburt bis heute mit 6 Jahren) nur auf diesem einem PC haben, keine CD gebrannt, kein USB Stick, gar nichts :roll: Diese blinde Technik-Gläubigkeit ist ein weit verbreitetes Phänomen.

Und selbst wer sichert, auch das Aktualisieren des Backup ist trotz tausendfacher verfügbarer Software auch eine von den Sachen wo viele sich nicht drum kümmern oder keinen Bock haben.

Es muss immer erst was passieren, ist mit schon selber an einem PC der nicht am Netzwerk hing und ich dank USB 1 Anschlüssen mir diese zeitliche Tortour des Backup nicht antun wollte... Anruf der Frau dann bei mir auf Arbeit dass der Rechner piept und sie auffordert eine Bootdisk einzulegen :o Letztlich war es egal, Daten waren weg aber zu verkraften, geärgert hat es mich trotzdem... Murphy halt, dass genau der einzigste Rechner verreckt der nicht am Netzwerk hängt und somit nicht automatisch sichert...

Insofern sehe ich einen Ausfallschutz in einem Heim NAS zusätzlich zu regelmäßigen Backups im Heimbereich genauso wichtig an wie im Firmenumfeld, gerade wenn es um unersetzliche Sachen wie gescannte Zeugnisse, Fotosammlungen oder Schriftverkehr geht. Und das Einzigste das die Daten beherbergt die in der Zeit zwischen Ausfall und letztem Backup generiert wurden ist die zweite Platte im Raid array...

Eine Internet-Radio mp3 Sammlung die ich jederzeit wieder runterladen kann oder noch über x andere Platten verteilt habe lasse ich natürlich auch auf einer Single Platte laufen, da ist es mir schnurz, aber alles andere...

Gruß
Shakky

User avatar
lux
Advanced User
Advanced User
Posts: 193
Joined: 23 Jun 2012 11:37
Location: Bielefeld, Germany
Contact:
Status: Offline

Re: ZFS Raidz1 Geschwindigkeitsproblem

Post by lux »

jfoerster wrote:Ich selbst nehme weder Raid noch ZFS, da ich meine Kiste nur privat nutze und das dabei alles der Overkill darstellen würde. ;)
Für Privat => nur Probleme + keinerlei Vorteile
Blödsinn!

nur weil du anscheinend auf deine privaten Daten verzichten kannst hat es also keine Vorteile ein RaidZ einzusetzen?!? :roll:

wünsche dir viel Spaß wenn mal eine deiner 2Tb Platten hops geht... - mir ist vor Jahren eine 1Tb Platte abgeraucht... seitdem nur noch mit Redundanz ;)
Home:11.3.x.7538/emb@32GB USB|1270v2@X9SCA-F|ECC32GB|i340-T4[lagg@GS108Tv2&smb-mch]|M1015@IT|9HDD~40TB@3xRaidZ1+1HDD+2SSD i335&i520+1xi800P@ZIL|~44W idle@SS-400FL2|Nanoxia Deep Silence 6B|24/7
Services: CIFS, FTP, TFTP, SSH, NFS, Rsync, Syncthing, Webserver, BitTorrent, VirtualBox | Extensions: OBI, TheBrig[certbot, Asterisk] | Extensions via vBox: Pi-hole, Jellyfin & zigbee2mqtt @DebianVM's
Test:12.x/emb@16GB USB|X3 420e@M4A88TD-V|16GB|i350-T2|M1015@IT|8xHDD+3xSSD[different Size&Brand]RaidZ1+2|for TESTing only

Post Reply

Return to “Deutsch”