Festplatten Tausch in einem ZFS-Stripe

[NKL]

Wir können dir bei der Entscheidung nur schwer helfen.
Gegenüber SoftwareRaid ist ZFS das "bessere" Dateisystem. Man hat mehr Möglichkeiten, hat die "Selbstheilung" der Dateien und und und.
Allerdings kann man von dem Einsatz von ZFS ohne ECC-Ram nur abraten.

Du musst das Risiko jetzt abwägen. Den Link den ich vorne gepostet hatte, ist auf jeden Fall lesenswert, weil du uns dann verstehst, wieso man kein ZFS ohne ECC einsetzen sollte.

[Lysander76]

na ja im moment muss ich wohl damit leben weil nochmal alles neu dazu habe ich grad keine lust habe eh alles doppelt so das ich da relativ sicher bin.

hatte zwar jetzt auch gesucht ob ich nicht ecc ram bei mir verbauen kann aber das geht wohl nicht.
habe aber dazu was gefunden das ecc mittlerweile überflüssig ist da fehler beim ram so gut wie auszuschließen sind.

das risiko dürfte deswegen eher sehr gering sein und da der Sicherungs NAS nur für die sicherung läuft habe ich ja fals es auf dem haupt-nas zu fehlern oder nem crash kommt immer noch meine sicherung.

[crowi]

habe aber dazu was gefunden das ecc mittlerweile überflüssig ist da fehler beim ram so gut wie auszuschließen sind.

echt? das wäre ja eine kleine Sensation, kannst Du den Link posten?

Ich würde diese Lektüre vorschlagen: http://research.google.com/pubs/pub35162.html

habe ich ja fals es auf dem haupt-nas zu fehlern oder nem crash kommt immer noch meine sicherung.

Und was ist wenn Deine Sicherung den Geist aufgibt und Du die Daten von Deinem Haupt Nas neu sichern willst, Dir aber
dabei das System durch einen kleinen Datenfehler die Dateien schreddert? Dann sind die Daten vom Haupt NAS und der Sicherung schrott, ohne dass Du es während des Kopierens merkst...

Wie gesagt, ZFS ohne ECC zu betreiben ist äusserst riskant. Für knapp 200€ bekommst Du zB einen HP Mikroserver (N54L), der ECC unterstützt, wenig Strom braucht und der vier bis fünf Festplatten aufnimmt.

[Lysander76]

das mit dem HP mirkroserver klingt sehr interresannt.
werde aber momentan so weiter fahren wie bisher nur meine sicherung nicht mehr unter ZFS laufen lassen sondern mit nem normalem dateisystem um da die sicherheit zu haben meine daten nicht zu verlieren und dann in nächster zeit mein haupt nas durch den HP zu ergänzen und dann beide paralell laufen lassen.
ZFS ist halt deswegen für mich interresannt weil ich damit alle daten in einem verzeichniss habe und nicht jedesmal bei den clients was umstellen muss wenn da mal der platz knapp wird und ich umschlichten muss.

ich hätte wohl von anfang an fragen sollen anstatt mit alles selber zusammenzusuchen.

[Princo]

habe aber dazu was gefunden das ecc mittlerweile überflüssig ist da fehler beim ram so gut wie auszuschließen sind.

Nein, du hast anscheinend etwas gefunden, was jemand geschrieben hat, der das Problem nicht verstanden hat.

Lies dir wirklich das mal auf http://forums.freenas.org/index.php?thr ... zfs.15449/ komplett durch. Dort wird auch auf die Wahrscheinlichkeit von RAM-Fehlern anhand der Google-Studie eingegangen.

Es handelt sich dabei nicht einmal um eine spezielle ZFS-Problematik, denn das betrifft auch andere Dateisysteme mit Self-Healing-Features (z.B. NTFS).

Es geht gar nicht darum, daß RAM generell nicht zuverlässig ist, sondern darum, was passiert WENN der RAM doch mal anfängt zu spinnen (die Google-Studie belegt dafür eine recht hohe Wahrscheinlichkeit.).

Bei ECC-RAM werden diese Fehler entweder korrigiert, oder das System bleibt einfach stehen (was in diesem Fall wünschenswert und richtig ist).

Bein Einsatz von ZFS wird der Rechner zu einem sehr intelligenten Raid-Controller.

"Richtige" Raid-Controller haben intern ausschließlich ECC-RAM verbaut, da das Bit-Flipping Problem sonst dort auch auftreten würde.

Mit ZFS hat man aber viel mehr und bessere Möglichkeiten, als mit einem Raid-Controller, vorausgesetzt, daß das System mit ECC-RAM ausgestattet ist. Unter dem Strich ist das sogar immer noch sehr kostengünstig.

Den Tip von crowi mit dem N54L Microserver solltest du dir mal genauer ansehen, denn da bekommst du für einen schmalen Taler ein wirklich sehr gutes Gerät, bei dem diese Probleme nicht auftreten. Das Teil kann man übrigens locker auf bis zu zwölf Festplatten aufrüsten, wenn man weiß, wie das geht.

Grüße
Princo

Nachtrag: Habe gerade gesehen, daß sich unsere Postings zeitlich überschnitten haben.
Pro-Tip: plane besser gleich die Anschaffung von zwei N54L Systemen.
Ich schiebe seit einiger Zeit einen Artikel für den "How To"-Bereich vor mich her, wo ich genau für diese Konstellation eine ausführliche Beschreibung der verschiedenen Möglichkeiten ausführen werde.

[Lysander76]

Princo dann gib mir doch mal nen tip wie ich den hp mit zwölf platten betreiben kann?
weil dann bräuchte ich in naher zukunft nicht zwei von den dingern.

so in der grundausstattung sind ja nur vier platten bei dem HP möglich.

wieso empfielst du mir zwei HP?

[b0ssman]

12 platte ist schon kein kleiner server mehr.

nimm dafür ein rackmount gehäuse. z.b. norco (RPC-4224) oder sein supermicro gehäuse.
ein supermicro board der x10 generation.
ein/zwei ibm m1015 controller.
32gb ram

und er empfiehlt dir 2 hp für das backup der daten. raid ist kein backup.

[Lysander76]

ich habe doch einen zweiten server, den ich ja umstellen will weg von ZFS weil bei der sicherung ist es mir egal ob der speicherplatz als ein Volume oder als einzelfestplatten zur verfügung steht.

reichen bei dem HP denn die 4 GB arbeitsspeicher oder sollte ich da aufrüsten, werde 4 x 4 TB festplatten einbauen?

[b0ssman]

4gb ist das absolute minimum.

normal sollte man 1gb pro 1tb nehmen

[crowi]

1GB RAM pro 1TB Festplatte ist sinnvoll

[Princo]

Princo dann gib mir doch mal nen tip wie ich den hp mit zwölf platten betreiben kann?
weil dann bräuchte ich in naher zukunft nicht zwei von den dingern.

Der N54L wird aktuell in der 4GB-ECC-RAM Version für 205€ angeboten (ohne Festplatte). Das ist ein Hammer-Preis.

Weshalb zwei von den Dingern?
Zum Einen hat man dadurch ein echtes Ersatz-Gerät vor Ort verfügbar.
Zum Anderen kann man dadurch seine Festplatten-Pools wesentlich besser an den tatsächlichen Bedarf anpassen.
Man braucht also seine Festplattenkapazität nicht gleich voll ausbauen.
Wenn man dabei noch ein zweites Gerät verfügbar hat, gehen bestimmte Umkopieraktionen sehr viel streßfreier vor sich.

Ausbau des N54L auf zwölf Festplatten:
Dazu braucht man ein SATA zu eSATA Kabel Stecker/Stecker (Dieses hier)
Ein modifiziertes BIOS für das N54L, um die Port-Multiplier Funktion für die eSATA-Schnittstellen freischalten zu können.
und dann noch ein oder zwei Fantec QB-35US3 (jeweils 4 Festplatten, kostet 100€/Stück).

Ein Fantec-Gerät schließt man an den eSATA-Port des N54L an.
Das zweite Fantec Gerät schließt man mit dem o.a. Kabel an den internen CD-ROM-Anschluß (der eigentlich ein ganz normaler SATA-Port ist) an.

Und ZACK!, schon hast du 12 Festplatten im System.

Diese Lösung hat Vor- und Nachteile.

Vorteile:
Schrittweiser Ausbau möglich.
Die externen Fantec-Geräte können bei Nichtbedarf einfach mal ausgeschaltet bleiben. Dadurch sind echte Energieeinsparungen und weniger Verschleiß möglich.
Sehr hohe Flexibilität.
Keine zusätzlichen Controller nötig.
Simpler und unkomplizierter Aufbau. Keine großartige "Bastelei" nötig.
Durchgängige Nutzung von ZFS möglich.

Nachteile:
Die beiden Fantec-Geräte lassen jeweils vier Festplatten über einen einzigen eSATA-Port laufen. Das hat natürlich Auswirkungen auf die Performance der betreffenden Platten. Allerdings kann man durch eine geschickte Anordnung/Organisation der Platten diesem Nachteil entgegenwirken, so daß im praktischen Betrieb dadurch kaum Einschränkungen entstehen.
Die genaue Umsetzung würde jetzt aber den Rahmen des Posts sprengen, deswegen soll das ja ein extra Artikel werden.

Was allerdings sehr viel wichtiger ist:
Eine genaue Analyse und Planung.
Hier im Forum schlagen viele Leute auf, die Probleme haben, weil sie ihr N4F völlig falsch aufgesetzt haben, und erst später merken, daß sie sich damit in eine Sackgasse begeben haben, da sie nicht darauf geachtet haben, daß die Flexibilität ein ganz wichtiger Faktor ist.
Im Prinzip ist dein Post ein Musterbeispiel dafür.
Wenn man ein NAS plant, dann gilt es folgende Faktoren unter einen Hut zu bringen: nutzbare Kapazität, Sicherheit, Geschwindigkeit, Flexibilität und Kosten.
Ein Laie ist da geneigt, einfach ganz viele Platten und Controller in ein Gerät zu packen, und sich eine riesige logische Platte zu erzeugen.
Bei drei oder vier Festplatten kann das noch gut gehen, aber bei mehr Festplatten wird das mit der Methode richtig kompliziert.
Um da gar nicht erst in die Falle zu tappen, muß man vorher zwingend seine Daten analysieren.

Dazu teilt man seine Daten in drei Kategorien ein:

1. Selbst generierte, unersetzliche Daten: z.B. Dokumente, selbstgemachte Fotos und Filme, usw.
2. Was man so "sammelt", aber nicht selbst erstellt hat: z.B. Filme, Musik.
3. ggfs. Backups seiner Rechner.

Je nachdem, wie die Ergebnisse ausfallen, kann man dann auch Empfehlungen für einen sinnvollen NAS-Aufbau geben.
Daraus läßt sich dann auch sehr einfach ein Backup-Konzept für das NAS ableiten.

Im Prinzip ist das keine Raketenwissenschaft. Das sind ganz simple Schritte, und als Ergebnis erhält man ein System, welches einen für viele Jahre keine großen Sorgen bereiten wird.

Grüße
Princo

[Lysander76]

1. eigene Daten ca. 500 GB
2. Serien ca. 2 TB, Filme ca. 5 TB
3. Backup auf sepperatem Server

der plan ist jetzt das ich mir den HP bestelle und dazu noch zusätzlich einen 8GB Speicher, wäre dankbar da noch ne empfehlung zu bekommen welchen speicher ich mir da dazubestellen sollte.

am besten wäre es wenn ich den über amazon bestellen könnte.

[b0ssman]

http://www.amazon.de/Micro-Server-Turio ... 00AKWUUXU/

aber hier ist er billiger

http://www.computeruniverse.net/product ... t-n54l.asp

für speicher lies mal diesen thread

http://www.hardwareluxx.de/community/f1 ... 52079.html

[Lysander76]

Wie gesagt der HP steht in der engeren wahl das ich ihn kaufe werde aber evtl auch noch schauen ob ich meinen eigenen sever mit nem Board umrüsten kann damit ich
ECC Speicher nutzen kann.

bei Computer universe ist er billiger gegenüber Amazon weil da nur 2GB ram verbaut sind bei Amazon 4GB und er kein optisches laufwerk hat was er bei amazon schon hat.

danke für den link zum Thread über den HP das beantwortet einige der fragen die ich zu dem noch hatte.

[b0ssman]

nein der computer universe ist auch mit 4gb

schau unten in den technischen daten.

4 GB (installiert) / 8 GB (Max) - DDR3 SDRAM - ECC - 800 MHz - PC3-10600
Festplatte Kein HDD

[Lysander76]

dann hat da aber beim angebot schreiben einer nicht aufgepasst weil oben steht da nämlich was ganz anderes.

dachte aber auch das ich den HP mit 16 GB betreiben kann aber da steht jetzt wieder was von maximal 8 GB?

das mit dem selber zusammenbauen habe ich wieder verworfen weil es dazu kaum boards gibt die das haben was ich brauche um meinen aktuellen server aufzurüsten.
also werde ich wohl doch den Hp bestellen.
da passen ja sogar ohne probleme meine fünf aktuellen festplatten rein.

[crowi]

weil es dazu kaum boards gibt die das haben was ich brauche um meinen aktuellen server aufzurüsten.

was brauchst Du denn?

[Lysander76]

habe momentan ein mini-itx board (Asus H87I-PLUS)
mit intel G3220 Prozessor.

aber der aufwand das umzurüsten dürfte zu hoch sein so das der HP die bessere lösung ist und ich kann den jetzigen nas-server dann als normalen pc weiterverwenden.

[Princo]

Der HP N54L kann mit 16GB RAM betrieben werden.
Das ensprechende RAM-Kit (ECC) findet man unter dieser Bezeichnung: KVR1333D3E9SK2/16G
Und ja, das ist leider etwas teuer.