Neuer Server geplant - Hardware ok?

[devil77]

Hallo,

momentan läuft bei uns seit mehreren Jahren ein IBM x336 Server ohne Probleme mit nas4free 9.3.
Leider ist ein Update auf 10.xxx nicht möglich und wir planen den Kauf eines neuen Servers.
Eingesetzt wird der Server für ca. 25 win7 Clienten die per Samba Freigabe darauf zugreifen.
Als Hardware habe ich folgendes zusammen gestellt.

4 x Western Digital WD Red 2TB, 3.5", SATA 6Gb/s
1 x Intel Xeon E3-1260L v5, 4x 2.90GHz
2 x Kingston ValueRAM Intel DIMM Kit 16GB, DDR4-2133, CL15-15-15, ECC
1 x Supermicro X11SSH-F
1 x Chenbro RM23608, 2HE
1 x Sure Star TC-2U46E 460W EPS12V

Die 4 Platten wollte ich als RaidZ2 betreiben.
Etwas unentschlossen bin ich noch bei der Wahl der Systemplatte.
Momentan schwanke ich zwischen Installation auf eine SSD und der Variante SSD im Raid 1 Verband.
Was meint ihr zu dem Setup und der Einrichtung?

[crowi]

Für das System reicht ein 8GB USB Stick. Beim RAM solltest du darauf achten, dass er in der Kompatibilitätsliste des Mainboards aufgeführt ist. Ich hatte schlechte Erfahrung mit Kingston.

Gesendet von meinem Lenovo K50-t5 mit Tapatalk

[apollo567]

4 Festplatten im RaidZ2 ist sehr aufwändig, normal würde ich ein RaidZ1 hier verwenden (hängt aber auch von den Daten ab, die drauf liegen). Glaube RaidZ2 wird erst ab so 6-7 Festplatten großen Arrays sinnvoll.
Ein Xeon scheint mir hier auch etwas overdone. Meistens dürfte ein i3 reichen (oder sogar Celeron/Pentium Klasse). Meinen i3-2100 bekomme ich nie auf mehr als 40-50 % Auslastung.

[devil77]

Danke für die Tipps.
Beim Ram werde ich dann auf Samsung DIMM 8GB, DDR4-2133, CL15-15-15, ECC ausweichen, wird direkt von supermicro empfohlen.
Was meinst Du mit "hängt auch von den Daten ab die drauf liegen"? Sicher sollte es schon sein das es
als Produktivsystem im Einsatz ist.
Macht es mehr Sinn auf ein Raidz1+Spare zu gehen (3 Platten + 1 Reserve)?
Momentan läuft es mit 2 Platten als Mirror auf dem x336.
Die CPU hatte ich größer gewählt um mir evtl. die Möglichkeit offen zu lassen noch einen weiteren Pool zu ergänzen.

[b0ssman]

das nettzteil hat 3 12V Rails bei 460W und keine 80 Plus zertifizierung.

schau mal sowas an
http://www.servershop-bayern.de/index.p ... &info=3302

[Digi-Quick]

bei 25 Usern nur 8GByte Ram?
Wer empfiehlt denn sowas?
16 würde ich als Minimum ansehen, eher 32 GB.
RAM = Cache!

Das Ding soll doch performen oder?

2GB HDDs sind zu teuer, nimm 3TB Platten, die kosten nur etwa 25% mehr bei 50% mehr Kapazität
Dann könntest du die Seagate NAS HDDs nehmen, die haben nämlich eine URE von 1in10^15 statt der 1in10^14 der WDs, damit könnest du auch mit einem Raidz1 aus 3 HDDs auskommen - zumindest auf Grundlage der URE Problematik - und hättest unterm Strich sogar noch 50% Mehr Nutzkapazität.


(Für ein reines Datengrab / Archiv mit Singleuserzugriff würden selbtsredend auch 2 GB RAM reichen)

[Digi-Quick]

4 Festplatten im RaidZ2 ist sehr aufwändig, normal würde ich ein RaidZ1 hier verwenden (hängt aber auch von den Daten ab, die drauf liegen). Glaube RaidZ2 wird erst ab so 6-7 Festplatten großen Arrays sinnvoll.
Ein Xeon scheint mir hier auch etwas overdone. Meistens dürfte ein i3 reichen (oder sogar Celeron/Pentium Klasse). Meinen i3-2100 bekomme ich nie auf mehr als 40-50 % Auslastung.

Ein raidz1 mit 2 TB Platten ist bei einer URE von 1in10^14 nicht mehr praktikabel, da die Wahrscheinlichkeit, daß das Raid bei Ausfall einer Platte stirbt zu hoch ist.

Bei 25 Usern würde ich schon den i3 als Minimum ansehen, Celeron/Pentium geht da gar nicht mehr.

[devil77]

Mit RAM meinte ich 4x8GB also 32GB insgesamt.
Von den 2TB Platten haben wir noch 3 Stück unverbaut im Schrank.
Die wollte ich gerne nutzen. Also was könnte man sinnvollerweise daraus machen?
Lieber nochmal 3 Stück um auf RaidZ2 gehen zu können oder lieber 3 neue Platten (z. Bsp. Die Seagates) und RaidZ1?

[apollo567]

Mach aus den 2 TB Platten ein RaidZ1 und mach dir mit neuen 3-4 TB Platten ein neues Array (sofern das Geld keine Rolle spielt )

[Princo]

Hallo devil77,

lass dich mal nicht kirre machen. Dein Plan mit den 4 Festplatten im RaidZ2 ist vernünftig.
Beim Einsatz eines Raids geht es erst mal rein um die Verfügbarkeit der Daten, auch wenn ein Störungsfall (z.B. Ausfall einer Platte) vorliegt.
Mit einem RaidZ2 bist du da schon auf der bequemen Seite. Selbst wenn eine Platte ausfällt, ist die Redundanz der Daten gewährleistet, der Produktionsbetrieb muß nicht zwingend unterbrochen werden, und du kannst in aller Ruhe den Austausch der defekten Platte vorbereiten.

Der Einsatz einer Spare-Platte bringt nichts, da NAS4Free (FreeBSD) kein automatisches Stand-In der Spare-Platte vorsieht. Daher ist es besser, gleich mit RaidZ2 zu arbeiten.

Zum Thema Memory: Meiner Meinung nach können 8GB Memory im NAS durchaus ausreichend sein, auch wenn 30 Stationen dran hängen. Mehr Memory schadet nicht, aber es kommt tatsächlich darauf an, wie intensiv die Stationen auf das NAS zugreifen.

Wesentlich wichtiger finde ich, daß du für das NAS eine adäquate Backup-Möglichkeit bereitstellst. Das kann z.B. ein zusätzlicher Backup-Pool im NAS sein, oder auch als eigenständiges System realisiert werden.

Eine solche Konfiguration bringt dir nicht nur einen immensen Vorteil bei der Ausfallsicherheit, sondern erleichtert dir später auch das Upgraden auf eine höhere Speicherkapazität.

Grüße
Princo

[devil77]

Backupstrategie ist momentan folgende bei uns in der Firma.
Nas4free ist der Arbeitsserver - nächtlich findet ein abgleich der Daten zu einer Synology Box im Haus statt (anderer Standort) - zusätzlich findet danach ein abgleich zu einem Onlinespeicher statt. Hoffe das im Ernstfall sich das als brauchbar erweist.
Bisher waren wir zum Glück nur auf ein paar monate alte Snapshots angewiesen.

RAM werde ich wie geschrieben mit 32GB in der neuen Maschine einsetzten. Momentan rennt unser IBM mit 8GB.

Wegen dem Einsatz der Platten werde ich mir in Ruhe mal überlegen was ich Einsetzen werden.
Was mich beim RaidZx noch etwas beschäftigt ist die Geschichte wenn eine Platte ausfällt und ersetzt werden muss.
Scheinbar werden beim rebuild die restlichen Platten stark belastet was bei einem rebuild den Verlust des gesamten Pools erhöhen könnte.
Daher bin ich am überlegen auf ein einfaches Mirror zu gehen und evtl. die Snapshots auf ein anderes Mirror zu legen um die Datenmenge gering zu halten.

[apollo567]

danach ein abgleich zu einem Onlinespeicher statt.

Darf ich mal fragen, wie da die Vertraulichkeit abgesichert wurde ?

Was mich beim RaidZx noch etwas beschäftigt ist die Geschichte wenn eine Platte ausfällt und ersetzt werden muss.
Scheinbar werden beim rebuild die restlichen Platten stark belastet was bei einem rebuild den Verlust des gesamten Pools erhöhen könnte.
Daher bin ich am überlegen auf ein einfaches Mirror zu gehen und evtl. die Snapshots auf ein anderes Mirror zu legen um die Datenmenge gering zu halten.

Mit RaidZ2 hast du ja selbst bei Ausfall einer Platte noch RaidZ1 Sicherheit und selbst, wenn dann noch eine ausfällt während des Rebuild, ist nichts verloren. Ich finde RAIDZ2 nur mit 4 Platten aber eben halt sehr ineffizient und würde da eher gleich 6 Platten vorsehen (wenn entsprechend Datenwachstum absehbar ist).

[Princo]

- nächtlich findet ein abgleich der Daten zu einer Synology Box im Haus statt (anderer Standort) - zusätzlich findet danach ein abgleich zu einem Onlinespeicher statt.

Was mich beim RaidZx noch etwas beschäftigt ist die Geschichte wenn eine Platte ausfällt und ersetzt werden muss.
Scheinbar werden beim rebuild die restlichen Platten stark belastet was bei einem rebuild den Verlust des gesamten Pools erhöhen könnte.

Das ist bei allen Raidsystemen so, deswegen gibt es ja auch die höheren Raid-Levels, wie z.B. Raid6 oder RaidZ2 und RaidZ3, welche den Ausfall mehrerer Festplatten aushalten.

Daher bin ich am überlegen auf ein einfaches Mirror zu gehen und evtl. die Snapshots auf ein anderes Mirror zu legen um die Datenmenge gering zu halten.

Snapshots sind Zustandsbeschreibungen des Dateisystems, die kannst du nicht einfach auf ein anderes Mirror legen.
Was du allerdings tun kannst, ist, die Snapshots auf einen anderen Pool zu senden, der dir dann als Backup dient. Dafür nutzt man die Befehle zfs send/receive

Dazu erstellt man zuerst mit zfs send/receive einen kompletten Erstabgleich der Daten von deinem Haupt-Pool auf den Backup-Pool.
Danach kannst du mit zfs send/receive inkrementelle Backups der Snapshots vom Haupt- auf den Backup-Pool machen.
Der Vorgang ist viel schneller als deine Abgleiche auf die Synology Box, da bei zfs die zu sichernden Daten nicht erst mühselig ermittelt und verglichen werden müssen.

Zur Frage ob RaidZ2 oder zwei Mirror-Pools:
Es gilt die bekannte Regel: Ein Raid ist kein Backup.
Ein Raid dient dazu, die Verfügbarkeit der Daten zu erhöhen. Auch ein Mirror ist ein Raid (Raid1).
Um maximale Ausfallsicherheit zu erlangen, würde ich zu einem RaidZ2 raten, doch lies erst mal weiter.
ABER: Ein richtiges Backup der Daten ist fast noch wichtiger als die Ausfallsicherheit.
Daher würde ich dir für den Anfang zu der Kombination aus zwei getrennten Mirrors raten. Einer für die Daten, der andere für das Backup.
Wenn du später mehr Kapazität brauchst, kannst du durch weitere Platten und Umkopieren der Daten auch andere RaidZ-Level realisieren.

Deine bisherigen Backup-Strategien haben den Nachteil, daß sie mit ZFS nichts zu tun haben, und du sämtliche Eigenschaften von ZFS beim Backup/Restore verlierst.
Dazu kommt, daß du für die Wiederherstellung des Datenservers erst sämtliche Daten zurück kopieren mußt.
Bei dem ZFS basierten Backup-System kannst du auch einfach die Backup-Platten in den Hauptserver hängen, und weiterarbeiten.

Grüße
Princo

[devil77]

Kurzer Zwischenstand, der Server ist soweit zusammen gebaut und läuft.
Ein Problem was aufgetreten ist, ist das das Board nicht nas4free von einer m.2 SSD booten kann.
Scheinbar ging es wohl mit der Bios Version 1.0 aber 1.0a ist diese Option nicht mehr vorhanden.
Um von m.2 SSD booten zu können muss man ein UEFI Betriebssystem installieren. Dann wird die Disk erst vom Bios erkannt.
Ich weiß, ein USB Stick hätte gereicht aber wir wollten uns die Option offen lassen um zum Anfang auch andere Betriebssyteme mal zu testen.
Einzige Lösung momentan mit dem Board und m.2 slot ist Installation auf USB und die m.2 Disk als Cache oder sonst was zu nutzen.