NAS von 2 auf 3 Festplatten erweitern

[reeli]

Hallo,

ich möchte eine dritte Festplatte in den bestehenden Pool integrieren, dass ganze ohne Datenverlust.
Der bestehende Pool enthält die zwei bisherigen 4TB Festplatten als virtuelles Gerät vmirror (mirror).
Die neue Festplatte ist ebenfalls 4TB groß. Alles zusammen ist mit ZFS formatiert.

Wenn das möglich ist, wäre ich für eine schrittweise Anleitung sehr dankbar. Habe wenig Erfahrung.

[ms49434]

Ein bisschen mehr Info wäre schon schön. Willst Du
a) mit der dritten Festplatte die Kapazität Deines Pools erweitern?
b) eine weitere Redundanz hinzufügen?
c) einen weiteren Pool hinzufügen?

[reeli]

Ich möchte die Kapazität des Pools erhöhen. Derzeit sind es 4TB. Nach meine Infos sollten es mit der dritten Festplatte dann knapp 8 TB sein. b) und c) sind für mich z.Z. nicht relevant. Welche Infos sind noch nötig?

[old-papa]

Hmmmm,
wenn Du einen "Mirror" (Spiegel) hast, dann wird das so nichts. Du könntest die Platte nur solo als weitere Datenplatte hinzufügen (ungespiegelt)
Hättest Du einen Pool (z.B. mit RaidZ zur Datensicherheit) ginge das.....
Bei einem Mirror werden Daten von Platte A direkt auf Platte B gespiegelt. Beide müssen also gleich groß sein (zumindest wenn sie voll werden)
Wenn nun Platte A zusammen 8TB groß wäre, wie soll dann auf die 4TB gespiegelt werden? Ein Spiegel hat eine hohe Datensicherheit, aber auch den größten Platzverbrauch (immer die Hälfte, klar) Ein Raid (z.B. RaidZ1) hat auch gute Datensicherheit, aber da nur Paritäten gesichert werden deutlich weniger "Platzverschwendung"

Wenn Du kannst, die Daten sichern und dann die drei Platten neu im Pool mit RaidZ einrichten. Dann hast Du wirklich 8TB (bei 3x4TB) und ausreichende Datensicherheit.

Old-Papa

[Digi-Quick]

Offizielle Antwort : NEIN

Inoffizielle Antwort: Mirror auf Raidz1 geht, via shell - ist aber eine "Operation am offenen Herzen"! (niemals ohne Backup)
https://unix4lyfe.org/zpool/

[spy0r]

Alternativ noch eine weitere 4Tb Platte holen und einfach den vorhandenen pool um einen weiteren mirror erweitern!

[ms49434]

Alternativ noch eine weitere 4Tb Platte holen und einfach den vorhandenen pool um einen weiteren mirror erweitern!

+1

Das ist bis jetzt der beste Vorschlag wenn der vorhandene Pool erweitert werden soll.
c) Ist immer noch eine Option.

[old-papa]

Das ist bis jetzt der beste Vorschlag wenn der vorhandene Pool erweitert werden soll.
c) Ist immer noch eine Option.

Klar, doch er fragte ja nach den Möglichkeiten mit nur einer weiteren Platte.

Old-Papa

[reeli]

Vielen Dank den Spendern von Informationen. Für eine OP am offenen Herzen bin ich nicht der richtige und das Leben des Patienten ist mir zu wertvoll.
Bleibt der Weg, die Daten zu Fuß runter und wieder drauf zu spielen.
Habe noch folgende Frage: Wie genau bilde ich den Pool mit RaidZ1? Ich nehme an: virtuelles Gerät mit den 3 Platten und single parity Raidz oder doch double parity Raidz bilden und in den Pool integrieren. Ist dabei noch etwas zu beachten und kann dieser dann einfach! um eine weitere 4 TB Platte erweitert werden, ohne Datenverschieberei.
Und nur für mich zum ärgern? Hätte ich auch mit den zwei bisher benutzten Platten schon ein RaidZ1 bilden können mit der Option, die jetzt geplante Erweiterung einfacher durchführen zu können?

[old-papa]

Vielen Dank den Spendern von Informationen. Für eine OP am offenen Herzen bin ich nicht der richtige und das Leben des Patienten ist mir zu wertvoll.
Bleibt der Weg, die Daten zu Fuß runter und wieder drauf zu spielen.

Das ist der sicherere Weg, ja.

Habe noch folgende Frage: Wie genau bilde ich den Pool mit RaidZ1? Ich nehme an: virtuelles Gerät mit den 3 Platten und single parity Raidz oder doch double parity Raidz bilden und in den Pool integrieren. Ist dabei noch etwas zu beachten und kann dieser dann einfach! um eine weitere 4 TB Platte erweitert werden, ohne Datenverschieberei.

RaidZ1 sollte im Privatumfeld reichen. Später kann dieser auch erweitert werden, geht relativ einfach. Allerdings habe ich jetzt keine 1zu1 Anleitung, solche sind aber im Netz sehr gut beschrieben, auch hier im Forum. Schau mal oben bei "Anleitungen"

Und nur für mich zum ärgern? Hätte ich auch mit den zwei bisher benutzten Platten schon ein RaidZ1 bilden können mit der Option, die jetzt geplante Erweiterung einfacher durchführen zu können?

Hätte, hätte Fahrradkette... Theoretisch sollte das gegangen sein, ich hatte und habe immer mind. 4 Platten im Raid.

Old-Papa

[Digi-Quick]

Klares Nein!
Ein bestehendes VDEV kann man nicht mittels weiterer HDDs erweitern - inoffizielle Ausnahme siehe oben.

Das ist der einzige "gravierende" Nachteil von ZFS ggü. einem Softwareraid (LVM o.ä.) oder einem Hardware Raid, die können OCE (Online Capacity Expansion).
Der einzige Weg ein VDEV zu vergrössern wäre nacheinander alle HDDs gegen Grössere auszutauschen - mit jeweiligem Resilver dazwischen.

Sowas wird im Professionelen Umfeld eigentlich nicht gemacht.

[reeli]

Hallo zusammen,

bin immer noch am Erweitern meines Systems auf 3 x 4 TB.
Wie oben erläutert habe ich jetzt versucht, meinen pool1 (war nur der angelegt) zu löschen.
Hat so nicht funktioniert.
Habe dann in der Reihenfolge alle snapshots, alle datasets gelöscht, alle dienste deaktiviert. Der pool1 verkleinerte sich dann schließlich auf null.
Alle Parameter des poo1 stehen jetzt auf unbekannt.
Jeder erneute Versuch mit "Änderung übernehmen" gibt folgenden Log-Eintrag.

root: zpool destroy 'pool1'
root: cannot open 'pool1': no such pool

Ich nehme an, dass sich in der Folge auch das virtuelle Gerät nicht löschen lässt ich ich so kein neues Raidz anlegen kann, weil die Platten, (das heißt die zwei Platten, die im mirror verwendet wurden) nicht zur Verfügung stehen.
Was kann ich tun?

[helli]

Huhu,

wenn zpool destroy pool1 ein "no such pool" liefert, dann ist der Pool bereits gelöscht, oder der
Pool-Name falsch geschrieben.
Wenn er per command gelöscht wurde, zeigt das Webinterface das nicht an, solange nicht
unter Disks > ZFS > Configuration > Synchronize die aktuellen Daten importiert bzw abgerufen wurden.
Was im Webinterface steht, kommt aus der festen Konfigurationsdatei, nicht live von den Datenträgern.
Und wenn sich an den Platten was geändert hat, physikalisch gesehen, (umgesteckt, hinzugefügt, entfernt)
dann Disks > Management > HDD Management mit Import Disks & Clear Configuration auch das noch abrufen.

[reeli]

Zustand unverändert:
Disks > ZFS > Configuration > Synchronize: "Nichts wurde synchronisiert"
Disks > ZFS > Configuration > aktuell: "
Name Größe Zugeordnet Zustand Einhängepunkt
pool1 Unbekannt (Unbekannt) Unbekannt /mnt/pool1
und
Virtuelle Geräte (1)
Name Typ Pool Geräte
vmirror mirror pool1 /dev/ada0,/dev/ada1

Disks > Management > HDD Management mit Import Disks & Clear Configuration
keine Veränderung, die Platten werden angezeigt und die Meldung lautet "Alle Festplatten sind importiert."

Eintarg aus dem Log:
Datum & Zeit Benutzer Ereignis
Aug 6 15:58:26 nas4free mount.exfat: exFAT file system is not found
Aug 6 15:58:13 nas4free root: smartd service restarted
Aug 6 15:58:07 nas4free root: ataidle service restarted
Aug 6 15:58:05 nas4free last message repeated 6 times
Aug 6 15:58:01 nas4free mount.exfat: exFAT file system is not found
Aug 6 15:56:06 nas4free root: smartd service restarted
Aug 6 15:55:55 nas4free root: ataidle service restarted
Aug 6 15:55:47 nas4free last message repeated 6 times
Aug 6 15:55:46 nas4free mount.exfat: exFAT file system is not found
Aug 6 15:47:10 nas4free root: cannot open 'pool1': no such pool
Aug 6 15:47:10 nas4free root: zpool destroy 'pool1'
Aug 6 15:47:05 nas4free root: cannot open 'pool1': no such pool
Aug 6 15:47:05 nas4free root: zpool destroy 'pool1'

Anmerkung: Ich habe bisher nur mit dem Webinterface gearbeitet, Server mehrmals neu gestartet.

[helli]

Steht denn da bei ZFS Configuration tatsächlich noch ein pool1 drin?
Frag mich grad warum "mount.exfat: exFAT file system is not found"
im Log steht. Ist alles wie in Beitrag 1 geschildert ZFS formatiert ja?
Na mal sehen, da wird jemand anderes evtl helfen können, ich bin raus

[ms49434]

Es sieht so aus als ob Du den Pool über Disks > ZFS > Tools gelöscht hast und nicht über Disks > ZFS > Pools > Management.

Die nicht verschwindende 'Änderungen übernehmen' Meldung bekommst Du entweder durch einen Neustart weg oder den Aufruf von

Code: Select all

updatenotify_delete('zfspool');

in Tools > Command > PHP Command.

Da WebGUI und ZFS nicht synchron sind und Disks > ZFS > Configuration > Synchronize orphane Pools nicht löscht muss dieser manuell aus der Konfigurationsdatei entfernt werden.
Über Tools > File Editor und Eingabe von /conf/config.xml als Dateipfad die Konfigurationsdatei editieren und den Bereich ZFS suchen:

Code: Select all

<zfs>
	<vdevices>
		<vdevice>
			<uuid>91e6d8db-a112-48e1-b47d-7b60f08a5379</uuid>
			<name>pool1_mirror_0</name>
			<type>mirror</type>
			<device>/dev/ada0</device>
			<device>/dev/ada1</device>
			<desc/>
		</vdevice>
	</vdevices>
	<pools>
		<pool>
			<uuid>7bd8008b-bd5e-43cf-87ff-61879d0f82b2</uuid>
			<name>pool1</name>
			<vdevice>pool1_mirror_0</vdevice>
			<root></root>
			<mountpoint>/pool1</mountpoint>
			<desc/>
		</pool>
	</pools>
	<datasets>
	</datasets>
	<volumes>
	</volumes>
	<autosnapshots>
	</autosnapshots>
</zfs>

Diesen Bereich ändern so dass er folgendermassen aussieht:

Code: Select all

<zfs>
	<vdevices>
	</vdevices>
	<pools>
	</pools>
	<datasets>
	</datasets>
	<volumes>
	</volumes>
	<autosnapshots>
	</autosnapshots>
</zfs>

Jetzt können die Änderungen abspeichert werden und Du kannst mit der Erstellung Deines neuen Pools beginnen.

[reeli]

Vielen Dank, dass hat funktioniert.
Die Vermutung, dass ich den Pool über Disks > ZFS > Tools gelöscht habe und nicht über Disks > ZFS > Pools > Management, ist korrekt, da dass Löschen über Disks > ZFS > Pools > Management nicht erfolgreich war.

Ich habe beim Einrichten des vdev "4k Anpassung erstellen (nop Laufwerk)" angehakt, da neue 4TB Platten verbaut sind. Aufgrund des folgenden Eintrags in den Informationen, bin ich mir jedoch nicht sicher, ob das korrekt war bzw. ob ich vorher schon was falsch gemacht habe.

Platte 1:
=== START OF INFORMATION SECTION ===
Model Family: HGST Deskstar NAS
Device Model: HGST HDN724040ALE640
Serial Number: PK1334PEJ4ALAS
LU WWN Device Id: 5 000cca 250de2840
Firmware Version: MJAOA5E0
User Capacity: 4,000,787,030,016 bytes [4.00 TB]
Sector Sizes: 512 bytes logical, 4096 bytes physical
Rotation Rate: 7200 rpm
Form Factor: 3.5 inches
Device is: In smartctl database [for details use: -P show]
ATA Version is: ATA8-ACS T13/1699-D revision 4
SATA Version is: SATA 3.0, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is: Mon Aug 7 20:41:37 2017 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

Platte 2:
=== START OF INFORMATION SECTION ===
Model Family: HGST Deskstar NAS
Device Model: HGST HDN724040ALE640
Serial Number: PK1334PEJ4G55S
LU WWN Device Id: 5 000cca 250de35ac
Firmware Version: MJAOA5E0
User Capacity: 4,000,787,030,016 bytes [4.00 TB]
Sector Sizes: 512 bytes logical, 4096 bytes physical
Rotation Rate: 7200 rpm
Form Factor: 3.5 inches
Device is: In smartctl database [for details use: -P show]
ATA Version is: ATA8-ACS T13/1699-D revision 4
SATA Version is: SATA 3.0, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is: Mon Aug 7 20:48:42 2017 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled


Platte 3:
=== START OF INFORMATION SECTION ===
Device Model: HGST HDN726040ALE614
Serial Number: K4JXU15B
LU WWN Device Id: 5 000cca 25de94763
Firmware Version: APGNW7JH
User Capacity: 4,000,787,030,016 bytes [4.00 TB]
Sector Sizes: 512 bytes logical, 4096 bytes physical
Rotation Rate: 7200 rpm
Form Factor: 3.5 inches
Device is: Not in smartctl database [for details use: -P showall]
ATA Version is: ACS-2, ATA8-ACS T13/1699-D revision 4
SATA Version is: SATA 3.1, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is: Mon Aug 7 20:48:46 2017 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

noch eine Frage: Ist es korrekt, das bei drei Platten a 4TB = Frei: 10.8T angezeigt wird. Sollte die Kapazität nicht ca. 8 TB sein?

[ms49434]

Das mit den nop devices wäre nicht notwendig gewesen, schadet aber auch nicht wirklich. Viel wichtiger ist zu überprüfen ob der ashift Wert größer oder gleich 12 ist.

Code: Select all

zdb | grep ashift

Die Gesamtkapazität aller Platten beträgt tatsächlich 10.9 Tebibyte, abzüglich der Kapazität zur Verwaltung des Pools macht das dann so 10.8 Tebibyte,
Warum das so ist? Die Festplattenhersteller geben die Kapazität ihrer Festplatten in Terabyte an:

4 Terabyte * 3 = 12 Terabyte, das entspricht 10.9 Tebibyte. Wikipedia

[reeli]

Wo genau soll ich den Befehl eingeben, oder wie genau?
Eingabe in Tools > Command > PHP Command ergibt Parse error: syntax error, unexpected 'ashift' (T_STRING) in /usr/local/www/exec.php(348) : eval()'d code on line 1

[ms49434]

Der Befehl muss im oberen (Command) Bereich eingegeben werden da es sich nicht um einen PHP Befehl handelt.

Unten im Ausgabebereich erscheint dann das Ergebnis, z.B.

Code: Select all

Command Output
$ zdb | grep ashift
            ashift: 13

[reeli]

Ergibt:
$ zdb | grep ashift
ashift: 12