Daten von USB Platte importieren

[discard]

Hallo,
ich habe hier schon etwas gelesen aber bisher noch nichts ähnliches gefunden, deshalb:
Ich habe einen HP54 ( 6GB + 10GB Swap auf Pool ) mit embedded NAS4FREE auf USB Stick, dazu 2x2TB als ZFS Pool.
Soweit alles gut. Jetzt versuche ich von einer am Server angeschlossenen USB Platte (NTFS) Daten in den Pool zu importieren.
Es sind cirka 300GB, davon 95% Dateien zwischen 2 und 25 MB, der Rest zwischen 4 und 20 KB.
Bisher keine wirkliche Chance, egal wieviele Dateien ich gleichzeitig zum kopieren auswähle, ab spätestens 100MB Transfer bricht die Aktion ab und kann angeblich nicht mehr auf die USB Platte zugreifen. Testweise das ganze über Netzwerk > gleiches Problem.
Speicherauslastung ist dann immer über 90%, Swap bei 3GB.... und ein Zugriff übers Netzwerk auf den Server kaum noch möglich.
USB Datentransfer auf anderen Rechner>kein Problem

Da ich neu im Thema NAS4FREE bin weiss ich jetzt nicht so richtig weiter.
LG
Thomas

EDIT: gerade mal eine 2GB übers Netzwerk auf den Server geschoben> Geschwindigkeit in der Spitze: 2MB/S oder besser

[apollo567]

N4F und NTFS, kann durchaus Probleme machen.
Ich würde die Daten übers Netzwerk z.B. von einem Windows Client-Rechner aus auf den Server schieben. Bei den beschriebenen Problemen die Frage: ist die USB-Festplatte in Ordnung, hast du diese mit chkdsk überprüft ?

[discard]

So, Daten über Windowsrechner auf den Server ergibt: gleiches Problem.
Ein,zwei große Dateien kein Problem, bei vielen Kleine Dateien bricht irgendwann die Übertragungsrate ein und dann heisst es Fehler beim Schreiben/Lesen von Datei xxx.
Der Server ist dann noch ein paar Minuten hörbar am arbeiten, in der Zeit ist er auch im Netzwerk nicht ansprechbar.
iperf sagt mit bei meinem 100er Netzwerk eine Transferrate von 110 Mbits/sec...
lg
Thomas

[apollo567]

Klingt strange.
Mit deinem Netzwerk kannst du, wenns gut läuft 8-10 MB/s erwarten. Würde auf Gigabitnetzwerk mit Intelkarten aufrüsten !
Hast du die Quelldatenplatte mal geprüft mit "chkdsk /f /v /b /r" ?
Da das Kopieren nur einmal zu machen ist, probiere es in Etappen zu kopieren.
Im Moment fällt mir wenig sonst ein, poste mal bitte deine Hardware, deine Systemrevision von N4F ....

[discard]

Jo, strange ist wohl richtig.
Quelldatenplatte ist geprüft, alles prima. In Etapen bin ich jetzt dabei, das ist aber kein Spass.
Brauche den Server nur als Datengrab für Audio, ein paar Filme und ebend diese rel. kleinen Dateien. Da (wenn alles läuft ) auf den Server nur per WLAN zugegriffen wird kann ich mir das mit dem Gigabitnetz wohl sparen.
MAschine: HP Proliant Server 54L, 6GB, 2x2 TB im ZFS Pool, Poolfüllstand z.Zt. 220 GB,
Version 9.1.0.1 - Sandstorm (revision 847)
Build date Sun Aug 18 03:49:41 CEST 2013
Platform OS FreeBSD 9.1-RELEASE-p5 (kern.osreldate: 901000)
Platform x64-embedded on AMD Turion(tm) II Neo N54L Dual-Core Processor
System bios HP version: O41 07/29/2011

Router: Asus RT-N12

lg
Thomas

[apollo567]

Über diese HP Microserver gibt (ob ihrer Verbreitung ?) einiges im Forum:

viewtopic.php?f=66&t=867&p=20186&hilit= ... ver#p20186
viewtopic.php?f=21&t=4263&p=23441&hilit ... ver#p23441

Evtl. ist a was dabei.

[shakky4711]

Hallo,

Abbrüche beim Kopieren sind nicht normal, ich würde eigentlich bei der Meldung wie Apollo auch eher in Richtung Probleme beim Windows Client tippen...

Probier mal PathSync http://www.cockos.com/pathsync/ aus, ein winzig kleines Sync Tool mit grafischer Oberfläche. Dass besondere für Deinen Fall ist hier, dass Du die Übertragungsgeschwindigkeit reduzieren kannst. Probier das mal aus, vielleicht verschluckt sich Dein Windows bei so hohen Übertragungsraten im Megabit Netzwerk

Ansonsten auch mal alle Firewalls, Virenscanner und sonstigen Windows Ballast vor der Übertragung deaktivieren.

Gruß
Shakky

[discard]

Vielen Dank für die ganzen Tips,
leider brachte alles bisher keine Besserung. Es ist auch egal ob ich von W7 Lappi, Linux Läppi oder Macbook auf das NAS Daten schiebe, entweder es fängt gut an und wird dann quälend langsam oder es bricht sogar ab.
Jetzt fliegt testweise mal eine andere Netzwerkkarte rein.
lg
Thomas

[shakky4711]

Netzwerkkabel und Switch wären auch noch eine Idee, nimm mal ein anderes Kabel und einen anderen Port am Switch, eventuell auch mal einen anderen Switch von nem Kumpel leihen.

Gruß
Shakky

[discard]

Switch und Kabel habe ich schon hinter mir.
Ähm, jetzt habe ich probehalber mal meine Auslagerungsdatei am NAS ausgeschaltet.... keine Abbrüche mehr, durchgängig gleiche gute Geschwindigkeit...
Da bin ich als newbie jetzt echt erstaunt und habe da so gar keine Erklärung für... aber toitoi, schreibe seit 2 Stunden massig kleine Dateien ohne Probleme.

lg
Thomas

[discard]

Sodele, die Intel Netzwerkkarte auch noch eingebaut, alles tippitoppi. Habe gerade 7GB mit 1320 Dateien in 20 min. über WLAN auf den Server geschaufelt. Läuft. Wobei es mir hier garnicht auf die Geschwindigkeit ankommt.
Vielen Dank an alle für die Tipps, vielleicht kann mir noch jemand erklären warum der Swap bei mir alles lahmgelegt hat ( Bedienerfehler natürlich eingeschlossen )?

lg
Thomas

[shakky4711]

Hallo,

Wo lag denn Dein SWAP? War es eine SWAP Datei oder Partition?

Gruß
Shakky

[discard]

Hallo Shakky,
versucht habe ich Partion auf Platte und auf extra USB Stick. Beide mal das gleiche Ergebnis.
lg
Thomas