Forum: PC Hard- und Software FreeNAS / ZFS - lokales kopieren extrem langsam


von Timm R. (Firma: privatfrickler.de) (treinisch)


Lesenswert?

Hallo,

vielleicht weiß ja jemand eine Antwort?

Ich betreibe hier ein FreeNAS-System und das Problem ist, dass lokale 
Kopien mit rsync extrem langsam sind: 10 MB/s, da schaffe ich über 
Ethernet entspannt fast das 8fache mit demselben System.

Klar, ist da das selbe Filesystem, aber ist 10 MB/s nicht trotzdem zu 
wenig?

Daten:
1
rsync -avz --partial --no-specials --no-devices --progress

CPU: Intel(R) Xeon(R) CPU D-1541 @ 2.10GHz (2100.04-MHz K8-class CPU)
HDDs sind 6 Stück WD red WD60EFRX 64MB in einem einzigen RAIDZ2
Ram sind 32gb ECC DDR4-2133
FreeNAS 11.1-STABLE

Die Platten und die CPU haben eine Temperatur von 32°C

Irgendwelche Hinweise?


Herzliche Grüße und vielen Dank

 Timm

von Peter M. (r2d3)


Lesenswert?

Dateigröße?!

von Timm R. (Firma: privatfrickler.de) (treinisch)


Lesenswert?

Hallo,

sorry, klar.

Die 10 MB/s sind für Files im GB Bereich 1 bis 5 GB.

vlg
 Timm

von Schwarzseher (Gast)


Lesenswert?

Generell können rsync partial updates bei einem CoW-Dateisystem stark 
kontraproduktiv sein.

Versuch mal ein stinknormales cp statt dem rsync, ist vmtl schneller und 
fragmentiert nicht.

Nutze die CoW Vorteile (cp --reflink &co) statt gegen dein Dateisystem 
zu arbeiten und du landest schnell bei TB/sec statt MB/sec..

von Jim M. (turboj)


Lesenswert?

Timm R. schrieb:
> WD red WD60EFRX 64MB

Das sind 5400er Platten, die brechen stark ein wenn man gleichzeitig 
lesen und schreiben will.

Bei mieser Performance sollte man auch immer mal nachschauen ob das RAID 
noch OK oder nicht eine Platte ausgefallen ist.

Der -z Parameter (GZIP Kompression IIRC) könnte die CPU Last übermäßig 
ansteigen lassen - und rsync ist IIRC single-threaded. Wie sieht beim 
Kopieren die Last auf den einzelnen Cores aus?

von Timm R. (Firma: privatfrickler.de) (treinisch)


Lesenswert?

Hallo,

vielen Dank! Das z wars!

Jetzt sind es 100 MB/s, immer noch weniger als auf meinem 
Schreibtisch-iMac mit einer einzelnen Festplatte (150 MB/s) aber 
schonmal deutlich realistischer!

Danke!

 Timm

Bitte melde dich an um einen Beitrag zu schreiben. Anmeldung ist kostenlos und dauert nur eine Minute.
Bestehender Account
Schon ein Account bei Google/GoogleMail? Keine Anmeldung erforderlich!
Mit Google-Account einloggen
Noch kein Account? Hier anmelden.