rsync "beschleunigen"?

[Thomas_s-h]

Hallo,

gibt es irgendwo ein Stellrad, wo dem Tool rsync mal Beine gemacht werden können? Meine Server (1 sichert auf 2, 2 läuft nur alle paar Wochen) langweilen sich, aber rsync läuft wie eine Schnecke. Derzeit soll die Sicherung von 15 TB (aktueller Rest 9 TB) noch 2 Wochen dauern - das ist doch echt nervig.

HP Proliant N40L, Gen8

Thomas

 

[emk2203]

Ein einfaches googeln nach 'rsync beschleunigen' liefert als obere 2 Ergebnisse gute Vorschläge:
http://dennis-wisnia.de/wordpress/2012/05/rsync-performance-verbessern/
https://www.linuxlounge.net/rsync-over-ssh-beschleunigen/

Im Klartext musst du die Verschlüsselung abschwächen oder auf der 2. Kiste rsync als Daemon laufen lassen und nicht über SSH.

 

[Thomas_s-h]

rsync läuft schon als Dämon, das mit der Verschlüsselung kann nicht das Problem sein, da beide Server 90% Leerlauf haben.

Thomas

 

[emk2203]

rsync läuft schon als Dämon, das mit der Verschlüsselung kann nicht das Problem sein, da beide Server 90% Leerlauf haben.

Thomas

Machst du das wie in http://doc.freenas.org/9.3/freenas_tasks.html#rsync-tasks beschrieben? Dann kann ich mir nicht erklären, warum dein System so langsam ist. Kompression ausschalten vielleicht?

 

[Thomas_s-h]

Den Link habe ich als Vorlage genutzt. Trotzdem: Leerlauf 90%, Datenrate unter 100MB/s (bei Gigabit-Verkabelung und 130MByte/s Max-Geschwindigkeit bei großen Dateien). Kompression ist aus, weil die Daten schon komprimiert sind (Fotos, Videos).

Thomas

 

[emk2203]

Moment mal, Gigabit Ethernet bringt theoretisch 125 MByte/s, in der Praxis nicht mehr als 117 MByte/s. Du hast also 85% der theoretisch möglichen Geschwindigkeit. Bei großen Dateien nutzt du die voll aus. Schneller gehts dann nicht. Oder du nimmst eine zweite Ethernetkarte und bridgest die oder gleich 10G.

Terabytes übertragen dauert halt, da hab ich im Erstpost nicht nachgerechnet.