Business ABB hohe Deduplizierungslast

  • Ab sofort steht euch hier im Forum die neue Add-on Verwaltung zur Verfügung – eine zentrale Plattform für alles rund um Erweiterungen und Add-ons für den DSM.

    Damit haben wir einen Ort, an dem Lösungen von Nutzern mit der Community geteilt werden können. Über die Team Funktion können Projekte auch gemeinsam gepflegt werden.

    Was die Add-on Verwaltung kann und wie es funktioniert findet Ihr hier

    Hier geht es zu den Add-ons

joman

Benutzer
Registriert
04. Juli 2023
Beiträge
6
Reaktionspunkte
1
Punkte
3
Hallo,
ich habe das Gefühl, dass mein Backup etwas langsam ist (ich weiß, Gefühle sind so eine Sache)
Folgende Einträge tauchen regelmäßig in meinem Log-File auf:
Durchschnittliche Sicherungsgeschwindigkeit der virtuellen Maschine xxx: 42.00 MB/s. Arbeitslast des jeweiligen Betriebsmoduls: Lesen von Quelldaten [Niedrig],, Übertragung von Quelldaten [Niedrig], Datendeduplizierung [Sehr hoch], , Komprimierung in Ziel[Niedrig], und Schreiben in Datei [Niedrig].
Sowohl RAM als auch CPU sind zu Sicherungszeiten zu nicht mehr als 50-60% RAM und 10-20% CPU ausgelastet.
Was kann ich machen, um die Arbeitslast bei der Datendepuplizierung zu verringern?

Grüße,
Jens
 
Na das brauchth halt Zeit ,

Je mehr datein du hast umso mehr muss das System da prüfen.

Und was ist bei dir denn etwas langsam ? wie lange dauert es und wie viele Daten sind es?
Welche Synology hast du ?
 
Wo läuft die virtuelle Maschine, die gesichert wird? Wie ist deren Auslastung?

Ich sichere täglich mehrere PCs und Laptop mit Active Backup, inkrementell. Das dauert pro Maschine 3-5 Minuten und bewegt sich zwischen 5-20 GB. Selbst ein Fullbackup ist relativ zügig erstellt, keine 30 Minuten bei ca. 250 GB.
 
Ich habe eine RS1221RP+ mit 8GB RAM, 8 x 16TB, E10G21-F2 (2 x 10GBit/s).
Ich sichere einen Hyper-V-Cluster mit ca. 100 VMs
 
Wie hoch ist die Last in dem Szenario auf dem HyperV-Host? Wieviele VMs werden gleichzeitig gesichert?

Lastangabe von dir oben beziehe ich auf die Synology.
 
100 VMs, das ist ja schon bisl was ,

wie lange dauert denn deine Sicherung nun ?`
 
Backupjob habe ich jetzt auf 10 VMs gleichzeitg eingestellt. (Letzte Woche hatte ich noch 20 eingestellt).
Die Hyper-V-Server zeigen kaum zusätzliche Last (CPU unter 10%) wärend des Backups. Ich starte abends um 23:00 und brauche 3-6 Stunden.
Gestern: 4,7 TB in 3:47 Std. => 20,7 GB/min
 
na das ist doch schon eine gute Leistung.
 
Mir geht es ja auch eigentlich darum, ob man an der Deduplizierung noch was Optimieren kann:
Arbeitslast des jeweiligen Betriebsmoduls:
Lesen von Quelldaten [Niedrig],,
Übertragung von Quelldaten [Niedrig],
Datendeduplizierung [Sehr hoch], ,
Komprimierung in Ziel[Niedrig],
und Schreiben in Datei [Niedrig].

Alle Werte sind niedrig, nur die Arbeitslast der Datendeduplizierung ist "Sehr hoch". Kann man daran evtl. noch etwas anpassen?
 
na du könntest auf full SSD umstellen ,da könnte es noch etwas schneller gehen
 
Hi,
ich wollte mich nochmal Melden. Wir haben den Fehler gefunden. Eine redundante Leitung zwischen zwei Switchen hat Probleme gemacht. Die Ltg. ist aber leider nicht ganz ausgefallen, sondern hatte nur noch einen Durchsatz von 355kb/s statt 10Gb/s. Deswegen dauerte das Backup mal 3 Stunden, mal 9 Stunden.
Trotzdem danke für eure Hilfsversuche ;)
 
  • Like
Reaktionen: Synchrotron

Additional post fields

 

Kaffeautomat

Wenn du das Forum hilfreich findest oder uns unterstützen möchtest, dann gib uns doch einfach einen Kaffee aus.

Als Dankeschön schalten wir deinen Account werbefrei.

:coffee:

Hier gehts zum Kaffeeautomat