staging.inyokaproject.org

rsync Backup: Gelöschte Dateien

Status: Ungelöst | Ubuntu-Version: Ubuntu GNOME 16.04 (Xenial Xerus)
Antworten |

verticalis

Anmeldungsdatum:
6. Januar 2008

Beiträge: 59

Hallo,

ich sichere mein Home Verzeichnis mit rsync auf meinem Synology NAS. Nach ca. drei Jahren haben sich enorme Datenmengen angesammelt, weil bisher im Source gelöschte Daten auf Target nicht gelöscht werden.

Ich würde gerne weiterhin das Backup mit rsync laufen lassen, und dann mit find Daten die älter als 1 Jahr sind auf dem Target löschen. Also in etwa so:

# backup mit rsync
rsync -avzh --no-perms --progress --password-file /home/user/xxx.dat /home/user admin@SynologyNAS::Backup

# alte Dateien löschen
ssh -t admin@SynologyNAS "find /volume1/Backup -type f -mtime +360 -exec rm -f {} \"

Leider werden dabei einige 100 Dateien gelöscht, die auf source existieren und im backup erhalten bleiben sollen, aber gelöscht werden weil die modification time älter als mtime ist.

Weiß jemand wie ich das lösen kann?

Danke im voraus!

Gruß Chris

u1000

Anmeldungsdatum:
2. Oktober 2011

Beiträge: 1850

Hi,

wenn du beim rsync die "--delete" Option verwendest, wird auf dem NAS alles gelöscht, was auf dem Quellrechner nicht mehr existiert.

Zum Simulieren, was würde rsync machen, verwende zusätzlich die "-n" Option. Siehe auch hier: rsync

Um ältere Zustände sinnvoll aufzuheben empfehle ich z.B. pro Monat ein neues Ziel zu verwenden:

rsync -n --delete -avzh --no-perms --progress --password-file /home/user/xxx.dat /home/user admin@SynologyNAS::Backup/2016-10

Automatisiert und platzsparend mit Hardlinks siehe hier: Skripte/Backup mit RSYNC (Abschnitt „Beispiel-Minimal-Variante“)

Viele Grüße u1000

verticalis

(Themenstarter)

Anmeldungsdatum:
6. Januar 2008

Beiträge: 59

Hallo u1000,

die delete Option tut leider nicht das was ich brauche.

Bei mir läuft rsync mindestens zweimal am Tag um meine Arbeit zu sichern. Die Backups benötige ich in 90% der Fälle um Userfehler zu beheben, Szenario Datei ausversehn gelöscht. Da bringt es nichts wenn rsync sofort alle Dateien aus dem Backup löscht, die auf dem Quellrechner nicht mehr existieren. Die Dateien die ich lösche, sollten mindestens noch eine Woche auf dem Backup verfügbar sein.

Da Problem wird leider auch nicht gelöst wenn ich jeden Monat eine neues Backup Ziel verwende...

Gruß Chris

gert

Anmeldungsdatum:
27. Juni 2005

Beiträge: 642

Folgende Idee:

Mit einem simulierten rsync (rsync mit --delete --dry-run) erzeugst Du eine Liste der Dateien, die auf dem Ziel gelöscht werden würden (wegen --dry-run aber nicht gelöscht werden). Diese Liste kannst Du dann verwenden, um in einem weiteren Skript nur die älteren davon auch wirklich zu löschen.

Den eigentlichen rsync-Lauf machst Du dann wie bisher ohne --delete.

Viele Grüße Gert

frostschutz

Avatar von frostschutz

Anmeldungsdatum:
18. November 2010

Beiträge: 7795

Mach Snapshots. http://linuxwiki.de/rsync/SnapshotBackups

Tägliche (letzte X Tage), Wöchentliche (letzte X Wochen), inkrementelle Sicherungen. Das deckt den unmittelbaren Bedarf ab, da wird nix gelöscht, das fällt mit der Zeit raus.

Und dann eben noch das volle Backup für alles auch vom vorletzten Jahrhundert.

u1000

Anmeldungsdatum:
2. Oktober 2011

Beiträge: 1850

verticalis schrieb:

Da Problem wird leider auch nicht gelöst wenn ich jeden Monat eine neues Backup Ziel verwende...

Hi, monatlich ist ja nur ein Bespiel. Wenn du dir das zitierte rsync Skript mal anschaust, kannst du den Zielordner

heute=$(date +%Y-%m-%d)

beliebig anpassen, und z.B. um Stunde, Minute, Sekunde, ms erweitern:

heute="$(date +%Y-%m-%d_%H%M%S_%N)"

Durch die Hardlinks brauchst du auch nicht mehr Speicherplatz.

Auch möchte ich noch auf die rsync Optionen

-b	sorgt dafür, dass durch die Option --delete gelöschte sowie alle veränderten Objekte gesichert werden (siehe dazu folgende Option --backup-dir=)

--backup-dir=Verzeichnis	gibt ein Verzeichnis für die gelöschten und geänderten Objekte an, siehe Option -b

hinweisen - ggf. auch im Script verwendbar ☺

Viele Grüße u1000

Antworten |