staging.inyokaproject.org

Für diese Funktion musst du eingeloggt sein.

Dateien nur kopieren / syncen, wenn sie nicht existieren

Status: Ungelöst | Ubuntu-Version: Xubuntu 16.04 (Xenial Xerus)
Antworten |

glaskugel

Anmeldungsdatum:
8. Juli 2010

Beiträge: 3849

Kürzlich ist eine HD defekt geworden und es gibt eine Sicherung, natürlich nicht bis zur letzten Sekunde. Da ich nicht sicher bin, was vielleicht an Dateien defekt ist, will ich eine Sicherung verwenden, die ziemlich sicher ok ist und von einer neueren Sicherung nur die Dateien, die dazu gekommen sind.

Die Sicherung ist kein Image, sondern ein simples Dateibackup.

Wie mache ich das nun am besten, ohne jedes Mal gefragt zu werden, ob ich überspringen will. Die 1. Sicherung werde ich per rsync zurücksichern.

cosinus

Avatar von cosinus

Anmeldungsdatum:
11. Mai 2010

Beiträge: 1374

rsync macht das doch schon alles für dich 😕 oder was meinst du da?

rsync

rsync ist ein Programm, um Dateien zwischen lokalen oder über das Netzwerk erreichbaren Pfaden abzugleichen. Dabei werden zunächst die Größe und die Änderungszeit der Dateien in Quelle und Ziel verglichen ("Quick Check"-Algorithmus), so dass nur die Dateien behandelt werden müssen, bei denen es Änderungen gegeben hat. Sind Quelle und Ziel lokale Pfade, werden die betroffenen Dateien normal kopiert. Wenn auf Quelle oder Ziel aber per SSH oder über einen speziellen rsync-daemon zugegriffen wird, nutzt rsync zusätzlich noch einen speziellen Delta-Transfer-Algorithmus, so dass nur die geänderten Teile der Dateien über das Netzwerk transportiert werden müssen.

Mach doch einfach

1
rsync -av $QUELLE $ZIEL

Bearbeitet von Taomon:

unnötige Fettmarkierung entfernt und Wikilink gesetzt.

seahawk1986

Anmeldungsdatum:
27. Oktober 2006

Beiträge: 11278

cp kennt die Option --no-clobber, die verhindert, dass existierende Dateien überschrieben werden und --update, mit der eine Datei nur kopiert wird, wenn sie im Ziel noch nicht existiert oder neuer als im Ziel ist.

Bei rsync gibt es den Schalter --ignore-existing, der verhindert, dass eine Datei kopiert wird, wenn sie im Ziel bereits existiert und den Schalter --update, der eine Datei nur kopiert, wenn sie in der Quelle neuer ist als im Ziel.

Ansonsten könntest du auch einfach die Reihenfolge umdrehen - erst die Daten von der defekten Platte auf die neue Platte kopieren und dann die von der Sicherung darüber schreiben. Das dauert natürlich länger und ist nicht so elegant, aber funktioniert mit normalen Dateimanagern (die ja in der Regel die Option bieten, die Antwort auf die Frage, ob Daten überschrieben werden sollen einmalig für alle Vorkommnisse zu beantworten).

cosinus

Avatar von cosinus

Anmeldungsdatum:
11. Mai 2010

Beiträge: 1374

seahawk1986 schrieb:

Bei rsync gibt es den Schalter --ignore-existing, der verhindert, dass eine Datei kopiert wird, wenn sie im Ziel bereits existiert

Ok, das kann manchmal hilfreich sein, aber wenn sich Dateien geändert haben werden diese geänderte Dateien ja nicht mehr kopiert mit rsync.

Ich würde tatsächlich erstmal von der vermutlich defekten Platte erstmal alles auf die neue kopieren, wenn das durch ist merkt man ja, ob man die Backupplatte überhaupt benötigt wird oder nicht.

glaskugel

(Themenstarter)

Anmeldungsdatum:
8. Juli 2010

Beiträge: 3849

rsync macht das doch schon alles für dich

Theoretisch ja, ich weiß aber nicht, ob durch Umkopieren oder sonst was eine Datei als aktueller von rsync erkannt wird und dann eine defekte Datei letztendlich übrig bleibt. Ich will also, dass die ältere Sicherung, die 99% abdeckt verwendet wird und nicht die neuere Sicherung mit den eventuell defekten Dateien. Ich kann ja nicht überall hinein schauen. Große Unterschiede zwischen letzter und vorletzter Sicherung gibt es nicht und diesen Unterschied will ich vorsichtshalber haben.

--ignore-existing könnte sein, was ich will. Ich darf aber trotzdem im Detail keinen Denkfehler haben.

Ich will bei veränderten Dateien lieber die alten haben, dürften nicht allzu viele sein, wenn man von unwichtigen Mails absieht, die sowieso gelöscht wurden und im Papierkorb sind.

Da muss ich also auch noch aufpassen. Ich finde in der rsync-Manpage nicht wie man sich anzeigen lässt, was synchronisiert würde, ohne, dass es irgendwelche tatsächlichen "Kopieraktionen" gibt.

Das Problem mit rsync ist, dass Dateien, die vorher nicht über rsync "kopiert" wurden, zB mit cp von rsync überschrieben werden.

Edit: Ich habe es gefunden, ich suchte nach -n (dry run)

cosinus

Avatar von cosinus

Anmeldungsdatum:
11. Mai 2010

Beiträge: 1374

Kopier doch einfach erstmal alles auf die neue HDD/SSD. Was dann fehlt siehst doch im Log oder nicht?

Oder glaubst du die Disk ist schon so kaputt, dass die Dateien zwar kopiert werden können (fehlerfrei) der Inhalt aber trotzdem kaputter Blödsinn ist? 😕

glaskugel

(Themenstarter)

Anmeldungsdatum:
8. Juli 2010

Beiträge: 3849

Oder glaubst du die Disk ist schon so kaputt, dass die Dateien zwar kopiert werden können (fehlerfrei) der Inhalt aber trotzdem kaputter Blödsinn ist?

Na ja, ist mir schon passiert, dass sich Dateien kopieren ließen, der Inhalt aber unbrauchbar war.

cosinus

Avatar von cosinus

Anmeldungsdatum:
11. Mai 2010

Beiträge: 1374

glaskugel schrieb:

Na ja, ist mir schon passiert, dass sich Dateien kopieren ließen, der Inhalt aber unbrauchbar war.

Wir hatten ja im letzten Thread schon drpber gesrpchen oder nicht 😊 Schmeiß diese Platten mit auffälligen Werten einfach weg und gut is 😛

Oder hat du zuviel Zeit und Langeweile?

glaskugel

(Themenstarter)

Anmeldungsdatum:
8. Juli 2010

Beiträge: 3849

Ich habe ja nur geschrieben, das ich das schon hatte und ich daher als möglich erachte. So merkwürdige Platten fliegen sowieso raus. Den 1. Fehler habe ich schon gemacht, auf Spam zurücksichern muss ich wohl verzichten 😉

Ich habe die vorletzte Sicherung gesynct und danach Mails geholt, da die Mails von Claws-Mail nummeriert werden, würde es da Überschneidungen geben.

Antworten |