Hallo Snofru,
ich antworte mal in einer anderen Reihenfolge als Deine Fragen sind.
.
Rsync und storeBackup sehen vielleicht auf dem ersten Blick ähnlich aus, arbeiten aber sehr unterschiedlichen; auch wenn beide Hardlinks verwenden. Ich beschränke mich mal auf Deine Frage mit den Prüfsummen - ansonsten solltest Du mal die Dokus lesen. Rsync ist in erster Linie ein Synchronisations-; und storeBackup ein Backup-Tool.
Die Basisfunktion von rsync ist, Dateien in ein anderes Verzeichnis zu kopieren (eigentlich synchronisieren) und mit einer besonderen Option ggf. Hardlinks zu setzen, wenn die Datei in einem anderen Directory (= vorheriges Backup) schon mit gleicher Größe und Modify Time (mtime) vorhanden ist. Es gibt aber Operationen, die die Creation Time (ctime) verändern. Daher kann es passieren, dass rsync eventuell Veränderungen nicht mitbekommt (das passiert nicht, wenn Du einfach nur normale Dateien als Ganzes abspeicherst). Mehr als mtime kann rsync aber nicht vergleichen, weil es nicht möglich ist (soweit ich weiß), eine Datei mit vorgegebener (also "falscher", nicht aktueller) mtime und ctime (im Backup-Verzeichnis) anzulegen. Ich hatte das im vorherigen Post mit "cp -a" (A = Archive, alles beibehalten) gezeigt.
Um also derartige Änderungen, die die mtime nicht verändern mitzubekommen, (und da muss man damit rechnen, dass Applikationen der GUI so etwas machen) schlägt redknight vor (jedenfalls habe ich ihn so verstanden) einen Prüfsummenalgorithmus (der ursprünglich für die effiziente Datenübertragung über langsame Leitungen gedacht war; dafür eine sehr pfiffige Sache, habe ich schon häufig verwendet) für alle (?) Dateien anzuwerfen. Dieser berechnet dann Prüfsummen sowohl vom älteren Backup als auch im Quellverzeichnis. Hiermit werden Änderungen dann auf jeden Fall erkannt. Rsync verwendet nur die Dateien selbst, keine zusätzlichen Informationen (Meta Daten).
.
Wie schon erwähnt, arbeitet storeBackup völlig anders. Ich gehe jetzt der Einfachheit halber davon aus, dass schon mindestens ein Backup existiert. In dieses Backup hat storeBackup neben den Dateien, die eventuell komprimiert wurden, auch die ctime, mtime, md5 Summe und noch ein paar Informationen zu jeder Datei in einem einfachen ASCII File gespeichert.
Wenn jetzt ein weiteres Backup gespeichert wird, passiert (mehr oder weniger) das Folgende (steht übrigens alles in der Doku):
- es wird über mtime, ctime und Größe in diesem ASCII File nachgesehen (!), ob diese Datei vorher schon im Backup an gleicher Stelle war. (Es also völlig egal, ob z.B. die Zeiten der realen Datei im Backup noch unverändert sind und es kann die ctime verglichen werden.) Wenn die Datei so schon vorher da war, wird die md5 Summe aus dem Backup übernommen und die ein passender Hard Link erzeugt (+ Rechte gesetzt etc.)
- wenn die Datei noch nicht im Backup vorhanden war, wird die md5 Summe berechnet und nachgesehen, ob es eine Datei mit derselben md5 Summe und Größe im Backup gibt. Wenn ja, wird auf diese verlinkt.
- wenn es die Datei noch nicht gab, wird sie kopiert / komprimiert im neuen Backup Verzeichnis angelegt.
(Nur der Vollständigkeit halber: Du kannst mit storeBackup auch Dateien in Stückchen "hacken" und nur die Unterschiede abspeichern (und mit 'cat' wieder zusammensetzen), so etwas ähnliches gibt es auch mir Tools, die auf dem rsync Prüfsummen-Mechanismus aufsetzen, aber das sind dann andere Tools als rsync selbst, die auch Deine Anforderung an ein simples Format nicht erfüllen.)
.
Die Prüfsummen bei rsync werden also temporär verwendet, bei storeBackup werden sie abgespeichert und weiterverwendet. (Sie sind auch völlig anders aufgebaut da sie zu einem anderen Zweck dienen, aber das kannst Du selbst nachlesen, bringt aber hier nichts.)
.
Die Prüfsummen werden also völlig unterschiedlich verwendet; bei storeBackup dienen sie zur Deduplikation, d.h. doppelte oder umbenannte Dateien (oder welche in einem anderen / geänderten Pfad) werden erkannt.
.
Ich hoffe, es ist halbwegs klar geworden, wo die Unterschiede bei direkten Erstellen des Backups liegen. Die rsync-Variante mit "kopieren und unveränderte Dateien verlinken" hat natürlich andere Ansprüche an den Plattenplatz als storeBackup mit "komprimieren (wenn's lohnt) und inhaltlich identische Dateien erkennen)" .
.
Dann hatte ich noch die Möglichkeiten der Replikation und was hier vielleicht interessanter ist, die des offline Backups (isolated Mode) angesprochen, aber da solltest Du Dir wirklich die Doku durchlesen, da ist das alles (in Deutsch) beschrieben. Das automatische Löschen alter Backups nach flexiblen Regeln geht übrigens auch.
.
Was ich im vorigen Posting zu "Prüfsummen" angesprochen habe, ist (aus der Doku von storeBackup kopiert, ich bin zu faul, dass in eigene Worte zu fassen):
storeBackupCheckBackup.pl
Wenn Du Daten von einer Platte auf eine andere kopierst, können unbemerkt Bit Fehler (z.B. im Hauptspeicher, in der CPU, in Verbindungsleitungen) passieren, die dazu führen, dass fehlerhafte Daten in Deinem Backup gespeichert werden. Dieses kann insbesondere über lange Zeiträume auf der Backup Platte passieren. Da storeBackup neben den eigentlichen Daten auch Prüfsummen speichert, ist es möglich, die gespeicherten Daten mit diesen Prüfsummen - die aus den Daten im zu sichernden Verzeichnis berechnet wurden, zu vergleichen - um so die Wahrscheinlichkeit zu erhöhen, dass die Daten nicht korrupt sind.16 Aber keine Panik, so etwas passiert nicht ständig.
storeBackupCheckSource.pl
Wenn Du Daten von einer Platte auf eine andere kopierst, können unbemerkt Bit Fehler (z.B. im Hauptspeicher, in der CPU, in Verbindungsleitungen) passieren, die dazu führen, dass fehlerhafte Daten in Deinem Backup gespeichert werden. Dieses kann insbesondere über lange Zeiträume auf der Backup Platte passieren. Da storeBackup neben den eigentlichen Daten auch Prüfsummen speichert, ist es möglich, die gespeicherten Daten mit diesen Prüfsummen - die aus den Daten im zu sichernden Verzeichnis berechnet wurden, zu vergleichen - um so die Wahrscheinlichkeit zu erhöhen, dass die Daten nicht korrupt sind. Das ist der Grund, warum es storeBackupCheckBackup.pl gibt.
Aber ein solcher Bit-Fehler kann auch in Deinem Quellverzeichnis (als dem, das gesichert wurde) nach einem längeren Zeitraum passieren. Mit diesem Programm kannst Du Dateien, die sich seit dem Backup im Quellverzeichnis nicht geändert haben mit Hilfe der Prüfsummen aus dem Backup überprüfen.
Diese Möglichkeit hast Du bei Backup-Verfahren, die keine aus dem Quellverzeichnis errechneten Prüfsummen im Backup speichern, logischerweise grundsätzlich nicht. Ob und wenn ja welche anderen freien Tools das noch unterstützen - keine Ahnung.
.
Snofru schrieb:
Verstehe ich dich, ixo, also richtig, dass ich ohne LVM nicht im laufenden Betrieb sichern sollte? Dann stellt sich mir aber sofort die Frage: Wie machen das denn dann die genannten (und andere) Online-Dienste? Die synchronisieren doch auch - ich nehme jetzt mal dieses Modewort - in "Echtzeit" (jedenfalls kann man das ja so einstellen, und ich selbst hatte das auch so), und da habe ich noch nie gehört, dass jemand da mit Inkonsistenzen zu kämpfen hatte? Oder liegt das etwa nur daran, dass alle Leute diese Dienste ausschließlich zum Synchronisieren verwenden bzw. um von überall her auf ihre Daten zugreifen zu können - und gar nicht für echte Backups? Fragen über Fragen. ^^
Also, was andere mit Online-Diensten so machen, weiß ich nicht. Wenn man natürlich nur einfache Dateien sichert, ist das kein Problem, solange man nicht zufällig eine gerade in der Sicherung befindliche "halbe" Datei erwischt.
Grundsätzlich kannst Du unter Linux sichern, wie Du willst. Die Frage ist nur, ob das Ergebnis konsistent ist. Gehen wir mal ein paar Beispiele für die Sicherung des Home-Verzeichnisses ohne Snapshot (LVM) durch.
1. Du bootest von CD und mountest Die zu sichernde Platte. Hier wird's keine Inkonsistenzen geben, da im Homeverzeichnis keine aktiven Programme am werkeln sind.
2. Du bootest Deine Maschine, loggst Dich aber (über die Konsole) als anderer User (root) ein und machst Dein Backup; Ergebnis wie oben, keine Probleme.
3. Du loggst Dich in die Maschine unter Deinem User-Account ein, aber auf der Console, also ohne GUI. Ergebnis wie oben.
4. Du loggst Dich mit GUI unter Deinem Namen ein, machst ein xterm (o.ä.) auf, machst nichts mit den anderen Programmen und startest das Backup. Mit sehr großer Wahrscheinlichkeit wird alles gut gehen. Wenn Du allerdings Pech hast, fragt kmail z.B. neue Mails ab und schafft es genau in dem Moment, wenn Du die entsprechenden Dateien sicherst, einen inkonsistenten Stand auf der Platte zu haben (sofern kmail nicht derartige Zustände grundsätzlich vermeidet, das weiß ich schlicht und ergreifend nicht).
Es spricht natürlich nichts dagegen, mit der GUI ein "kleines" Backup zwischendurch für die Dateien, die Du bearbeitest (also nicht-GUI-Daten) zu sichern. Da gibt's kein Risiko, da Du in der kurzen Phase natürlich nichts zeitgleich abspeichern wirst.
Das sollten so die grundsätzlichen Möglichkeiten sein.
Falls Du Deine Backups mit storeBackup machen willst: Mach einfach ein paar Backups, probier es auch. Es handelt sich um ein Tool, das man einfach verwenden kann, das aber auch komplexe Möglichkeiten bietet. Es hängt alles ein bisschen von Deinen Anforderungen (und wie paranoid Du bist) ab. ☺
Ansonsten musst Du natürlich selbst entscheiden, was für Dich am Besten passt.
Ich hoffe, das erklärt's einigermaßen.
Grüße, ixo