staging.inyokaproject.org

[tar] inkrementelle Backups (zurückspielen)

Status: Ungelöst | Ubuntu-Version: Kubuntu 14.04 (Trusty Tahr)
Antworten |

MoonKid

Anmeldungsdatum:
9. Februar 2012

Beiträge: 1379

Aus gegebenen Anlass (Datei verloren) beschäftige ich mich derzeit damit, neben meiner Synchronisationslösung (von mir fälschlicherweise als "Backup" bezeichnet) inkrementelle Backups anzulegen.

1. So ganz ist mir noch nicht klar, wie ich mit der timestamp-Datei umgehen soll.

2. Weiterhin ist mir auch nicht ganz klar, wie ich inkrementelle Backups wieder herstelle. Damit meine ich gar nicht, diese wieder an ihren ursprünglichen Ort vollständig wiederherzustellen, sondern sie an einen alternativen Ort zu spielen, damit ich darin wiederum nach der einen verlorengegangenen Datei (mein häufigster use-case) suchen kann. 😀 Bei dem Gedanken merke ich, dass ich evtl. gar nicht alle Teile des inkrementellen Backups zurückspielen möchte, sondern nur einen Teil. z.b. meine Bachelorarbeit vor 2 Wochen. Vielleicht ist tar gar nicht die richtig Lösung dafür. (btw: locale git repositories lege ich bereits für einige Daten an. Hilft mir hier aber nicht, weil ich z.B. in geistiger Umnachtung das gesamte Projektverzeichnis(incl. .git) gelöscht habe).

Skripte/Backupscript, Skripte/inkrementelles Backup und tar kenn ich schon. 😉

Dort wird für das zurückspielen z.B. folgende Schleife gezeigt.

#!/bin/bash
for archiv in ./*.tgz; do
    tar --listed-incremental=/dev/null -xpzf $archiv -C /
done

Soweit ich verstehe, müssen alle incrementellen Backups ja in der korrekten Reihenfolge (beginnend mit dem ältestens bzw. level0) zurückgespielt werden. Korrekt? Daher sollten die Files auch korrekt sortiert werden (nach Datum selbst, oder nach Dateinamen in dem Datum und Zeit steht). Aber wer sagt mir denn, das in der obigen Schleife die Dateien auch korrekt sortiert sind?

Und wie gesagt, stelle ich mir beim Schreiben dieses Postings die Frage ob tar überhaupt für mich geeignet ist. Ich brauche aber etwas incrementelles, weil ich trotz recht großen NAS nicht 30x 20GB vorhalten möchte. Dabei möchte ich aber auch relativ fix in den Backups nach einer aktuell versehentlich gelöschten (Zeitpunkt unbekannt) Datei oder einer älteren Version (genaue Zeit auch unbekannt) einer bestehenden Datei suchen. Dieses Suchen erscheint mir mit der tar-Lösung aber umständlich bzw. ich kann es mir auch nicht so genau vorstellen.

Moderiert von XM-Franz:

Kein Bezug zum Forum "Programme" vorhanden. Ins passende Forum verschoben.

HarryD

Anmeldungsdatum:
14. Juni 2006

Beiträge: 2818

Was du möchtest kann Back In Time schon

Vej Team-Icon

Moderator, Supporter
Avatar von Vej

Anmeldungsdatum:
7. März 2013

Beiträge: 3401

Hallo MoonKid.

MoonKid schrieb:

Soweit ich verstehe, müssen alle incrementellen Backups ja in der korrekten Reihenfolge (beginnend mit dem ältestens bzw. level0) zurückgespielt werden. Korrekt?

Ja.

Daher sollten die Files auch korrekt sortiert werden (nach Datum selbst, oder nach Dateinamen in dem Datum und Zeit steht). Aber wer sagt mir denn, das in der obigen Schleife die Dateien auch korrekt sortiert sind?

Vielleicht ein kleines Experiment?

Dateien mit den Namen aus dem Skript in irgendeinem (Test-)Ordner anlegen:

for ((backupnummer=0; backupnummer < 31 ;backupnummer++))
 do backupnr=000${backupnummer} # Vergleiche bitte mit Zeile 82 des Skriptes
 backupnr=${backupnr: -3} # Das ist Zeile 83 des Skriptes
 touch backup-$backupnr.tgz # Eine Datei mit dem Namen aus Zeile 84 anlegen
done 

Danach die Reihenfolge der Wiederherstellungen ausgeben lassen:

for archiv in backup-*.tgz; do echo "tar --listed-incremental=/dev/null -xpfz $archiv -C /"; done 

Ergebnis bei mir:

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
tar --listed-incremental=/dev/null -xpfz backup-000.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-001.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-002.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-003.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-004.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-005.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-006.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-007.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-008.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-009.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-010.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-011.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-012.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-013.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-014.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-015.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-016.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-017.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-018.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-019.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-020.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-021.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-022.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-023.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-024.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-025.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-026.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-027.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-028.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-029.tgz -C /
tar --listed-incremental=/dev/null -xpfz backup-030.tgz -C /

Wie du siehst, sorgen die Dateinamen dafür, dass die Reihenfolge stimmt.

Wenn du ältere Dateistände wiederherstellen möchtest, musst du die entsprechende Anzahl von inkrementellen Backups weglassen, oder sogar auf die älteren (Voll-) Backups zurückgreifen:

Alle 30 Tage wird der Inhalt des Backupordners verschoben und ein neues Komplettbackup angelegt. Die "alten Backups" werden nicht automatisch gelöscht, sondern müssen bei Bedarf manuell gelöscht werden. Zu finden sind diese im {ROTATEDIR}/{DATUM}.

(Zitat aus dem Wikiartikel Skripte/inkrementelles Backup (Abschnitt „Bereit-zum-Ausfuehren“)).

Viele Grüße

Vej

PS.: Ich muss HarryD zustimmen, das Back in Time wahrscheinlich das Programm ist, das du suchst.

MoonKid

(Themenstarter)

Anmeldungsdatum:
9. Februar 2012

Beiträge: 1379

Vej

Wie du siehst, sorgen die Dateinamen dafür, dass die Reihenfolge stimmt.

Das ist das Ergebnis deines "Experiments" - aber kein Beweis.

Ich frage konkreter: Ist das Sortierverhalten dieser Schleifenkonstruktion (bin nicht sicher, welche bash-Komponente da wirklich betroffen ist, oder wie diese zu benennen wäre) konkret definiert? Sortiert die IMMER nach Dateinamen? Sortiert sie evlt. auch mal nach inodes, physischen Vorhandensein? Ist es evtl. abhängig vom Dateisystem, was dieses hier liefert, oder gar vom Speicherkontroller?

PS.: Ich muss HarryD zustimmen, das Back in Time wahrscheinlich das Programm ist, das du suchst.

Zieh ich mir rein. Hat aber erstmal nichts mit dem Topic hier zu tun. Wusste nur nicth so genau, wie ich das subject hier nennen sollte. Es geht mir um die Schleife selbst. Sowas kann man ja auch in anderen Situationen einsetzen. Daher interessiert mich schon ob dieses Verhalten tatsächlich definiert ist, oder zwischen den environments differiert.

Vej Team-Icon

Moderator, Supporter
Avatar von Vej

Anmeldungsdatum:
7. März 2013

Beiträge: 3401

Hallo MoonKid.

MoonKid schrieb:

Das ist das Ergebnis deines "Experiments" - aber kein Beweis.

Nun du kannst dieses "Experiment" ja vor jeder Wiederherstellung auf dem Dateisystem der Sicherung wiederholen. Dann hast du den Beweis, dass es in der konkreten Situation (zu dem Zeitpunkt der Durchführung des "Experimentes") funktioniert.

Ich frage konkreter: Ist das Sortierverhalten dieser Schleifenkonstruktion (bin nicht sicher, welche bash-Komponente da wirklich betroffen ist, oder wie diese zu benennen wäre) konkret definiert?

Die Schleife sortiert nicht, sondern setzt für die Variable (hier archiv) die Werte in der übergebenen Reihenfolge ein. Interessant ist also die Reihenfolge, in der von der Shell die Namen für das Sternchen ersetzt werden.

Letztendlich musst du für einen 100%-igen Beweis also den Quellcode deiner Shell (dürfte die Bash sein) studieren. Ganz sicher kannst du dir aber auch dann nur sein, wenn du diesen Quellcode anschließend selber kompilierst 😉. Es kann also vor allem bei einem Wechsel der Shell zu Änderungen kommen.

Ob die Reihenfolge irgendwo standardisiert oder festgeschrieben ist, weiß ich leider nicht.

Viele Grüße

Vej

Antworten |