staging.inyokaproject.org

Backup als Notfallsystem: 3 Probleme

Status: Gelöst | Ubuntu-Version: Ubuntu 12.04 (Precise Pangolin)
Antworten |

datenninja

Avatar von datenninja

Anmeldungsdatum:
17. Januar 2010

Beiträge: 149

Hallo,

bevor ich meine Schwierigkeiten schildern kann, muß ich etwas über meine Konfiguration voranstellen:

Ubuntu Precise startet von einer SSD. Diese ist schon lange im Einsatz und ich möchte gegen einen Ausfall derselben geschützt sein. Deswegen sichere ich nicht nur diese 12 GB häufig auf eine normale Festplatte (ein Filesystem in einem ZFS raidz Pool, um genau zu sein, aber das tut hier nichts zur Sache), sondern mache auch wöchentliche Rücksicherungen auf eine Partition einer anderen Platte und teste deren Boot-Fähigkeit als Notsystem. Damit stelle ich sicher, daß ein Ausfall der SSD nicht so dramatisch wäre, und außerdem kann ich so sicher sein, daß ich in jedem Fall Zugriff auf den ZFS Speicherpool bekommen kann.

Zusätzlicher Nutzen: Vor riskanten Konfiguationsänderungen kann ich dieses (etwas langsamere) Notsystem für Experimente hernehmen.

Die Sicherung führe ich per bash-Script durch, im Wesenlichen per rsync. Bei der "Rücksicherung" in die Notfall-Partition allerdings habe ich regelmäßig Probleme, für die ich (auch nach Monaten) noch keine Lösung habe finden können. Offenbar verstehe ich da etwas nicht richtig und benutze deshalb Befehle falsch? Ach so - noch etwas: Die Dinge, die nach der Rücksicherung noch geändert werden müssen, sind fstab und grub.cfg (soweit ich das verstehe). Ich bediene mich dafür folgendes Tricks: In der fstab sind Kommentare enthalten, die eine automatische Anpassung an das Notsystem per awk erlauben. Und grub.cfg MÖCHTE ich per sudo update-grub in einer chroot-Umgebung generieren lassen, was bislang nicht richtig funktioniert (Problem 1).

  • Die von sudo update-grub erzeugte grub.cfg stimmt nicht nach meinem Script. Statt dessen muß ich manuell REAL in das Notfallsystem booten und DORT sudo update-grub ausführen. Sonst werden aus Gründen, die ich nicht kenne, falsche Festplattenpartitionen-Verweise generiert.

  • Als zusätzliche Sicherheit habe ich ein Script zu grub.d hinzugefügt, das mit den behelfsmäßigen Start von einem ISO-Image erlaubt. Dieses funktioniert aber nur, wenn ich mich im Originalsystem befinde, nicht aus dem Notfallsystem.

  • Schließlich gibt es in dem weitestgehend binär-kompatiblem Notfallsystem wunderliche Effekte wie: jockey-gtk und flashplugin-installer wollen ein eigentlich aktuelles System nochmal aktualisieren.

Zum ersten Problem: Ich verwende das folgende Script zum Rücksichern:

  1
  2
  3
  4
  5
  6
  7
  8
  9
 10
 11
 12
 13
 14
 15
 16
 17
 18
 19
 20
 21
 22
 23
 24
 25
 26
 27
 28
 29
 30
 31
 32
 33
 34
 35
 36
 37
 38
 39
 40
 41
 42
 43
 44
 45
 46
 47
 48
 49
 50
 51
 52
 53
 54
 55
 56
 57
 58
 59
 60
 61
 62
 63
 64
 65
 66
 67
 68
 69
 70
 71
 72
 73
 74
 75
 76
 77
 78
 79
 80
 81
 82
 83
 84
 85
 86
 87
 88
 89
 90
 91
 92
 93
 94
 95
 96
 97
 98
 99
100
101
102
103
104
#!/bin/bash
#
# Kopieren eines funktionsfähigen Systems von /mnt/data/backup/precise (ursprünglich sda4) nach sdb2
# fehlende Abbruchsfunktion (trap mit $UNDO)
# irgendwas verstehe ich noch nicht, denn zu oft ist anschließend das Booten verstellt
#
set -e

FROM=/mnt/data/backup/precise
# TO=/dev/sdb2 # auf diverse Weise hardcoded

assert() {
# 3 Argumente:
# - Programm zum Erhalten eines Prüfwertes
# - erwarteter Wert
# - Fehlermeldung beim Scheitern
	if [[ `eval $1` != "$2" ]]
	then
		shift 2
		echo $*
		echo Ausführung abgebrochen
		exit 1
	fi
}

# Sicherheitschecks:
# startet dies von sda4?
assert "grub-probe -t device /" /dev/sda4 "befinden uns nicht in der erwarteten Umgebung (sda4)"

# ist sdb2 noch SOS-Precise?
assert "sgdisk -i 2 /dev/sdb | awk '\$2 ~ /name/ { print \$3;}'" "'SOS-Precise'" \
	veränderte Partition /dev/sdb2 entdeckt

# ist sda4 noch Precise?
assert "blkid -l -t LABEL=Precise /dev/sda4 | wc -l" 1 veränderte Partition /dev/sda4 entdeckt

# Befehle benötigen sudo
assert whoami root Dieses Script erfordert sudo

# ist sdb2 rw gemountet?
mtab=`mount | awk '/sdb2/ { print \$3, substr(\$6,2,2); }'`
UNDO=""
if [[ -z "$mtab" ]]
then
	echo Warnung: mußte sdb2 selber mounten!
	mount -rw /dev/sdb2 && UNDO="umount -l /dev/sdb2"
elif [[ ${mtab: -1} = "o" ]]
then
	echo Warnung: mußte sdb2 selber auf rw remounten!
	mount -o remount,rw /dev/sdb2 && UNDO="mount -o remount,ro /dev/sdb2"
fi
assert "mount | awk '/sdb2/ { print \$3, substr(\$6,2,2); }'" "/mnt/SOS-Precise rw" sdb2 nicht richtig gemountet

if [[ $# -eq 0 ]] # nur ausführen, wenn keine Argumente (etwa: --test) übergeben wurden
then
	rsync -av -H --delete $FROM/ /mnt/SOS-Precise/
	if [ $? != 0 ]
	then
		echo rsync hatte Fehler.
		echo Ausführung abgebrochen
		exit 1
	fi

	# fstab des Notsystems automatisch anpassen (durch die manuelle Vorgabe)
	awk 'BEGIN { skip = 0; } $0 !~ /^###/ { if ( $0 ~ "^#\*" ) { if ( $0 == "#**" ) skip = 1;else print substr($0,3); } else if ( skip == 0 ) print $0; else skip = 0; }' $FROM/etc/fstab > /mnt/SOS-Precise/etc/fstab

	# Mountpoint auch ändern
	mv /mnt/SOS-Precise/mnt/SOS-Precise /mnt/SOS-Precise/mnt/Precise
fi

# chroot

# wegen des Fehlers in os-prober nutze ich nichts von alledem:	
cat <<- EOF | mychroot /mnt/SOS-Precise
# Empfehlung von https://help.ubuntu.com/community/Lubuntu/Documentation/RemoveOldKernels/Problems:
dpkg-divert --local --rename --add /sbin/init
ln -s /bin/true /sbin/init
echo Test-Ausgabe von os-prober: ; os-prober ; echo
update-grub # Dies findet immer noch nicht die sda4-Partition (Precise)
update-initramfs -c -k all
		grub-install --recheck /dev/sdb # Sicherheitshalber
		echo gleich kommt das Ende von chroot
		
# Empfehlung von https://help.ubuntu.com/community/Lubuntu/Documentation/RemoveOldKernels/Problems:
unlink /sbin/init
dpkg-divert --rename --remove /sbin/init
exit
EOF
	
# Workaround, weil ichs nicht besser verstehe:
echo Sicherheitshalber wird auch für diese Partition nochmal alles hergestellt:
update-grub
	
# und vorübergehend wird DIESE grub.cfg verwendet:
if [[ `grep -c -m 1 "menuentry.*(on /dev/sda4" /mnt/SOS-Precise/boot/grub/grub.cfg` = 0 ]]
then
	cp /boot/grub/grub.cfg /mnt/SOS-Precise/boot/grub # hier ist schon wieder ein Problem
fi
update-initramfs -c -k all
grub-install --recheck /dev/sda # Dies ist das Aus für Bootit

eval "$UNDO"
echo '*** Alles erledigt. ***'
exit 0

Zum 2. Problem: Hier das script aus grub.d:

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
#!/bin/sh
set -e
# (hd0,msdos1)
export GRUB_LOOPBACK_ISO_FILE="/mnt/pointer.iso"
echo "Adding Live CD entry" >&2
echo "füge hinzu: Mein ISO-Experiment" >&2

 cat << EOF
### Dies kommt aus meinem Script:
menuentry 'Mein ISO-Experiment - ISO' {
insmod part_msdos
insmod part_gpt
insmod ext2
search -n -f --set=root ${GRUB_LOOPBACK_ISO_FILE}
    loopback loop ${GRUB_LOOPBACK_ISO_FILE}
    linux (loop)/casper/vmlinuz boot=casper iso-scan/filename=${GRUB_LOOPBACK_ISO_FILE} \
        ${GRUB_CMDLINE_LINUX_DEFAULT} ${GRUB_CMDLINE_LINUX} --
    initrd (loop)/casper/initrd.lz
}
#### Das wars.
EOF

Wahrscheinlich ist hier relevant, daß auf der SSD ein normaler MBR liegt (part_msdos), während die Notfallpartition ein GPT Label trägt (part-gpt).

Kann mir hierzu jemand Hinweise dazu geben, wie das Restore mit weniger manuellen Eingriffen zu realisieren sei?

datenninja

(Themenstarter)
Avatar von datenninja

Anmeldungsdatum:
17. Januar 2010

Beiträge: 149

datenninja schrieb:

  • Als zusätzliche Sicherheit habe ich ein Script zu grub.d hinzugefügt, das mit den behelfsmäßigen Start von einem ISO-Image erlaubt. Dieses funktioniert aber nur, wenn ich mich im Originalsystem befinde, nicht aus dem Notfallsystem.

Ok. Bei DIESEM Problem machte ich zumindest Teilfortschritte:

  • Grub gibt es inzwischen in der Version 2.00, allerdings fand ich die nur bei Raring, (noch) nicht bei Precise. Die Dokumentation (im Netz) ist größtenteils nicht aktuell. Deswegen konnte ich auch nicht ALLE seltsamen Effekte dieser Baustelle ausmerzen. Aber mein unmittelbares Ziel ist mehr als erfüllt, insofern ich nun ein automatisches Script habe, das sogar gleich mehrere ISO's vom Grub-Menü aus startbar macht.

  • Eine unnötige Schwierigkeit (bei mir) bestand darin, daß ich (ähnlich der ehemaligen Links vmlinuz und initrd) einen "pointer.iso" Hardlink auf die ISO benutzte, der in beiden Sytemen naturgemäß gleich lautete. Das brachte das grub search Kommando in Schwierigkeiten. Inzwischen ist mein Script flexibler und findet die ISO's selbst. Damit gelingt der Notfallstart von einem CD-Abbild.

  • Weitere Forschungen stehen noch aus, insbesondere, da ich herausfinden möchte, ob ich grub2.00 über Umwege nicht doch unter Precise einsetzen könnte, weil ich ja ohnehin ZFS-Nutzer bin und DIESES grub ZFS lesen kann.

Tja - so ergeht es mir tagaus, tagein: gaanz langsam gerate ich immer tiefer in die Materie... Einige Probleme lösen sich dabei, andere tauchen neu auf oder verbleiben einstweilen...

datenninja

(Themenstarter)
Avatar von datenninja

Anmeldungsdatum:
17. Januar 2010

Beiträge: 149

datenninja schrieb: Und grub.cfg MÖCHTE ich per sudo update-grub in einer chroot-Umgebung generieren lassen, was bislang nicht richtig funktioniert (Problem 1).

  • Die von sudo update-grub erzeugte grub.cfg stimmt nicht nach meinem Script. Statt dessen muß ich manuell REAL in das Notfallsystem booten und DORT sudo update-grub ausführen. Sonst werden aus Gründen, die ich nicht kenne, falsche Festplattenpartitionen-Verweise generiert.

Aha! Weitere Studien und Experimente zeigten mir:

  • Ich bin NICHT der Einzige, dem das NICHT-Funktionieren von os-prober im chroot auffiel. Eine zwingende Folge davon: update-grub erzeugt KEINE Einträge für die anderen Betriebssysteme, egal, was man wie mountet!

  • beim sorgfältigen Vergleich zwischen chroot und normaler Umgebung kam heraus, daß /etc/mtab und proc/mounts im chroot die Werte aus dem Ursprungssystem enthalten. Daher KANN os-prober gar nicht erfolgreich sein und somit fand ich heraus, daß mein Wunsch nach einer "vollständigeren" /boot/grub.cfg wohl korrekterweise das Booten in das Notfallsystem (und DORT sudo updategrub) erfordert.

Ende Gelände.

Mal sehen... eines Tages finde ich womöglich auch noch selbst heraus, was die Ursache von Problem #3 ist. Das nennt man dann "Learning - the hard way". 😉

datenninja

(Themenstarter)
Avatar von datenninja

Anmeldungsdatum:
17. Januar 2010

Beiträge: 149

datenninja schrieb:

Tja - so ergeht es mir tagaus, tagein: gaanz langsam gerate ich immer tiefer in die Materie... Einige Probleme lösen sich dabei, andere tauchen neu auf oder verbleiben einstweilen...

Ha, noch etwas zum Thema ISO's booten mit Grub2: Eben habe ich mir die Scripts angesehen, die das Paket grml-rescueboot erzeugen kann. - Und bin ganz happy über meine eigenen Fortschritte. Denn was die da machen ist aus meiner Sicht unelastisch und primitiv, kaum geeignet um eine Vielzahl von ISO's richtig zu booten.

Aber für diejenigen, die nicht die Zeit haben, sich in Grub2 so richtig einzulesen, mag der Hinweis auf diese Alternative willkommen sein: Das Paket erfordert nur, daß die ISO's in einem speziellen Verzeichnis liegen, dann erzeugt es automatisch dazugehörige Bootmenü-Einträge. Kann ja hilfreich sein - solange man nur eine der unterstützten ISO's verwenden will...

datenninja

(Themenstarter)
Avatar von datenninja

Anmeldungsdatum:
17. Januar 2010

Beiträge: 149

Das gleiche - alte - Problem: Meine Kommunikation bleibt auf weiter Flur isoliert, so daß ich nur vermuten/befürchten kann:

  • Man KANN mir nicht helfen... Ob das nun an mir liegen mag oder am Teilnehmerfeld dieses Forums lasse ich mal dahin gestellt sein.

  • Man will mir nicht helfen... Es soll ja vorkommen, daß Kommunikation einen (negativen) ANDEREN Effekt hat, als der vom Absender intendierte. Also störe ich womöglich die Verständigung, nach der ich eigentlich suche (ohne dabei zu bemerken, wie/wodurch das geschieht)...

Das Ergebnis bleibt sich gleich: Mein Wunsch nach Austausch unter Gleichen erfüllt sich nicht. Und die Motivation, eigene Erfahrungen zu teilen/weiter zu geben muß sich andere Orte suchen... ☹

datenninja

(Themenstarter)
Avatar von datenninja

Anmeldungsdatum:
17. Januar 2010

Beiträge: 149

Zum Abschluß vielleicht dies noch: Ein Problem, das beim Booten von auf dem Rechner liegenden Ubuntu-ISO's besteht, ist, daß diese dann in der Regel mit englischer Tastatur/Spracheinstellung starten. Durch Stunden langes (erfolgloses) Suchen per Suchmaschine nach vernünftiger Dokumentation kam ich schließlich dazu, auf "wildes Ausprobieren" umzusteigen. Und dadurch fand ich eine Möglichkeit, die ISO's DIREKT auf Deutsch zu starten, von der VIELLEICHT einmal jemand profitieren könnte (oder die jemand ins Wiki übernehmen möchte):

Meine grub.cfg sieht zum Schluß so aus (Ausschnitt):

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
### BEGIN /etc/grub.d/11_first-iso ###
### Dies kommt aus meinem Script:
submenu "ISO-Dateien" {
menuentry "ubuntu-12.04.2-desktop-amd64.iso von Precise" --class ubuntu --class gnu-linux --class gnu --class os {
	insmod part_msdos
	insmod ext2
	search -n -l --set=root Precise
	set isofile=/mnt/ubuntu-12.04.2-desktop-amd64.iso
	loopback loop ($root)$isofile
	linux (loop)/casper/vmlinuz.efi boot=casper iso-scan/filename=$isofile noprompt noeject toram locale=de_DE.UTF-8 setkmap=de console-setup/layoutcode=de --
	initrd (loop)/casper/initrd.lz
}
menuentry "ubuntu-12.04.2-desktop-amd64.SOS.iso von SOS-Precise" --class ubuntu --class gnu-linux --class gnu --class os {
	insmod part_gpt
	insmod ext2
	search -n -l --set=root SOS-Precise
	set isofile=/mnt/ubuntu-12.04.2-desktop-amd64.SOS.iso
	loopback loop ($root)$isofile
	linux (loop)/casper/vmlinuz.efi boot=casper iso-scan/filename=$isofile noprompt noeject toram locale=de_DE.UTF-8 setkmap=de console-setup/layoutcode=de --
	initrd (loop)/casper/initrd.lz
}
}
#### Das wars.
### END /etc/grub.d/11_first-iso ###

Bemerkenswert finde ich:

  • daß es für Ubuntu-ISOs funktioniert

  • daß ich danach nicht mehr weiter experimentiert habe (und deswegen nicht sagen kann, welche Teile erforderlich/überflüssig sind

  • daß ich keine bessere Lösung dafür fand, exakt identisch bezeichnete ISO's aus 2 unterschiedlichen Partitionen zu booten, als sie umzubenennen

  • daß, um diese Zeilen erzeugen zu können, ein einziges Script (in einer Schleife) die passenden Einträge automatisch erzeugt

  • wobei, um das $-Zeichen in das finale grub.cfg zu bringen, es im Script natürlich als "\$" geschrieben werden muß

Antworten |