MiniPC Umstellung von Windows auf Linux - Fragen bezüglich Backup

[swsmily]

Hallo,

Ich habe einen Mini PC (Asus VivoPC / Mini-PC VC60-B013M). Auf diesem läuft momentan Windows 10.
Ich nutze ihn aktuell fast nur noch als Datenspeicher, früher für Kodi (aber unterdessen extrem selten).
Da Windows immer wieder automatisch neustartet durch Updates usw, es einfach sehr langsam ist, hab ich die Überlegung statt Windows zukünftig Debian darauf laufen zu lassen.

Was läuft momentan drauf?
Ich habe aktuell eine externe HDD dran, auf die unsere Handys in der Nacht Bilder/Videos sichern (via FolderSync-App).
In Windows läuft SyncBackFree, was einmal wöchentlich die Sicherungen der Handys auf unser NAS synchronisiert (NAS wird per WOL gestartet, nach Sicherung per Skript wieder runtergefahren).
Zusätzlich läuft Acronis, welches an einem anderen Tag einmal wöchentlich ein inkrementelles Backup der internen Festplatte auf das NAS sichert (ebenso mit WOL und Skript zum runterfahren).

Mein Ziel:
Statt Windows möchte ich Debian laufen lassen.
Ich bin aber nicht fündig geworden, ob es sowas wie SyncBackFree auch für Linux gibt, damit regelmäßig die Bilder/Videos aufs NAS gesichert werden. Was ich dazu gefunden habe, es soll wohl über RSYNC funktionieren. Ich vermute, ich müsste ein Script schreiben, welches das NAS startet, wenn es erreichbar ist, dann mit RSYNC die Dateien sychronisiert (aber nicht überschreibt), danach NAS runterfährt. Ist das so mit RSYNC möglich, dass nur neue Dateien hochgeladen werden, vorhandene aber nicht gelöscht (selbst wenn auf Quelle gelöscht), und nicht überschrieben werden?

Gibt es sowas wie Acronis für Debian, also so dass inkrementelle Backups erstellt werden, für den Fall, dass die interne Festplatte mal kaputt geht? Und wenn ja - wie stellt man es auf einer neuen Festplatte wieder her?

Zusammenfassung:

Externe HDD - Foto/Video Sicherung der Handys - neue Dateien kommen aufs NAS, vorhandene werden nicht überschrieben.
Interne HDD - System, soll inkrementell auf NAS gesichert werden; im Fall des Falles schnell auf eine neue HDD wiederherstellbar sein

Wie setzt man sowas mit Linux/Debian um?

[isy]

Moin,
also mit rsync kannst du dein Backup umsetzen. Ich würde die Zeitsteuerung (crontab) zu dem Zeitpunkt einrichten, wenn deinen Nas Online ist.

Zugriff auf deine Nas mit FTP oder Windows CIFS sollte beides gehen.

Für den Backup der Handys fällt mir im Moment nur ein Script ein, welches prüft, ob Handys per USB angeschlossen sind und dann die Kopie der Dateien per rsync startet.

Ein Image Tool wie Acronis kenne ich nicht, der Terminal Befehl "dd" erzeugt ein Image, wie mit Acronis, aber der Datenträger darf nicht gemountet sein. Also kein Online Backup, wie mit Acronis.

Viel Spaß,
Helmut

[kadettilac89]

Nur für fhem ist die Hardware schon etwas oversized. Wenn du etwas Zeit und Lust am Basteln mitbringst, kann du dir auch Proxmox ansehen. Auf den Pc installieren, Fhem und was ggf. noch dazu kommt in einen Docker Container werfen.

Mein Setup:
Proxmox mit Container für Fhem, Owncloud, ...
Stündliche Snapshot auf eine zweite Backupplatte. Wochenende Per Script auf NAS.

Ist zwar etwas mehr Zeit beim Aufsetzen. Aber wenn es läuft musst du es nicht mehr anfassen.

Ich weiß, dass die Anforderung etwas anders war. Aber manchmal hat man zu Beginn ggf. gute Lösungen nicht auf dem Schirm weil man es einfach nicht weiß.

Wenn du Interesse hast, kannst du dir Proxmox auch auf einem Rechner in einer VM, z. B. VMWare Player installieren und mal ansehen ohne dass du das bestehende Setup anfasst. Mit VM kannst du auch dein ursprünglich angedachtes Setup testen und durchspielen.

Das Sichern deiner Handy will ich nicht schlecht reden, aber hast du so wichtige Daten drauf dass die täglich gesichert werden müssen? Ich nutze auch Foldersync aber gehe direkt einmal in der Woche auf mein NAS. Würde Komplexität raus nehmen.

[swsmily]

Vielen Dank für eure Antworten.

Erstmal was die Handys betrifft. Foldersync sichert da nur die Fotos und Videos. Immer dann, wenn das Handy in unserem WLAN ist und geladen wird. Das habe ich vor paar Jahren eingerichtet, nachdem in einem alten Handy eine SD Karte kaputt gegangen war und zum Glück seit dem letzten manuellen sichern damals nur ca 3 Fotos verloren gingen.
Das Risiko wollte ich nicht mehr eingehen, daher die regelmäßige automatische Sicherung. Das wird aktuell bereits auf eine externe HDD an dem Mini-PC gemacht, der noch mit Windows läuft. Foldersync nutzt dazu einfach eine SMB-Freigabe. Das wäre auf Debian ja ebenso möglich einzurichten.

Mein Ziel ist nur, Windows von dem Mini-PC zu entfernen und Linux zu verwenden, da Windows auf dem PC einfach nur extrem langsam ist. Aber natürlich weiterhin mit automatischer Sicherung der Daten (Fotos, Dokumente usw.) aufs NAS, aber auch das System selbst sollte am besten regelmäßig automatisiert gesichert werden. Aktuell übernimmt das Sichern vom Betriebssytem und dessen Daten Acronis, was im laufenden Betrieb inkrementelle Backups erstellt.

Mit Rsync scheint es möglich zu sein, dass nur neue Dateien, die auf der "Foto"-Festplatte liegen gesichert werden.
DD nutze ich beim Raspi um das System zu sichern, auch im laufenden Betrieb, Restore hat bereits einmal erfolgreich funktioniert. Jedoch erstellt das eben immer ein komplettes Backup, was unnötig viel Speicher verbraucht. Inkrementell würden ja nur die Änderungen am System gesichert.


FHEM hat mit dem Mini-PC nichts weiter zu tun, das läuft bereits auf einem Raspi.

Danke für den Hinweis mit Proxmox. Das schaue ich mir mal an. Hatte in einer VM mal Docker probiert, bin komplett dran gescheitert 
Aktuell teste ich in einer VM auf meinem Laptop Debian mit Nextcloud. Das soll dann auch auf den Mini-PC drauf.
Die Snapshots werden dann von den einzelnen Container gemacht? Werden die durch Proxmox erstellt, oder wie erstellst du diese?

Ich würde die Zeitsteuerung (crontab) zu dem Zeitpunkt einrichten, wenn deinen Nas Online ist.

Über crontab würde ich auch ein Skript starten, was erstmal ein WOL-Paket ans NAS sendet, 5 Minuten warten, bis es hochgefahren ist, danach das Backup durchführt und am Ende per Telnet aufs NAS verbindet und den shutdown-Befehl sendet.

Nur für fhem ist die Hardware schon etwas oversized.

Klar, der Mini-PC ist für diese wenigen Aufgaben definitiv too much. Ursprünglich wollte ich ihn auch mal durch einen Raspi ersetzen. Aber die sind momentan einfach so extrem teuer geworden, da nutze ich lieber vorhandene Hardware, auch wenn die sich viel langweilen wird.



Werde weiterhin erstmal alles nur in einer VM Testen, bis ich eine Lösung so gefunden habe, die mir wirklich gefällt. Erst dann werde ich irgendwann Windows von dem Mini-PC werfen. Bin aber dennoch für jeden Hinweis dankbar.

TOLLES FORUM!

[kadettilac89]

Die Snapshots werden dann von den einzelnen Container gemacht? Werden die durch Proxmox erstellt, oder wie erstellst du diese?

Proxmox ist die Virtualisierungsplattform -> Darauf läuft ein LXC-Container (Debian) -> Da drin läuft Docker mit den Containern
In Proxmox sind NAS-Verzeichnisse mit als BAckup-Destination eingehängt

Backup-Solution / Failover
PC mit Windows -> VM-Workstation mit VM in der Proxmox läuft -> In Proxmox LXC-Container (identisch zu oben) ...

Snapshot ist eigentlich falsche Bezeichnung. Es wird ein stündliches Backup des LXC auf die zweite Platte gemacht. Da das ganze in einem LXC läuft ist das BAckup nur ca. 1 GB groß. Da sind alle Container mit Daten und das Betriebssystem drin. Docker Images, Logs, ... alles ausgenommen da unwichtig. Da brauch ich mich nicht um einzelne Docker-Container kümmern. Historisch bedingt, vom Raspberry, habe ich auch noch BAckupscripte für Fhem, MySQL, Influx ... und andere Container. Aber eigentlich unnötig.

DAs ganze Backup der VM/LXC ist in Proxmox als Funktion enthalten. Du kannst auch NAS mounten. Ich habe mein NAS unter der Woche aus, da ich unterwegs bin. NAS startet sobald ich heim komme. Wochenende macht Proxmox "großes" BAckup auf NAS, mit allen Containern und VM, und der eigenen Proxmox-Konfiguration.

Ich nutze Docker weil ich mehrere Funktionen einfach implementieren will. Du könntest Fhem auch in LXC installieren ohne Docker. Backup in Proxmox weiß nichts von "innen" liegenden Docker.

Danke für den Hinweis mit Proxmox. Das schaue ich mir mal an. Hatte in einer VM mal Docker probiert, bin komplett dran gescheitert 

Proxmox hat sehr gutes, deutschsprachiges Forum, hier ist auch Threads zu Proxmox. Wenn du konkrete Fehlermeldungen oder Fragen hast auch hier.

[CoolTux]

Ich selbst habe Proxmox auf einem Hetzner Server. Darauf dann LXC Container mit Nextcloud wo ich meine Handys syncen lasse. Fotos, Kalender, Kontakte und mehr. Zusätzlich zum Handy Sync habe ich in der Nextcloud generell noch alle meine Daten liegen.

Du kannst auch die Nextcloud Daten sichern über rsync auf den Host (Proxmox) oder gleich auf eine externe Festplatte oder ein NAS im Netz.
Hilfreich sind auf jeden Fall rudimentäre Linux Kenntnisse

[swsmily]

Mit Proxmox und LXC-Containern werde ich mich auf jedenfall weiter beschäftigen. Vermutlich ist das die einfachste Möglichkeit regelmäßig Backups der Container zu erstellen. Am Host-System ändert man ja in der Regel dann wenig und falls doch, kann man davon auch mal ein Offline-Backup ziehen.
Ich hab Proxmox gestern Abend in einer VM auf meinem Notebook installiert. Erst auf einer frisch installierten Debian, da bin ich aber schon bei der Installation gescheitert. Hab dann aber gesehen, dass es eine ISO gibt, mit der man direkt Proxmox installieren kann.
Nach unendlichen Versuchen hab ich dann da auch einen Container erstellt bekommen. Dann war es aber schon 1 Uhr nachts und hab aufgegeben. 

Ich bleibe aber dran.
Ein paar Linuxkenntnisse sind da und die Lernkurve ist steil.

Ich spiele auf jedenfall weiter in der VM auf meinem Notebook und wenn ich das alles ordentlich hinbekomme, so wie ich es mir vorstelle, dann wird auch der MiniPC irgendwann angefasst.

Ich danke euch für eure Hinweise!

[Wernieman]

- Wegen Sync von Handy (Oder anderen Geräten): Schaue dir mal "syncthing" an
- Wegen Backup mit rsync: Es gibt gute Programme, die genau das erledigen, was Du beschreibst. Das es in Wirklichkeit aufsätze von rsync sind, ist dabei nur am Rande Wichtig. Spontan fällt mir ein: dirvish, rsnapshot .. es giebt aber deutlich mehr.

[swsmily]

Vielen Dank für die Hinweise zu den ganzen Programmen.
Auf den Handsy werde ich weiterhin FolderSync nutzen, da ich damit sehr zufrieden bin. Das unterstützt unterschiedlichste Protokolle (SMB, S/FTP, SCP, Nextcloud usw.).

dirvish und rsnapshot werde ich mir auch mal mit anschauen.

Ich bin immer wieder von der Community hier im FHEM-Forum begeistert!

[Wernieman]

Erst beim 2. mal lesen aufgefallen

DD nutze ich beim Raspi um das System zu sichern, auch im laufenden Betrieb, Restore hat bereits einmal erfolgreich funktioniert.

Eine Sichrung per DD kann funktionieren, muß es aber nicht. Stichwort: Offene Dateien.

Linux als Unix ist da etwas empfindlicher als Windows. Unter Windows werden Filezugrife gecacht, unter Linux wird in den Cache geschrieben und dann auf die Festplatte (HDD,SDD oder Netzwerk) gebracht. Hört sich jetzt erstmal als akademischer Unterschied an, ist aber fundamentaler. Offene Dateien können deshalb immer "korrupt" sein. Deshalb sehe ich DD als problematisch. Es kann funktionieren, muß aber nicht. Und gerade wenn man Problem hat und ein Restore dingend braucht, wird es nicht klappen, "Murphy lässt grüßen". Ich weiß, das ich höchstwahrscheinlich trotzdem aus dem Image die benötigten Infos rausbekomme, aber würdest Du es kriegen? *)

Da ich persönlich c.a. 1h zum kompletten Neuaufsetzen des Systems brauche, ist mein Backup "nur" /etc (für die Konfig) und "Anwenderdaten" wie mysql, fhem etc.

Anmerkungen:
*) Dieses ist bitte nicht persönlich zu nehmen, also keine Kritik an Deinen Fähigkeiten.

[swsmily]

Erst beim 2. mal lesen aufgefallen

Eine Sichrung per DD kann funktionieren, muß es aber nicht. Stichwort: Offene Dateien.

Linux als Unix ist da etwas empfindlicher als Windows. Unter Windows werden Filezugrife gecacht, unter Linux wird in den Cache geschrieben und dann auf die Festplatte (HDD,SDD oder Netzwerk) gebracht. Hört sich jetzt erstmal als akademischer Unterschied an, ist aber fundamentaler. Offene Dateien können deshalb immer "korrupt" sein. Deshalb sehe ich DD als problematisch. Es kann funktionieren, muß aber nicht. Und gerade wenn man Problem hat und ein Restore dingend braucht, wird es nicht klappen, "Murphy lässt grüßen". Ich weiß, das ich höchstwahrscheinlich trotzdem aus dem Image die benötigten Infos rausbekomme, aber würdest Du es kriegen? *)

Da ich persönlich c.a. 1h zum kompletten Neuaufsetzen des Systems brauche, ist mein Backup "nur" /etc (für die Konfig) und "Anwenderdaten" wie mysql, fhem etc.

Anmerkungen:
*) Dieses ist bitte nicht persönlich zu nehmen, also keine Kritik an Deinen Fähigkeiten.

Keine Sorge, ich nehme das nicht persönlich, weiß auch nicht, ob ich im Falle des Falles wirklich wieder an alles ran komme.  und solche Hinweise sind immer auch hilfreich, aber schon bekannt 

Mit einem Raspi und FHEM hab ich 2016 das erste Mal mit Linux richtig angefangen. Es ist natürlich deutlich komplizierter als Windows, aber umso mehr man damit spielt, umso mehr lernt man - unter anderem auch aus Fehlern.


Nach größeren Änderungen habe ich daher auch ein Offline-Backup der SD-Karte des Raspi gemacht, in unregelmäßigen Abständen, wird auch immer mal eins erstellt, was ich direkt auf eine zweite SD Karte schreibe, die neben dem Raspi liegt. Weitere kleinere Änderungen habe ich auch dokumentiert. Sollte also tatsächlich ein Online-Backup mit DD sich nicht wiederherstellen lassen, kann ich immernoch ein Älteres nutzen und ggf. die weiteren Änderungen händisch nachpflegen.

Fhem (wo immer mal wieder Änderungen gemacht werden, Logfiles, Smartvisu) sichere ich mit folgendem Befehl:

Code Auswählen Erweitern

tar -cf - "/opt/fhem" "/var/www/html/smartvisu" |gzip > /home/pi/shares/backup/FHEM-`date +"%Y-%m-%d_%H-%M"`_inc_SmartVi
su.tar.gz

/home/pi/shares ist momentan eine SMB Freigabe auf dem MiniPC um den es mir in diesem Thread geht 

Wie würde am einfachsten ein Offline-Backup einer echten Festplatte/SSD funktionieren? Beim Raspi ist es ja kein Problem, SD raus, ins Notebook rein, mit Win32Diskimager sichern. Aber eine Festplatte?

Momentan hab ich mir mehrere VMs mit VMware auf meinem Notebook eingerichtet, in denen ich unterschiedliche Sachen teste.
Backupmöglichkeiten, Nextcloud, Proxmox usw.

und bis ich wirklich sicher bin, was mir am Besten gefällt, bleibt der MiniPC noch mit Win10.


Ich bin euch allen auf jeden Fall sehr Dankbar für die ganzen Hinweise, viel Input, viel zu testen 

[DetlefR]

Hallo,

wenn du schon fleißig am virtualisieren bist, dann nützt es doch auch. Installiere auf dem MiniPC einen VM Host deiner Wahl Vmware/Proxmox ..
Die darauf befindliche VM kurz ausschalten, Snapshot erstellen, wieder einschalten und dann kannst du in Ruhe das Image sichern. Die meisten VM Systeme haben Möglichkeiten, dass man solch ein Image auch inkrementell sichern kann. Die ganze Platte brauchst du nicht sichern. Wenn sie wirklich mal defekt ist, installierst du den VM Host neu und restaurierst die VM.

[Wernieman]

Linux richtig angefangen. Es ist natürlich deutlich komplizierter als Windows

Das liegt daran, das Du es nicht kennst. Ich persönlich sehe es nämlich genau anders herum .... 

[MadMax-FHEM]

Das liegt daran, das Du es nicht kennst. Ich persönlich sehe es nämlich genau anders herum .... 

...nicht benutzt

Ich habe mir "früher" Linux auch immer nur "angeschaut"...
...und dachte auch: oioioi...

Jetzt wo ich (privat) (nur noch) Linux nutze stimme ich Wernieman zu.
Ich finde es immer "übel", wenn ich bei meiner Freundin oder in der Arbeit mit Windows rumtun muss

Gruß, Joachim

[swsmily]

wenn du schon fleißig am virtualisieren bist, dann nützt es doch auch. Installiere auf dem MiniPC einen VM Host deiner Wahl Vmware/Proxmox ..

Soweit bin ich mit Testen und Spielen noch nicht um wirklich den MiniPC anzufassen. Daher erstmal weiter am Windows-Notebook in VMware alles mögliche testen, Fehler machen, draus lernen usw - bis ich dann soweit sicher bin, wirklich den MiniPC anzufassen.

Das liegt daran, das Du es nicht kennst. Ich persönlich sehe es nämlich genau anders herum .... 

Naja, ich sag mal so, einen USB-Stick oder USB-Festplatte erkennt Windows direkt automatisch. Meine ersten Tests mit Nextcloud hab ich mit einem USB-Stick am Raspi versucht - das hat viel einlesen bedeutet, bis ich endlich auf den USB-Stick überhaupt zugreifen konnte 

Aber der Wille und Reiz ist auf jeden Fall da Linux besser kennenzulernen.