Dagelijkse backup van Domoticz naar een externe harddisk
Zodra je Domoticz heb geïnstalleerd wil je natuurlijk ook backups kunnen maken. Een dagelijkse backup van Domoticz maken kan eenvoudig via de ingebouwde functie. Deze backup wordt ieder uur, dag en maand automatisch weggeschreven naar de folder /home/pi/domoticz/backups/. Je hoeft hiervoor alleen maar Enable Automatic Backup aan te vinken. Echter, indien de geheugenkaart van de Raspberry Pi crasht kun je deze backups niet meer gebruiken en ben je alsnog het spreekwoordelijke haasje. In dit artikel gaan we in op verschillende backup scripts, allemaal met een eigen functie.
Benodigdheden
Voorbereiding
Zoek op je Network Attached Storage (NAS) of externe harddisk een folder waar je de backup van Domoticz wilt gaan opslaan. Zorg ervoor dat FTP ingeschakeld is en dat je de inloggegevens bij de hand hebt. Stel in Domoticz een gebruikersnaam en wachtwoord in (website protection) en stel Local Networks (no username/password) in.
Plaats het script in /home/pi/domoticz/scripts en pas de parameters naar eigen gebruik aan.
Script voor backup van Domoticz database naar een FTP-server
Dit script backupt een kopie van je ‘domoticz.db’ (database) naar de opgegeven map. Mogelijk wil je ook een paar gebruikte script meenemen met de backup, kijk dan naar een script verderop in dit artikel.
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 |
#!/bin/bash # LOCAL/FTP/SCP/MAIL PARAMETERS SERVER="192.168.0.10" # IP of Network disk, used for ftp USERNAME="xxxxxx" # FTP username of Network disk used for ftp PASSWORD="xxxxxx" # FTP password of Network disk used for ftp DESTDIR="/tmp" # used for temorarily storage DOMO_IP="192.168.0.90" # Domoticz IP DOMO_PORT="8080" # Domoticz port ### END OF USER CONFIGURABLE PARAMETERS TIMESTAMP='/bin/date +%Y%m%d%H%M%S' BACKUPFILE="domoticz_$TIMESTAMP.db" # backups will be named "domoticz_YYYYMMDDHHMMSS.db.gz" BACKUPFILEGZ="$BACKUPFILE".gz ### Stop Domoticz, create backup, ZIP it and start Domoticz again service domoticz.sh stop /usr/bin/curl -s http://$DOMO_IP:$DOMO_PORT/backupdatabase.php > /tmp/$BACKUPFILE service domoticz.sh start gzip -9 /tmp/$BACKUPFILE ### Send to Network disk through FTP curl -s --disable-epsv -v -T"/tmp/$BACKUPFILEGZ" -u"$USERNAME:$PASSWORD" "ftp://$SERVER/media/hdd/Domoticz_backup/" ### Remove temp backup file /bin/rm /tmp/$BACKUPFILEGZ ### Done! |
Note: Indien dit niet werk outcomment dan “service domoticz.sh stop” en “service domoticz.sh start” door een ‘#’ ervoor te zetten (bv. “#service domoticz.sh stop”). Het lijkt erop dat Domoticz op een Raspberry Pi soms niet snel genoeg stop, wat resulteert in een leeg database-bestand.
Script om meerdere mappen te backuppen naar een FTP-server
Het volgende script zal de opgegeven folder (/home/pi/domoticz/xxxx/, verander xxxx naar de folder die je wilt backuppen) naar de FTP-locatie wegschrijven. Dit script maakt geen backup van de domoticz.db database, zie het script hierboven.
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 |
#!/bin/bash ## LOCAL/FTP/SCP/MAIL PARAMETERS SERVER="192.168.5.10" # IP of Network disk, used for: ftp mail scp USERNAME="xxxxxx" # FTP username of Network disk used for: ftp mail scp PASSWORD="xxxxxx" # FTP password of Network disk used for: ftp mail scp DESTDIR="/tmp" # used for: local DOMO_IP="192.168.5.75" # Domoticz IP used for all DOMO_PORT="8081" # Domoticz port used for all ## END OF USER CONFIGURABLE PARAMETERS TIMESTAMP='/bin/date +%Y%m%d%H%M%S' BACKUPFILEDIR="domoticz_x_xxx_$TIMESTAMP.tar.gz" # Change the xxx to yours ### Create backup and ZIP it tar -zcvf /tmp/$BACKUPFILEDIR /home/pi/domoticz/xxxx/ # Change the xxx to yours # Or try /home/pi/domoticz/ ### Send to Network disk through FTP curl -s --disable-epsv -v -T"/tmp/$BACKUPFILEDIR" -u"$USERNAME:$PASSWORD" "ftp://$SERVER/media/hdd/Domoticz_backup/" # Change the ftp to yours !!! ### Remove temp backup file /bin/rm /tmp/$BACKUPFILEDIR ### Done! |
Script om te backuppen naar lokale folders (database + meerdere folders)
Dit script kan gebruikt worden om backups te maken en ze weg te schrijven naar een locatie op hetzelfde apparaat. Het is in principe niet aan te raden om voor een doellocatie op hetzelfde apparaat te kiezen, maar ik plaats ze in een bepaalde folder die vervolgens iedere nacht weer naar mijn NAS weggeschreven wordt.
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 |
#!/bin/bash DOMO_IP="192.168.4.4" # Domoticz IP DOMO_PORT="8084" # Domoticz port ### END OF USER CONFIGURABLE PARAMETERS TIMESTAMP='/bin/date +%Y%m%d%H%M%S' BACKUPFILE="domoticzbackup_$TIMESTAMP.db" # backups will be named "domoticz_YYYYMMDDHHMMSS.db.gz" BACKUPFILEGZ="$BACKUPFILE".gz #Create backup and make tar archives /usr/bin/curl -s http://$DOMO_IP:$DOMO_PORT/backupdatabase.php > /volume1/dataschijf/Domoticz_backup/database/$BACKUPFILE tar -zcvf /volume1/dataschijf/Domoticz_backup/scripts/domoticz_scripts_$TIMESTAMP.tar.gz /volume1/@appstore/domoticz/var/scripts/ tar -zcvf /volume1/dataschijf/Domoticz_backup/www/domoticz_wwwfolder_$TIMESTAMP.tar.gz /volume1/@appstore/domoticz/www/ #Delete backups older than 31 days /usr/bin/find /volume1/dataschijf/Domoticz_backup/database/ -name '*.db' -mtime +31 -delete /usr/bin/find /volume1/dataschijf/Domoticz_backup/scripts/ -name '*.tar.gz' -mtime +31 -delete /usr/bin/find /volume1/dataschijf/Domoticz_backup/www/ -name '*.tar.gz' -mtime +31 -delete |
Script voor backup naar een Synology NAS
Dit script maakt backups (Domoticz Database & Domoticz scripts & Telegram Scripts) naar de geselecteerde FTP-locatie. Vergeet niet om het Synology gebruikersaccount FTP-rechten te geven in DSM.
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 |
#!/bin/bash # LOCAL/FTP/SCP/MAIL PARAMETERS SERVER="192.168.2.157" # IP of Synology NAS, used for ftp USERNAME="xxxxxxx" # FTP username of Network disk used for ftp PASSWORD="xxxxxxx" # FTP password of Network disk used for ftp DESTDIR="/tmp" # used for temorarily storage DESTDIRNAS="/Backups/Backup_Raspberry_Pi/" # Path to your Synology NAS backup folder DOMO_IP="192.168.2.152" # Domoticz IP DOMO_PORT="8080" # Domoticz port ### END OF USER CONFIGURABLE PARAMETERS TIMESTAMP='/bin/date +%Y%m%d%H%M%S' BACKUPFILE="domoticz_$TIMESTAMP.db" # backups will be named "domoticz_YYYYMMDDHHMMSS.db.gz" BACKUPFILEGZ="$BACKUPFILE".gz ### Create backup and ZIP it /usr/bin/curl -s http://$DOMO_IP:$DOMO_PORT/backupdatabase.php > /tmp/$BACKUPFILE gzip -9 /tmp/$BACKUPFILE tar -zcvf /tmp/domoticz_scripts_$TIMESTAMP.tar.gz /home/pi/domoticz/scripts/ tar -zcvf /tmp/telegram_scripts_$TIMESTAMP.tar.gz /home/pi/tg/scripts/ ### Send to Network disk through FTP curl -u "$USERNAME:$PASSWORD" --ftp-create-dirs "ftp://$SERVER/$DESTDIRNAS/$TIMESTAMP/" curl -s --disable-epsv -v -T"/tmp/$BACKUPFILEGZ" -u"$USERNAME:$PASSWORD" "ftp://$SERVER/$DESTDIRNAS/$TIMESTAMP/" curl -s --disable-epsv -v -T"/tmp/domoticz_scripts_$TIMESTAMP.tar.gz" -u"$USERNAME:$PASSWORD" "ftp://$SERVER/$DESTDIRNAS/$TIMESTAMP/" curl -s --disable-epsv -v -T"/tmp/telegram_scripts_$TIMESTAMP.tar.gz" -u"$USERNAME:$PASSWORD" "ftp://$SERVER/$DESTDIRNAS/$TIMESTAMP/" ### Remove temp backup file /bin/rm /tmp/backup.db /bin/rm /tmp/$BACKUPFILEGZ /bin/rm /tmp/domoticz_scripts_$TIMESTAMP.tar.gz /bin/rm /tmp/telegram_scripts_$TIMESTAMP.tar.gz ### Done! |
Maak het script uitvoerbaar
Gebruik hiervoor het commando:
|
1 |
sudo chmod +x /home/pi/domoticz/scripts/domoticz_backup.sh |
Test het script met commando:
|
1 |
sudo sh /home/pi/domoticz/scripts/domoticz_backup.sh |
Maak een automatisch taak van het script
Login als pi gebruiker en geef commando:
|
1 |
sudo crontab -e |
Voeg onderstaande regel toe aan het crontab document:
|
1 |
0 1 * * * sudo ~/domoticz/scripts/domoticz_backup.sh |
Hierboven staat dat iedere dag om 01.00 uur een backup gemaakt moet worden. Je kunt dit zelf naar wens instellen.
|
1 2 3 4 5 6 7 8 |
* * * * * commando dat uitgevoerd moet worden - - - - - | | | | | | | | | +--------------------- dag van de week (0 - 6) (zondag=0) | | | +-------------------- maand (1 - 12) | | +--------- dag van de maand(1 - 31) | +----------- uur (0 - 23) +--------- minuten (0 - 59) |
Sla tot slot de crontab op. Linux maakt nu dagelijks een backup Domoticz Database.
mmm Thanks voor je mooie scripts..
Maar kun je misschien ook een script maken om een backup naar de google drive te schrijven??
Stel dat er in huis iets gebeurd,,,,
Hopelijkā¦
Groetjes
Dylano
misschien gekke vraagā¦maar domoticz maakt elk uur een backup, waarom wordt er niet gewoon 1 van die backups opgepakt en elke nacht verplaatst naar een externe locatie? anders dan met dit script weer een backup te maken?
Niet iedereen heeft de setting van uurlijkse backup aan staan (is ook wat overdreven om ieder uur een backup te draaien).
Ik krijg een lege file als backup. Maar als ik wat verder lees, is het niet veel eenvoudiger om de originele domoticz.db gewoon te copieren met cp? Eventueel nog zippen? Of heeft dit nadelen?
goedendag,
kan iemand mij vertellen hoe ik deze backup weer terug kan zetten?
Joost?
Zou je mijn Vraag ook kunnen beantwoorden aub. š
Johs, waar wil je een backup van terugzetten?
Hoi Joost,
ik gebruik nu het script van “backup naar een Synology NAS”, dus de Domoticz Database & Domoticz scripts en telegram scripts.
Als ik deze nu terug wil plaatsen hoe doe ik dat dan? De scripts worden netjes naar me nas gebackupd elke avond…. naar mooie *.tar bestandjes
Ik hoor het wel.
Alvast bedankt
Een database kun je terugzetten via Domoticz (Setup > Settings > Backup/Restore). De .tar bestanden kun je uitpakken met bv. WinRar er vervolgens met bv. FileZilla terug op de Raspberry zetten. Mocht je een Mac gebruiken dan moet je even googlen naar alternatief voor WinRar en FileZilla, maar de werkwijze is gelijk.
krijg deze foutmelding dat directory niet bestaat maar bestaat wel. Wat doe ik verkeerd ?pi@raspberrypi:~/tmp/domoticz_/bin $ sudo sh /home/pi/domoticz/scripts/bash/backup.sh
/home/pi/domoticz/scripts/bash/backup.sh: 15: /home/pi/domoticz/scripts/bash/backup.sh: cannot create /tmp/domoticz_/bin/date +%Y%m%d%H%M%S.db: Directory nonexistent
gzip: /tmp/domoticz_/bin/date: No such file or directory
gzip: +%Y%m%d%H%M%S.db: No such file or directory
curl: Can’t open ‘/tmp/domoticz_/bin/date +%Y%m%d%H%M%S.db.gz’!
curl: try ‘curl –help’ or ‘curl –manual’ for more information
/bin/rm: kan ‘/tmp/domoticz_/bin/date’ niet verwijderen: Bestand of map bestaat niet
/bin/rm: kan ‘+%Y%m%d%H%M%S.db.gz’ niet verwijderen: Bestand of map bestaat niet
pi@raspberrypi:~/tmp/domoticz_/bin $
Heeft gebruiker pi wel rechten voor de directory?
heb map als gebruiker pi aangemaakt dus ik mag aannemen van wel. overigens kan ik de directory handmatig gewoon openen
Joost,
Is dat alles? Super!!!
Van de database wist ik. Maar dat het zo simpel zou zijn met de rest…
Top thx.
Het script loopt verkeerd op de timestamp. Met de volgende code werkt het wel: TIMESTAMP=$(/bin/date “+%Y%m%d%H%M%S”).
Als ik het scrip uitvoer krijg ik de volgende reactie.
de directory /tmp/domoticz_/bin/date +%Y%m%d%H%M%S bestaat bij mijn niet
bash: 1: opdracht niet gevonden
pi@raspberrypi:~ $
pi@raspberrypi:~ $ sudo sh /home/pi/domoticz/scripts/domoticz_backup.sh
Usage: /etc/init.d/domoticz {start|stop|status|restart|reload}
: Directory nonexistentts/domoticz_backup.sh: 15: /home/pi/domoticz/scripts/domoticz_backup.sh: cannot create /tmp/domoticz_/bin/date +%Y%m%d%H%M%S
Usage: /etc/init.d/domoticz {start|stop|status|restart|reload}
gzip: /tmp/domoticz_/bin/date: No such file or directory
: No such file or directory
‘!b.gzCan’t open ‘/tmp/domoticz_/bin/date +%Y%m%d%H%M%S
curl: try ‘curl –help’ or ‘curl –manual’ for more information
/bin/rm: kan ‘/tmp/domoticz_/bin/date’ niet verwijderen: Bestand of map bestaat niet
/bin/rm: kan ‘+%Y%m%d%H%M%S’$’\r”.db.gz’$’\r\r’ niet verwijderen: Bestand of map bestaat niet
Hoe kan ik bereiken dat oudere backups automatisch worden verwijderd op basis van retentie?
Hier ook problemen. please help:
pi@raspberrypi:~ $ sudo sh /home/pi/domoticz/scripts/domoticz_backup.sh
/home/pi/domoticz/scripts/domoticz_backup.sh: 18: /home/pi/domoticz/scripts/domo ticz_backup.sh: cannot create /tmp/domoticz_/bin/date +%Y%m%d%H%M%S.db: Director y nonexistent
gzip: /tmp/domoticz_/bin/date: No such file or directory
gzip: +%Y%m%d%H%M%S.db: No such file or directory
tar: +%Y%m%d%H%M%S.tar.gz: Functie stat() is mislukt: Bestand of map bestaat nie t
tar: Leidende ‘/’ wordt uit lidnamen weggelaten
tar (child): /tmp/domoticz_scripts_/bin/date: Functie open() is mislukt: Bestand of map bestaat niet
/home/pi/domoticz/scripts/
tar (child): Error is not recoverable: exiting now
/home/pi/domoticz/scripts/logrotate/
/home/pi/domoticz/scripts/logrotate/domoticz
tar: Leidende ‘/’ wordt uit doelen van harde koppelingen weggelaten
/home/pi/domoticz/scripts/domoticz.conf
/home/pi/domoticz/scripts/python/
/home/pi/domoticz/scripts/python/script_device_demo.py
/home/pi/domoticz/scripts/python/domoticz.py
tar: /tmp/domoticz_scripts_/bin/date: Functie write() is mislukt: Gebroken pijp
tar: Child returned status 2
tar: Error is not recoverable: exiting now
tar: +%Y%m%d%H%M%S.tar.gz: Functie stat() is mislukttar (child): /tmp/telegram_s cripts_/bin/date: Functie open() is mislukt: Bestand of map bestaat niet
tar (child): Error is not recoverable: exiting now
: Bestand of map bestaat niet
tar: Leidende ‘/’ wordt uit lidnamen weggelaten
tar: /home/pi/tg/scripts: Functie stat() is mislukt: Bestand of map bestaat niet
tar: /tmp/telegram_scripts_/bin/date: Functie write() is mislukt: Gebroken pijp
tar: Child returned status 2
tar: Error is not recoverable: exiting now
curl: (9) Server denied you to change to the given directory
curl: Can’t open ‘/tmp/domoticz_/bin/date +%Y%m%d%H%M%S.db.gz’!
curl: try ‘curl –help’ or ‘curl –manual’ for more information
curl: Can’t open ‘/tmp/domoticz_scripts_/bin/date +%Y%m%d%H%M%S.tar.gz’!
curl: try ‘curl –help’ or ‘curl –manual’ for more information
curl: Can’t open ‘/tmp/telegram_scripts_/bin/date +%Y%m%d%H%M%S.tar.gz’!
curl: try ‘curl –help’ or ‘curl –manual’ for more information
/bin/rm: kan ‘/tmp/backup.db’ niet verwijderen: Bestand of map bestaat niet
/bin/rm: kan ‘/tmp/domoticz_/bin/date’ niet verwijderen: Bestand of map bestaat niet
/bin/rm: kan ‘+%Y%m%d%H%M%S.db.gz’ niet verwijderen: Bestand of map bestaat niet
/bin/rm: kan ‘/tmp/domoticz_scripts_/bin/date’ niet verwijderen: Bestand of map bestaat niet
/bin/rm: kan ‘+%Y%m%d%H%M%S.tar.gz’ niet verwijderen: Bestand of map bestaat nie t
/bin/rm: kan ‘/tmp/telegram_scripts_/bin/date’ niet verwijderen: Bestand of map bestaat niet
/bin/rm: kan ‘+%Y%m%d%H%M%S.tar.gz’ niet verwijderen: Bestand of map bestaat nie t
Jammer,
het script heeft altijd goed gedraaid, maar na een upgrade op nieuwe pi4 heb ik nog steeds bovenstaande problemen. Iemand tips?
spatie na date in timestamp lijkt me verkeerd in het script (dus tussen date en +) want er wordt overduidelijk gezocht naar de map met de naam “date” dus wat erachter komt wordt vanwege de spatie genegeerd. Ben echter een nooby!
Zoals Jan zei:
TIMESTAMP=$(/bin/date ā+%Y%m%d%H%M%Sā)
Echter moet je de acculades vervangen ā -> ” Daarna werkt de timestamp weer.
Ik zie dat deze website de alt code van de aanhalingstegens ā vervangt. Dit moet je dus even lokaal doen (ik bedoelde in het vorige bericht aanhalingsteken, niet acculadesā¦ verstandsverbijsteringā¦.;))