Test Adapter ioBroker.backitup v3.1.x

[sigi234]

@simatec

Hallo, kann man das Backup von den History Adapter beim normalen Backup vom iob ausschließen?

Ich möchte das History Backup nur manuell starten, was auch funktioniert.

Windows System

v3.0.27

13:02:59.051INFOguiBackup gestartet ...
13:03:07.440DEBUGiobrokerhost.SmartHome 24623 objects saved
13:03:08.202DEBUGiobrokerhost.SmartHome 20996 states saved
13:03:08.205DEBUGiobrokerhost.SmartHome Validating backup ...
13:03:08.209DEBUGiobrokerhost.SmartHome "config.json" is valid
13:03:08.215DEBUGiobrokerhost.SmartHome "objects.jsonl" exists
13:03:08.220DEBUGiobrokerhost.SmartHome "states.jsonl" exists
13:03:08.723DEBUGiobrokerhost.SmartHome JSONL lines are valid
13:03:09.191DEBUGiobrokerhost.SmartHome The backup is valid!
13:03:12.581DEBUGiobrokerBackup created: C:\SmartHome\backups\iobroker_2024_11_20-13_02_59_backupiobroker.tar.gz
13:03:12.590DEBUGiobrokerThis backup can only be restored with js-controller version 7.0 or higher
13:03:13.642DEBUGiobrokerdone
13:03:14.591DEBUGhistoryDBcompress from historyDB started ...
13:03:24.584DEBUGhistoryDBPacked 225MB so far...
13:03:34.592DEBUGhistoryDBPacked 460MB so far...
13:03:44.583DEBUGhistoryDBPacked 696MB so far...
13:03:54.583DEBUGhistoryDBPacked 933MB so far...
13:04:04.582DEBUGhistoryDBPacked 1164MB so far...
13:04:14.585DEBUGhistoryDBPacked 1404MB so far...
13:04:24.606DEBUGhistoryDBPacked 1651MB so far...
13:04:34.610DEBUGhistoryDBPacked 1873MB so far...
13:04:44.582DEBUGhistoryDBPacked 2114MB so far...
13:04:54.587DEBUGhistoryDBPacked 2363MB so far...
13:05:04.595DEBUGhistoryDBPacked 2605MB so far...
13:05:14.606DEBUGhistoryDBPacked 2839MB so far...
13:05:24.595DEBUGhistoryDBPacked 3087MB so far...
13:05:34.587DEBUGhistoryDBPacked 3332MB so far...
13:05:44.602DEBUGhistoryDBPacked 3570MB so far...
13:05:54.595DEBUGhistoryDBPacked 3811MB so far...
13:06:04.586DEBUGhistoryDBPacked 4054MB so far...
13:06:14.588DEBUGhistoryDBPacked 4275MB so far...
13:06:24.615DEBUGhistoryDBPacked 4524MB so far...
13:06:34.600DEBUGhistoryDBPacked 4771MB so far...
13:06:44.586DEBUGhistoryDBPacked 5017MB so far...
13:06:54.587DEBUGhistoryDBPacked 5267MB so far...
13:07:04.587DEBUGhistoryDBPacked 5515MB so far...
13:07:14.586DEBUGhistoryDBPacked 5755MB so far...
13:07:24.600DEBUGhistoryDBPacked 6007MB so far...
13:07:34.586DEBUGhistoryDBPacked 6256MB so far...
13:07:44.596DEBUGhistoryDBPacked 6497MB so far...
13:07:54.587DEBUGhistoryDBPacked 6743MB so far...
13:08:04.600DEBUGhistoryDBPacked 6994MB so far...
13:08:14.586DEBUGhistoryDBPacked 7233MB so far...
13:08:24.595DEBUGhistoryDBPacked 7482MB so far...
13:08:34.586DEBUGhistoryDBPacked 7731MB so far...
13:08:44.587DEBUGhistoryDBPacked 7969MB so far...
13:08:54.601DEBUGhistoryDBPacked 8219MB so far...
13:09:04.595DEBUGhistoryDBPacked 8464MB so far...
13:09:14.592DEBUGhistoryDBPacked 8695MB so far...
13:09:14.668DEBUGhistoryDBBackup created: C:\SmartHome\backups\historyDB_2024_11_20-13_03_14_backupiobroker.tar.gz
13:09:14.672DEBUGhistoryDBdone
13:09:15.303DEBUGjarvisCreated jarvis_tmp directory: "C:/SmartHome/backups/tmpJavis0"
13:09:15.323DEBUGjarvisstart Jarvis Backup for Instance 0...
13:09:15.441DEBUGjarvisC:\SmartHome\iobroker-data\jarvis\0 copy success!
13:09:15.443DEBUGjarvisCreated states_tmp directory: "C:/SmartHome/backups/tmpJavis0/states"
13:09:15.745DEBUGjarvisTry deleting the Jarvis tmp directory: "C:/SmartHome/backups/tmpJavis0"
13:09:15.754DEBUGjarvisJarvis tmp directory "C:/SmartHome/backups/tmpJavis0" successfully deleted
13:09:15.759DEBUGjarvisdone
13:09:16.337DEBUGjavascriptsCreated javascript_tmp directory: "C:/SmartHome/backups/tmpScripts"
13:09:16.439DEBUGjavascriptsfound Script: SKRIPTE GEKÜRZT!
13:10:08.039DEBUGjavascriptsfound Script: Servicemeldungen12
13:10:08.361DEBUGjavascriptsTry deleting the Javascript tmp directory: "C:/SmartHome/backups/tmpScripts"
13:10:08.373DEBUGjavascriptsdone
13:10:09.299DEBUGcifsused copy path: H:/Backitup
13:10:09.321DEBUGcifsCopy iobroker_2024_11_20-13_02_59_backupiobroker.tar.gz...
13:10:10.417DEBUGcifsCopy historyDB_2024_11_20-13_03_14_backupiobroker.tar.gz...
13:11:18.895DEBUGcifsCopy jarvis.0_2024_11_20-13_09_15_backupiobroker.tar.gz...
13:11:18.947DEBUGcifsCopy javascripts_2024_11_20-13_09_16_backupiobroker.tar.gz...
13:11:18.978DEBUGcifsdone
13:11:19.635WARNcleanNo older backup files are deleted, because this backup was started manually
13:11:19.641DEBUGcleandone
13:11:19.802DEBUGhistoryHTMLnew history html values created
13:11:19.836DEBUGhistoryHTMLdone
13:11:20.017DEBUGhistoryJSONnew history json values created
13:11:20.027DEBUGhistoryJSONdone
13:11:22.580DEBUGnotificationdone
13:11:22.744INFOguiDas Backup wurde erfolgreich erstellt!

Grund ist das die History-DB schon sehr Groß ist.

Natürlich könnte ich es auch manuell unter den Host löschen, bin mir aber nicht sicher ob das den Adapter nicht durcheinander bringt?

[Homoran]

@sigi234 sagte in Test Adapter ioBroker.backitup v3.0.x:

Grund ist das die History-DB schon sehr Groß ist.

Das dauert natürlich!

[sigi234]

@homoran sagte in Test Adapter ioBroker.backitup v3.0.x:

Das dauert natürlich!

Ja, manuell ca.10 Minuten.

Sonst wird es automatisch ja um 2 Uhr gemacht, habe da keine Probleme.
Nur das ich fast 10 GB doppelt habe und mir die Systemplatte Voll macht.

[Homoran]

@sigi234 sagte in Test Adapter ioBroker.backitup v3.0.x:

manuell ca.10 Minuten.

dann hast du aber einen Turborechner.
Hab es nie gemessen, aber denke, dass ich auf dem Pi5 mit meinen 3GB gepackter History auch fast daran komme.

Manchmal hab ich den Eindruck dass zu der Zeit Meldungen im log auftauchen weil der Pi da doch ans keuchen kommt.

[sigi234]

@homoran sagte in Test Adapter ioBroker.backitup v3.0.x:

dann hast du aber einen Turborechner.

Ja, komplettes Backup fertig in 9 Minuten.

Mit 8,5 GB History

13:02:59.051INFOguiBackup gestartet ...
13:11:22.744INFOguiDas Backup wurde erfolgreich erstellt!

[Siggi0904]

Hi @simatec , warum Maerz und nicht März?

[simatec]

@siggi0904 Welche Version ist installiert?

[Siggi0904]

@simatec Hallo, aktuelle Stable 3.0.31

[Siggi0904]

@simatec Mahlzeit, hattest du die Korrektur gefunden?
Oder sollte ich da ein Issue erstellen?

[haselchen]

@simatec

Bin mir nicht sicher mit welchem, der letzten Updates das kam.
In der Seitenleiste sind die Icons weg

[simatec]

@haselchen Welche Version hast du installiert?

[Thomas Braun]

@haselchen sagte in Test Adapter ioBroker.backitup v3.0.x:

In der Seitenleiste sind die Icons weg

Bei mir nicht.

system.adapter.backitup 3.0.37

[bahnuhr]

@haselchen
Ich hab 3.0.31

Bei mir ist alles ok.

[haselchen]

@simatec

3.0.37

Bin nicht sicher, ob die Icons auch schon in Vorversionen weg waren.
Ist mir eben erst aufgefallen.

Edit:

Hab nochmal ein Upload hinterhergeschoben, jetzt sind sie da .

[simatec]

@siggi0904 Wurde in v3.1.0 gefixt

[JB_Sullivan]

@simatec Gibt es irgend welche Beschränkungen, was das löschen von temporären Backups betrifft?

Soll heißen, ich habe Adapter in der Version 3.1.0. In den Einstellungen habe ich festgelegt, das ich 3 historische Backups behalten möchte.

Beim erstellen des Backups werden diese auf einem Windows System lokal unter c:\iobroker\GLT\backups\ abgelegt und mit jedem neuen Backup wird der älteste Tag entsprechend gelöscht - soweit so gut.

Parallel dazu werden sie auf Google Drive gesichert.

2025-03-29 02:41:40.540  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: Copy zigbee.0_2025_03_29-02_24_10_backupiobroker.tar.gz...
2025-03-29 02:41:42.743  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: Copy grafana_2025_03_29-02_24_16_backupiobroker.tar.gz...
2025-03-29 02:41:44.977  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: Copy javascripts_2025_03_29-02_24_22_backupiobroker.tar.gz...
2025-03-29 02:41:47.664  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete iobroker_2025_03_26-02_00_10_backupiobroker.tar.gz
2025-03-29 02:41:48.260  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete influxDB_2025_03_26-02_00_42_backupiobroker.tar.gz
2025-03-29 02:41:48.874  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete zigbee.0_2025_03_26-02_24_45_backupiobroker.tar.gz
2025-03-29 02:41:49.415  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete grafana_2025_03_26-02_24_52_backupiobroker.tar.gz
2025-03-29 02:41:49.940  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete javascripts_2025_03_26-02_24_58_backupiobroker.tar.gz
2025-03-29 02:41:50.439  - debug: backitup.0 (2896) [iobroker/googledrive] done
2025-03-29 02:41:50.599  - debug: backitup.0 (2896) [iobroker/clean] delete C:\ioBroker\GLT\backups\iobroker_2025_03_26-02_00_10_backupiobroker.tar.gz
2025-03-29 02:41:50.603  - debug: backitup.0 (2896) [iobroker/clean] done
2025-03-29 02:41:50.764  - debug: backitup.0 (2896) [iobroker/historyHTML] new history html values created
2025-03-29 02:41:50.785  - debug: backitup.0 (2896) [iobroker/historyHTML] done
2025-03-29 02:41:50.968  - debug: backitup.0 (2896) [iobroker/historyJSON] new history json values created
2025-03-29 02:41:50.969  - debug: backitup.0 (2896) [iobroker/historyJSON] done
2025-03-29 02:41:51.434  - debug: backitup.0 (2896) [iobroker/email] done

Seit ca. einer Woche löscht er aber das älteste Backup auf Googel Drive nicht mehr (lokal schon) und gibt mir den folgenden Fehler aus (Zeile 24 - der Rest ist zur Information). Dies passierte von einem Tag auf den anderen, ohne das am System irgend welche Änderungen vorgenommen wurden (ich war zu der Zeit sogar im Urlaub). Die Sicherung der InfluxDB auf Google ist ca. 6,5 GB groß. Kann das ein Problem sein?

2025-03-29 02:24:48.445  - debug: backitup.0 (2896) [iobroker/javascripts] Try deleting the Javascript tmp directory: "C:/ioBroker/GLT/backups/tmpScripts"
2025-03-29 02:24:48.454  - debug: backitup.0 (2896) [iobroker/javascripts] Javascript tmp directory "C:/ioBroker/GLT/backups/tmpScripts" successfully deleted
2025-03-29 02:24:48.455  - debug: backitup.0 (2896) [iobroker/javascripts] Backup created: C:\ioBroker\GLT\backups\javascripts_2025_03_29-02_24_22_backupiobroker.tar.gz
2025-03-29 02:24:48.455  - debug: backitup.0 (2896) [iobroker/javascripts] done
2025-03-29 02:24:51.006  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: Copy iobroker_2025_03_29-02_00_10_backupiobroker.tar.gz...
2025-03-29 02:24:55.822  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: Copy influxDB_2025_03_29-02_00_40_backupiobroker.tar.gz...
2025-03-29 02:41:40.540  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: Copy zigbee.0_2025_03_29-02_24_10_backupiobroker.tar.gz...
2025-03-29 02:41:42.743  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: Copy grafana_2025_03_29-02_24_16_backupiobroker.tar.gz...
2025-03-29 02:41:44.977  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: Copy javascripts_2025_03_29-02_24_22_backupiobroker.tar.gz...
2025-03-29 02:41:47.664  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete iobroker_2025_03_26-02_00_10_backupiobroker.tar.gz
2025-03-29 02:41:48.260  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete influxDB_2025_03_26-02_00_42_backupiobroker.tar.gz
2025-03-29 02:41:48.874  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete zigbee.0_2025_03_26-02_24_45_backupiobroker.tar.gz
2025-03-29 02:41:49.415  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete grafana_2025_03_26-02_24_52_backupiobroker.tar.gz
2025-03-29 02:41:49.940  - debug: backitup.0 (2896) [iobroker/googledrive] Google Drive: delete javascripts_2025_03_26-02_24_58_backupiobroker.tar.gz
2025-03-29 02:41:50.439  - debug: backitup.0 (2896) [iobroker/googledrive] done
2025-03-29 02:41:50.599  - debug: backitup.0 (2896) [iobroker/clean] delete C:\ioBroker\GLT\backups\iobroker_2025_03_26-02_00_10_backupiobroker.tar.gz
2025-03-29 02:41:50.603  - debug: backitup.0 (2896) [iobroker/clean] done
2025-03-29 02:41:50.764  - debug: backitup.0 (2896) [iobroker/historyHTML] new history html values created
2025-03-29 02:41:50.785  - debug: backitup.0 (2896) [iobroker/historyHTML] done
2025-03-29 02:41:50.968  - debug: backitup.0 (2896) [iobroker/historyJSON] new history json values created
2025-03-29 02:41:50.969  - debug: backitup.0 (2896) [iobroker/historyJSON] done
2025-03-29 02:41:51.434  - debug: backitup.0 (2896) [iobroker/email] done
2025-03-29 02:41:51.438  - warn: email.0 (3284) From email address is not equal to the configured email address for authentication. Some services do not allow this!
2025-03-29 02:41:51.440  - info: email.0 (3284) Send email: {"text":"Backitup:\nIhr Backup wurde nicht vollständig erstellt. Bitte überprüfen Sie die Fehler!!\n\ncifs: Error: EPERM: operation not permitted, stat 'C:\\ioBroker\\GLT\\backups\\influxDB_2025_03_18-02_00_42_backupiobroker.tar.gz'","to":"meinemailadresse@arcor.de","subject":"Backitup","from":"meinemailadresse@arcor.de"}
2025-03-29 02:41:53.495  - debug: backitup.0 (2896) [iobroker/notification] Admin notification will be sent
2025-03-29 02:41:53.496  - debug: backitup.0 (2896) [iobroker/notification] done
2025-03-29 02:41:53.656  - debug: backitup.0 (2896) [iobroker] exec: done

[simatec]

@jb_sullivan Da stimmen wohl irgendwelche Schreibrechte nicht... Was du da bei Windwos im speziellen beachten musst, kann ich dir leider nicht sagen. Ich nutze kein Windows

[Negalein]

@jb_sullivan sagte in Test Adapter ioBroker.backitup v3.1.x:

Die Sicherung der InfluxDB auf Google ist ca. 6,5 GB groß

wie groß sind die anderen Backups?
ioBroker, Zigbee, Grafana, Scripts?

Hast Dateien in Gmail?
Sicherst deine Fotos und WhatsApp auf Google?

Du hast auf Google Drive nur 15 GB gratis.
Willst mehr, musst ein Abo kaufen.

[JB_Sullivan]

@negalein

Ich habe bei Googel ein Abo für 100 GB und derzeit sind 60% davon frei. Das sollte nicht das Problem sein. Selbst als in den 7 Tage Urlaub die Backups nicht gelöscht wurden ( = +45 GB) war noch reichlich Platz auf dem Drive Laufwerk. In der Zwischenzeit habe ich alle überflüssigen Backups von Hand gelöscht und so nun auch wieder die "3er Regel" hergestellt.

Ich lasse mich morgen dann mal überraschen ob jetzt auf dem Drive Laufwerk wieder alles normal verläuft.

Die anderen Backups sind eher moderater Natur.

@simatec

Im Windows Ordner wird ja alles so wie es eingestellt ist gelöscht. Das "Problem" scheint bei der Löschung auf dem Google Drive Laufwerk zu passieren, wenn dort die älteste Datei entfernt werden soll.

[simatec]

@jb_sullivan sagte in Test Adapter ioBroker.backitup v3.1.x:

Error: EPERM: operation not permitted, stat 'C:\ioBroker\GLT\backups\influxDB_2025_03_18-02_00_42_backupiobroker.tar.gz'

Der Fehler ist eigentlich in der Mail beschrieben.
Es kann lokal dein Influx Backup nicht gelöscht werden.
Schaue dir das mal an und lösche es ggfs. händisch.