iobroker plötzlich nicht mehr oder schwer erreichbar

[MartinP]

Das hier ist auch suboptimal:

Pending Updates: 100

und mqtt loggt sich auch zu tode

2024-03-13 17:41:46.384 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.13alllivevalues[openWB/graph/13alllivevalues]
2024-03-13 17:41:46.385 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.4alllivevalues[openWB/graph/4alllivevalues]
2024-03-13 17:41:46.388 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.6alllivevalues[openWB/graph/6alllivevalues]
2024-03-13 17:41:46.389 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Uptime[openWB/system/Uptime]
2024-03-13 17:41:46.390 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Date[openWB/system/Date]
2024-03-13 17:41:46.391 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Timestamp[openWB/system/Timestamp]
2024-03-13 17:41:46.395 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.2alllivevalues[openWB/graph/2alllivevalues]
2024-03-13 17:41:46.395 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.15alllivevalues[openWB/graph/15alllivevalues]
2024-03-13 17:41:46.397 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.3alllivevalues[openWB/graph/3alllivevalues]
2024-03-13 17:41:46.400 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.11alllivevalues[openWB/graph/11alllivevalues]
2024-03-13 17:41:46.401 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Uptime[openWB/system/Uptime]
2024-03-13 17:41:46.404 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Date[openWB/system/Date]
2024-03-13 17:41:46.405 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Timestamp[openWB/system/Timestamp]
2024-03-13 17:41:46.406 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.6alllivevalues[openWB/graph/6alllivevalues]
2024-03-13 17:41:46.407 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Uptime[openWB/system/Uptime]
2024-03-13 17:41:46.410 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.12alllivevalues[openWB/graph/12alllivevalues]
2024-03-13 17:41:46.411 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.13alllivevalues[openWB/graph/13alllivevalues]
2024-03-13 17:41:46.412 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Uptime[openWB/system/Uptime]
2024-03-13 17:41:46.416 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Date[openWB/system/Date]
2024-03-13 17:41:46.417 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Timestamp[openWB/system/Timestamp]
2024-03-13 17:41:46.420 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.6alllivevalues[openWB/graph/6alllivevalues]
2024-03-13 17:41:46.421 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.8alllivevalues[openWB/graph/8alllivevalues]
2024-03-13 17:41:46.422 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.13alllivevalues[openWB/graph/13alllivevalues]
2024-03-13 17:41:46.426 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.graph.9alllivevalues[openWB/graph/9alllivevalues]
2024-03-13 17:41:46.427 - info: mqtt.0 (75982) send2Server mqtt.0.openWB.system.Date[openWB/system/Date]

Und das:

/usr/bin/node v18.16.0
/usr/bin/npm 9.5.1
/usr/bin/npx 9.5.1
/usr/bin/corepack 0.17.0
/home/iobroker/.diag.sh: line 288: nodejs: command not found
*** nodejs is NOT correctly installed ***

nodejs:
Installed: 18.16.0-deb-1nodesource1
Candidate: 18.17.1-deb-1nodesource1
Version table:

[Homoran]

@vol907 sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

Wie repariere ich das Dateisystem?

gar nicht!
Das System hat es versucht und ist gescheitert.

[MartinP]

@homoran said in iobroker plötzlich nicht mehr oder schwer erreichbar:

gar nicht!
Das System hat es versucht und ist gescheitert.

???

[Tue Mar 12 17:58:09 2024] EXT4-fs (sda2): INFO: recovery required on readonly filesystem
[Tue Mar 12 17:58:09 2024] EXT4-fs (sda2): write access will be enabled during recovery
[Tue Mar 12 17:58:09 2024] EXT4-fs (sda2): orphan cleanup on readonly fs
[Tue Mar 12 17:58:09 2024] EXT4-fs (sda2): 3 orphan inodes deleted
[Tue Mar 12 17:58:09 2024] EXT4-fs (sda2): recovery complete

Es ist wohl bei der Reparatur zu 3 Orphans gekommen, aber Prinzipiell hat Linux das File System doch wieder ans Laufen bekommen...

[Codierknecht]

Ich tippe, hier hat der eine Fehler zum nächsten geführt.

@vol907
Kiste so gut es geht aktualisieren, Backup ziehen und dann sauber neu aufsetzen. Mit 'nem fetteren Netzteil.
Reparieren kann man da vermutlich nicht mehr viel.

[MartinP]

Und "neu aufsetzen" nicht mit Bullseye, sondern mit Bookworm ...

Eine Frage noch: Kann man irgendwo im iob diag Hinweise auf ein schwaches Netzteil finden? Oder ist das eine Vermutung, dass das korrupte Dateisystem von einem schwachen Netzteil verursacht wurde?

[Codierknecht]

@martinp

*** RASPBERRY THROTTLING ***
Current issues:
No throttling issues detected.

Previously detected issues:
~ Under-voltage has occurred
~ Arm frequency capping has occurred
~ Throttling has occurred
~ Soft temperature limit has occurred

[vol907]

Influx ist von Anfang an drauf, allerdings nehmen die aufzuzeichnenden States zu. Grafana habe ich auf einem anderen Pi, Kamerastreaming gar nicht.

Kurz bevor die Probleme anfingen, habe ich einige Blocklys erstellt, die per mqtt auf openWB zugreifen. Ob das die Last dermaßen erhöht hat? Zwei openWB's laufen auf zwei weiteren Pi's.

Die Daten, die iobroker sammelt, stammen teilweise aus Geräten, die im Ausland sind. Dort habe ich auch eine FirtzBox und beide habe ich per VPN miteinander verbunden.

Achso, der RPi4 sitzt in einem UPS von Geekworm.

Sage das alles nur, um Hinweise zu sammeln, was ich beim Neuaufsetzen besser mache oder lieber gar nicht mache.

Backups habe ich (Backup-Adapter oder hieß der Backitup?).

Und da war noch die Frage mit dem Expertenmodus. Ja, den habe ich bewusst eingeschaltet, ist aber schon länger her und kann mich nicht genau an den Auslöser erinnern. Ich glaube, das hatte mit einem Adapter zu tun, den ich sonst nicht installieren konnte.

Vielen Dank für das umfangreiche und ultraschnelle Feedback!

[MartinP]

@codierknecht wieder was gelernt

Angesichts der anderen Meldungen wäre ggfs auch eine bessere Kühlung nicht schlecht ... wenn gar kein Kühlkörper montiert ist, muss es ja nicht gleich ein Kühlkörper mit Lüfter sein ...

[Homoran]

@martinp sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

hat Linux das File System doch wieder ans Laufen bekommen...

was immer das bedeuten soll.

jedenfalls sind

@martinp sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

3 orphan inodes deleted

3 verwaiste inodes gelöscht worden und nicht wiederhergestellt.
Also fehlt irgend wo Teile von Datei(en)

[vol907]

In dem Geekworm Teil (ich meine das heißt C728 o.ä.) ist eigentlich ein Lüfter drinnen. Der ist mir auber unglaublich auf den Wecker gegangen, sodass ich ihn nach Monaten abgeschaltet habe. Anfangs habe ich die CPU-Temperatur mit dem Rpi-Monitor beobachtet, es schien alles im Lot zu sein.

Würdet ihr empfehlen, Influx auf einen anderen Pi "outzusourcen"?

[Homoran]

@martinp sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

Kann man irgendwo im iob diag Hinweise auf ein schwaches Netzteil finden

hatte ich zitiert!

@vol907 sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

Under-voltage has occurred

[Homoran]

@vol907

noch etwas.
Du könntest mal mit top nach der CPU Last sehen, wo diese besonders hoch ist.

Die Load average enthält noch weitere Parameter, u.a. die I/O Vorgänge.
Wenn du Probleme mit dem Zugriff auf die SSD hast, kann das auch die Load hochtreiben.
Hängt die SSD etwa am USB 3?

[Codierknecht]

@vol907 sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

Würdet ihr empfehlen, Influx auf einen anderen Pi "outzusourcen"?

Naja ... mit < 300 MB freiem Speicher scheint mir die Kiste ziemlich ausgereizt.
Da wäre auslagern ein mögliches Mittel. Oder aber ein Pi mit 8GB.

Da ich Influx aber selbst nicht verwende, kann ich nix dazu sagen wie ressourcenhungrig das ist.

[vol907]

@homoran Zwei Prozesse an der Spitze mit je um die 100% CPU (wie geht das denn?), und zwar iobroker.js-con und io.mqtt.0. Danach influxdb und javascript mit um die 25% CPU jeder.

mqtt.0 ist die Verbindung zu einer von beiden openWB's, und zwar die, wo ich mit dem Blockly unterwegs bin. Oh je! rpi-monitor zeigt eine CPU-Temperatur von 79 Grad an. Nochmal oh je! Ich schalte meine Blocklys einzeln aus, um die CPU-Last und -Temperatur zu checken ... nach dem Abendessen.

Das Blöde ist, dass ich an dieser Stelle noch einiges vor hatte. Ich wollte per Blockly PV-Überschuss für die Infrarot-Heizung nutzen.

[Homoran]

@vol907 sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

Zwei Prozesse an der Spitze

bitte immer alles zeigen!

@vol907 sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

je um die 100% CPU (wie geht das denn?)

das sind 100% von einem Kern, also 2 Von 4 Kernen schon mal voll ausgelastet.
kein Wunder dass es ihm warm wird.

[Homoran]

@vol907 sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

CPU-Temperatur von 79 Grad an.

passt zum diag

@vol907 sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

Arm frequency capping has occurred
Throttling has occurred
Soft temperature limit has occurred

[vol907]

[Homoran]

@vol907 Danke!
warum hast du denn die Load average abgeschnitten?

Der Controller ist am Anschlag, wahrscheinlich läuft auch MQTT Amok.

@homoran sagte in iobroker plötzlich nicht mehr oder schwer erreichbar:

Hängt die SSD etwa am USB 3?

[vol907]

war keine Absicht

[vol907]

@homoran Sorry, hatte ich vergessen. Positiv!