iobroker läuft wieder nicht...

Thomas Braun

@pahan Du sollst das nach Percent_CPU sortieren, nicht nach M_Resident.

Pahan

@thomas-braun sagte in iobroker läuft wieder nicht...:

@pahan Du sollst das nach Percent_CPU sortieren, nicht nach M_Resident.

anbei eine Momentaufnahme :

Thomas Braun

@pahan

Bei einer konstanten Load von 12 muss da irgendwas herausstechen.

Nutzt dir aber auch nur bedingt was, das zu wissen. Da dürfte es irgendwo eine Fehleinstellung oder ein krummes Skript geben.

Pahan

@thomas-braun sagte in iobroker läuft wieder nicht...:

@pahan

Bei einer konstanten Load von 12 muss da irgendwas herausstechen.

Nutzt dir aber auch nur bedingt was, das zu wissen. Da dürfte es irgendwo eine Fehleinstellung oder ein krummes Skript geben.

...und deswegen ist die admin Instanz über den Webbrowser nicht erreichbar? Weil zu viel Speicher/CPU von einem anderen Dienst gebraucht wird?

Ich gehe mal auf die Suche....kann es mit Grafana oder InfluxDB zusammenhängen?

Und noch eine Frage: auf dem Raspi habe ich ja nur iobroker laufen. Macht es Sinn, eine Instanz nach der anderen zu deaktivieren und den Load dabei im Auge behalten, wann dieser stark abfällt?

Thomas Braun

@pahan sagte in iobroker läuft wieder nicht...:

...und deswegen ist die admin Instanz über den Webbrowser nicht erreichbar? Weil zu viel Speicher/CPU von einem anderen Dienst gebraucht wird?

Indirekt. Der Admin startet nicht, weil er die iob-interne Datenbank nicht erreichen kann. Und die kann nicht erreicht werden, weil die Kiste hoffnungslos mit irgendwas anderem zugeballert wird.

Und noch eine Frage: auf dem Raspi habe ich ja nur iobroker laufen.

Und Grafana. Und Influx...

Macht es Sinn, eine Instanz nach der anderen zu deaktivieren und den Load dabei im Auge behalten, wann dieser stark abfällt?

Kannst du probieren. Da wird aber vermutlich nicht auf einen Adapter/Instanz zurückzuführen sein.

? Offline

@pahan sagte in iobroker läuft wieder nicht...:

Und noch eine Frage: auf dem Raspi habe ich ja nur iobroker laufen.

Moin,

das sehe ich aber anders, Du hast da auch influxDB und Grafana installiert und am Laufen, siehe htop.

Wenn Du es verkraften kannst, eine Lücke in den Historien-Daten zu haben, würde ich mal Grafana und influxDB stoppen und schauen, was der Load dann macht.
Hast Du Skripte in ioBroker am Laufen, dann kann man auch alle Skripte mal stoppen und einzeln wieder anknipsen und schauen, ob da eines ist, das ein Problem verursacht.

Dann ist eine SD-Karte nicht unbedingt, die schnellste Art etwas zu speichern, gerade wenn es such noch Daten in eine influxDB sind, zumal das auch die Lebenszeit der SD-Karte verringert.

Dann ist Dein /var/log/journal 3 GB groß, da muss schon 'ne Menge an Log Information drin sein,

/var:
4.1G    /var/
3.4G    /var/log
3.0G    /var/log/journal/9177676efac74b1994c74dac83b5d5f4
3.0G    /var/log/journal

Du kannst Dir mal die letzten 100 Zeilen daraus anschauen

# sudo journalctl -n 100

Oder Du suchst direkt nach error

# sudo journalctl -g 'error'

Ich vermute, dass das System nicht sauber eingerichtet ist und daher auch die Logs nicht rotieren und nur anwachsen, in einem 3 GB großem File ist es dann auch schwer das wichtige herauszusuchen.
Um da erst mal wieder eine vernünftige Basis hinzubekommen, dampfen wir das journal erst einmal auf die letzten 24 Std. ein

# sudo journalctl --flush --rotate --vacuum-time=24h

Dann solltest Du schauen, ob Log Rotation eingerichtet ist und akkurat läuft

# sudo systemctl status logrotate.timer
# sudo systemctl status logrotate.service

Beides sollte in etwas so aussehen

dp20eic@iobroker:~$ sudo systemctl status logrotate.*
[sudo] password for dp20eic: 
* logrotate.timer - Daily rotation of log files
     Loaded: loaded (/lib/systemd/system/logrotate.timer; enabled; vendor preset: enabled)
     Active: active (waiting) since Tue 2023-10-17 09:21:40 CEST; 17h ago
    Trigger: Thu 2023-10-19 00:00:00 CEST; 20h left
   Triggers: * logrotate.service
       Docs: man:logrotate(8)
             man:logrotate.conf(5)

Oct 17 09:21:40 iobroker systemd[1]: Started Daily rotation of log files.
dp20eic@iobroker:~$ sudo systemctl status logrotate.service 
* logrotate.service - Rotate log files
     Loaded: loaded (/lib/systemd/system/logrotate.service; static)
     Active: inactive (dead) since Wed 2023-10-18 00:00:33 CEST; 3h 4min ago
TriggeredBy: * logrotate.timer
       Docs: man:logrotate(8)
             man:logrotate.conf(5)
    Process: 9236 ExecStart=/usr/sbin/logrotate /etc/logrotate.conf (code=exited, status=0/SUCCESS)
   Main PID: 9236 (code=exited, status=0/SUCCESS)
        CPU: 69ms

Oct 18 00:00:33 iobroker systemd[1]: Starting Rotate log files...
Oct 18 00:00:33 iobroker systemd[1]: logrotate.service: Succeeded.
Oct 18 00:00:33 iobroker systemd[1]: Finished Rotate log files.

Was und wie rotiert wird, steht in den Konfigurationen

# ls -la /etc/logrotate.d/

VG
Bernd

Pahan

habe jetzt mal erst Grafana, dann InfluxDB angehalten. Die Auslastung ist nicht signifikant gesunken. Anschließend habe ich den iobroker angehalten und die Auslastung sank langsam bis auf ein Minumum ab. Dann habe ich Grafana und InfluxDB erneut gestartet, die Auslastung ist nicht gestiegen und sieht mit ausgeschaltetem iobroker so aus:

Pahan

@dp20eic sagte in iobroker läuft wieder nicht...:

Moin,

das sehe ich aber anders, Du hast da auch influxDB und Grafana installiert und am Laufen, siehe htop.

Wenn Du es verkraften kannst, eine Lücke in den Historien-Daten zu haben, würde ich mal Grafana und influxDB stoppen und schauen, was der Load dann macht.

den Test habe ich einen Beitrag höher gemacht

Hast Du Skripte in ioBroker am Laufen, dann kann man auch alle Skripte mal stoppen und einzeln wieder anknipsen und schauen, ob da eines ist, das ein Problem verursacht.

Sehr guter Punkt, wie kann ich die einzelnen Scripte über die Shell stoppen? Übers Webinterface komme ich ja nicht drauf.

Dann ist eine SD-Karte nicht unbedingt, die schnellste Art etwas zu speichern, gerade wenn es such noch Daten in eine influxDB sind, zumal das auch die Lebenszeit der SD-Karte verringert.

Dann ist Dein /var/log/journal 3 GB groß, da muss schon 'ne Menge an Log Information drin sein,
/var:
4.1G    /var/
3.4G    /var/log
3.0G    /var/log/journal/9177676efac74b1994c74dac83b5d5f4
3.0G    /var/log/journal
Du kannst Dir mal die letzten 100 Zeilen daraus anschauen
# sudo journalctl -n 100

Das ist die Ausgabe hierzu :

pi@raspberrypi:~ $ sudo journalctl -n 100
-- Journal begins at Tue 2023-10-17 23:35:32 CEST, ends at Wed 2023-10-18 22:30:43 CEST. --
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:23:55.309088Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:23:45 +0200] "POST /write?databa>
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:23:55.312711Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:23:45 +0200] "POST /write?databa>
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:23:55.661974Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:01.843854Z lvl=info msg="failed to store statistics" l>
Oct 18 22:24:05 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:23:55 +0200] "POST /write?databa>
Oct 18 22:24:05 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:05.396397Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:09 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:18 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:27 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:27 raspberrypi kernel: I/O error, dev mmcblk0, sector 21772856 op 0x0:(READ) flags 0x0 phys_seg 1 prio class 2
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?databa>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.430373Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?databa>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431223Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?databa>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431333Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?databa>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431746Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?databa>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431810Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?databa>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431997Z lvl=error msg="[500] - \"timeout\"" log_id=>
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.iot.0 => false [Process stopp>
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.logparser.0 => false [Process>
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.iot.0 => false [system.adapte>
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.logparser.0 => false [system.>
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.admin.0 => false [Process sto>
lines 1-30...skipping...
-- Journal begins at Tue 2023-10-17 23:35:32 CEST, ends at Wed 2023-10-18 22:30:43 CEST. --
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:23:55.309088Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:23:45 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:23:55.312711Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:23:45 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:23:55.661974Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:01 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:01.843854Z lvl=info msg="failed to store statistics" log_id=0ky5Mxt0000 service=monitor error=ti>
Oct 18 22:24:05 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:23:55 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:05 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:05.396397Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:09 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:18 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:27 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:27 raspberrypi kernel: I/O error, dev mmcblk0, sector 21772856 op 0x0:(READ) flags 0x0 phys_seg 1 prio class 2
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.430373Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431223Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431333Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431746Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431810Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.431997Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.iot.0 => false [Process stopped]
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.logparser.0 => false [Process stopped]
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.iot.0 => false [system.adapter.iot.0.logging]
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.logparser.0 => false [system.adapter.logparser.0.logging]
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.admin.0 => false [Process stopped]
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.432348Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.432359Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.432450Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.432920Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.433010Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.436476Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi bash[6214]: ================================== > LOG REDIRECT system.adapter.admin.0 => false [system.adapter.admin.0.logging]
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.436740Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.436945Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.436984Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.437301Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.437642Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.437836Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.438126Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.438435Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.438681Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.438958Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.439043Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.439424Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.439482Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.440033Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.440330Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.440500Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.440880Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.440970Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.441260Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:01 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:11.442436Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:12.165812Z lvl=info msg="failed to store statistics" log_id=0ky5Mxt0000 service=monitor error=ti>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: [httpd] 127.0.0.1 - admin [18/Oct/2023:22:24:05 +0200] "POST /write?database=iobroker&db=iobroker&p=%5BREDACTED%5D&p>
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:15.403326Z lvl=error msg="[500] - \"timeout\"" log_id=0ky5Mxt0000 service=httpd
Oct 18 22:24:27 raspberrypi influxd-systemd-start.sh[5201]: ts=2023-10-18T20:24:22.414040Z lvl=info msg="failed to store statistics" log_id=0ky5Mxt0000 service=monitor error=ti>
Oct 18 22:24:28 raspberrypi systemd[1]: iobroker.service: Main process exited, code=exited, status=1/FAILURE
Oct 18 22:24:28 raspberrypi systemd[1]: iobroker.service: Failed with result 'exit-code'.
Oct 18 22:24:28 raspberrypi systemd[1]: Stopped ioBroker Server.
Oct 18 22:24:28 raspberrypi systemd[1]: iobroker.service: Consumed 8min 9.021s CPU time.
Oct 18 22:24:28 raspberrypi sudo[7441]: pam_unix(sudo:session): session closed for user root
Oct 18 22:29:24 raspberrypi sudo[7455]:       pi : TTY=pts/0 ; PWD=/home/pi ; USER=root ; COMMAND=/usr/bin/journalctl --flush --rotate --vacuum-time=24h
Oct 18 22:29:24 raspberrypi sudo[7455]: pam_unix(sudo:session): session opened for user root(uid=0) by pi(uid=1000)
Oct 18 22:29:24 raspberrypi systemd-journald[3968]: System Journal (/var/log/journal/9177676efac74b1994c74dac83b5d5f4) is 304.0M, max 2.8G, 2.5G free.
Oct 18 22:29:24 raspberrypi sudo[7455]: pam_unix(sudo:session): session closed for user root
Oct 18 22:30:24 raspberrypi grafana[5179]: logger=cleanup t=2023-10-18T22:30:24.714401245+02:00 level=info msg="Completed cleanup jobs" duration=30.472164ms
Oct 18 22:30:25 raspberrypi grafana[5179]: logger=grafana.update.checker t=2023-10-18T22:30:25.003111806+02:00 level=info msg="Update check succeeded" duration=64.09045ms
Oct 18 22:30:25 raspberrypi grafana[5179]: logger=plugins.update.checker t=2023-10-18T22:30:25.133734372+02:00 level=info msg="Update check succeeded" duration=139.361941ms
Oct 18 22:30:43 raspberrypi sudo[7463]:       pi : TTY=pts/0 ; PWD=/home/pi ; USER=root ; COMMAND=/usr/bin/journalctl -n 100
Oct 18 22:30:43 raspberrypi sudo[7463]: pam_unix(sudo:session): session opened for user root(uid=0) by pi(uid=1000)

Um da erst mal wieder eine vernünftige Basis hinzubekommen, dampfen wir das journal erst einmal auf die letzten 24 Std. ein
# sudo journalctl --flush --rotate --vacuum-time=24h 

Habe ich gemacht

Dann solltest Du schauen, ob Log Rotation eingerichtet ist und akkurat läuft

sieht bei mir auch so aus, wie bei dir

Codierknecht

@pahan sagte in iobroker läuft wieder nicht...:

Sehr guter Punkt, wie kann ich die einzelnen Scripte über die Shell stoppen? Übers Webinterface komme ich ja nicht drauf.

Du kannst in der Shell die Instanz stoppen und dann im Webinterface die Scripte stoppen.
Danach kannst Du die Instanz wieder starten und nach und nach die einzelnen Scripte.

Thomas Braun

@pahan sagte in iobroker läuft wieder nicht...:

kernel: I/O error, dev mmcblk0

Die Karte hat 'nen dicken Schuss. Schmeiß die in die Tonne.
Das könnte auch für die hohe Auslastung verantwortlich sein.

Pahan

@codierknecht sagte in iobroker läuft wieder nicht...:

@pahan sagte in iobroker läuft wieder nicht...:

Sehr guter Punkt, wie kann ich die einzelnen Scripte über die Shell stoppen? Übers Webinterface komme ich ja nicht drauf.

Du kannst in der Shell die Instanz stoppen und dann im Webinterface die Scripte stoppen.
Danach kannst Du die Instanz wieder starten und nach und nach die einzelnen Scripte.

javascript.0 ist dauerhaft disabled, dennoch habe den hohen load und komme nicht auf die admin Oberfläche.

Dann können es eigentlich gar nicht die Scripte sein, die für derartige Auslastung sorgen, oder?

Pahan

@thomas-braun sagte in iobroker läuft wieder nicht...:

@pahan sagte in iobroker läuft wieder nicht...:

kernel: I/O error, dev mmcblk0

Die Karte hat 'nen dicken Schuss. Schmeiß die in die Tonne.
Das könnte auch für die hohe Auslastung verantwortlich sein.

Würde ich gerne, aber erstmal würde ich gerne ein Backup machen oder eine Spiegelung auf eine neue Karte, aber dafür sollte ich auf die admin Oberfläche....so mein Verständnis
:grimacing:

Thomas Braun

@pahan

Ein Backup eines Trümmerfeldes macht ja gar keinen Sinn. Das Ding ist Schrott. Jetzt ist die Zeit ein zuvor angelegtes Backup aus dem Hut zu zaubern.

haselchen

@pahan

Und dann? Willst Du die Probleme sichern?

Sinnfrei , merkste selber oder?
Versuch Skript Ordner , Node Red Ordner , VIS Ordner zu kopieren ( ohne Gewähr,dass Du da Probleme mitkopierst)
Und nach einer Neuinstallation kannste ja probieren diese einzubinden und siehst dann, ob Du Deine (wichtigen) Daten retten konntest.

Pahan

@thomas-braun sagte in iobroker läuft wieder nicht...:

@pahan

Ein Backup eines Trümmerfeldes macht ja gar keinen Sinn. Das Ding ist Schrott. Jetzt ist die Zeit ein zuvor angelegtes Backup aus dem Hut zu zaubern.

Nun ja, ich habe regelmäßig Backups gemacht, befürchte aber, dass die letzten alle so sind. Ich habe da echt eine Menge Arbeit in die Visualisierung und Verknüpfungen reingesteckt, da würde ich 4-5 Jahre wegschmeißen.

Daher dachte ich, dass ich jetzt versuche einigermaßen aufs Webinterface zu kommen, das System einigermaßen zu stabilisieren und dann ein Backup mache.

Und dann das System komplett neu aufspielen

Thomas Braun

@pahan sagte in iobroker läuft wieder nicht...:

einigermaßen zu stabilisieren und dann ein Backup mache.

Wird nicht funktionieren, wenn die SD-Karte wurmstichig ist.

Pahan

@haselchen sagte in iobroker läuft wieder nicht...:

@pahan

Und dann? Willst Du die Probleme sichern?

Sinnfrei , merkste selber oder?
Versuch Skript Ordner , Node Red Ordner , VIS Ordner zu kopieren ( ohne Gewähr,dass Du da Probleme mitkopierst)

Sind es denn Probleme in der SW (Adapter, Instanzen, Verknüpfungen, Scripte) oder in der HW, wie es aus dem Log hervorgeht und wie Thomas meint, dass die die SD Karte "hin" ist?

Und nach einer Neuinstallation kannste ja probieren diese einzubinden und siehst dann, ob Du Deine (wichtigen) Daten retten konntest.

Wie stehen die Chancen, dass so etwas klappt? Mir ist die Visualisierung mit den ganzen Verknüpfungen enorm wichtig

Thomas Braun

@pahan

Oct 18 22:24:09 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:18 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:27 raspberrypi kernel: mmc0: Got data interrupt 0x00000002 even though no data operation was in progress.
Oct 18 22:24:27 raspberrypi kernel: I/O error, dev mmcblk0, sector 21772856 op 0x0:(READ) flags 0x0 phys_seg 1 prio class 2

Das deutet für mich recht eindeutig auf physische Defekte auf der Karte hin. Konkret ist der Sektor 21772856 hinüber.

? Offline

Moin,

Oct 18 22:24:27 raspberrypi kernel: I/O error, dev mmcblk0, sector 21772856 op 0x0:(READ) flags 0x0 phys_seg 1 prio class 2

Du kannst da natürlich versuchen noch was zu retten, hängt aber an Deinem Skill, ob Du etwas von Forensik verstehst?

Es gibt Tools auch für KleinWeich, mittels derer man Datenrettung vornehmen kann, es gibt auch im Internet Dienste, die das für Geld übernehmen.
Wenn Du genug Erfahrung hast, kannst Du das auch selbst machen, indem Du die Kiste richtig herunterfährst,

# sudo shutdown -h now

Dann die Karte in einen anderen Rechner, am besten ein Linux PC, dann kann man erst einmal versuchen, mittels fsck.ext4 zu schauen, was da alles im Argen ist.

Wenn aber in diesem Block wichtige Daten lagen, z. B. aus der VIS, dann kann es sein, dass da dann doch etwas nicht mehr geht.

VG
Bernd

P.S.: Dir dabei remote zu helfen wird schwer, denn man muss da schon genau lesen und entscheiden, ob man Ja, oder Nein sagt, wenn ein Block ersetzt werden soll.

Community Forum

NEWS

iobroker läuft wieder nicht...

Support us

479

32.7k

82.3k

1.3m