ioBroker sehr hohe Diskwrites in Proxmox

[Master67]

@homoran.... Adlerauge
Hab es nochmal Geprüft Beginnt um 23:30 Uhr und unten angekommen ist es genau um 0:00 Uhr, aber in wie weit das auch Zeitlich korrekt aufgezeichnet wird weiß ich nicht.
Ich kann nur sagen das die Anwesenheitsprüfung um 22:30 Uhr deaktiviert wird!

[Homoran]

@master67 Dann dürfte, genau wie bei @robbsen redis nicht wirklich den Rückgang bewirken

[Master67]

@homoran... nicht den Rückgang aber das gleichmäßige Schreiben, der fall von 2,94MB auf 1,33MB, könnte sich aber mit der Deaktivierten Anwesenheitserkennung erklären lassen.. oder nicht?

[Homoran]

@master67 sagte in ioBroker sehr hohe Diskwrites in Proxmox:

der fall von 2,94MB auf 1,33MB, könnte sich aber mit der Deaktivierten Anwesenheitserkennung erklären lassen.. oder nicht?

oder!
Warum erst nach 60-90 Minuten?

@master67 sagte in ioBroker sehr hohe Diskwrites in Proxmox:

aber das gleichmäßige Schreiben

du meinst die etwas weniger vorkommenden Spitz(ch)en?
Das eigentlich eher nicht, da Redis ja IMHO genau das Gegenteil macht. Erst sammeln, dann gemeinsam schreiben, um die Schreibzugriffe zu minimieren

[paul53]

@meister-mopper sagte:

Es ist ioBroker, der die hohe Schreiblast verursacht.

Wie groß sind die Log-Dateien unter /opt/iobroker/log?
Wird Redis für die states verwendet?

[Meister Mopper]

@paul53 Ja, redis nur für die states.

[paul53]

@meister-mopper
Die Log-Dateien sind auch nicht zu groß.
Wie sieht es mit History aus ?

[Master67]

@homoran sagte in ioBroker sehr hohe Diskwrites in Proxmox:

oder!
Warum erst nach 60-90 Minuten?

Trägheit der Aufzeichnung die geht sowieso nur 4 Stunden Takt... aber was weiß ich schon davon, das ist nur stochern im Trüben Wasser.

Und wenn Redis erst sammelt und dann schreibt kommt doch die gleichmäßige Schreibkurve zusammen oder verstehe ich das falsch?

[Dr. Bakterius]

Wenn ich in die Grafik der letzten Stunde schaue, gibt es regelmäßige Spitzen. Diese stammen von zwei Adaptern. Nämlich netatmo (gelb) und daswetter (grün).

Bei Netatmo habe ich das Abfrageintervall von 5 auf 10 Minuten erhöht. Das hat eine Reduktion von knapp 20% gebracht. Die Frage ist ob man diese Schreibwerte senken kann (ohne die Intervalle weiter zu erhöhen), bzw. ob Redis hier etwas signifikant verbessern würde?

[crunchip]

Jetzt hab ich mir meins auch mal angesehen, seltsamerweise auch die Änderung ab dem 15.01. Jedoch eher negativ.
Was war die große Veränderung ab diesem Tag? Updates der Adapter und Js-Controller 3.2.x und folgende.
Das ist ein Screen von einer Woche, wenn ich da meine Werte anschau, fall ich ja total aus dem Rahmen, bin bei knapp über 9G Spitze,
vor dem Anstieg lag ich im Schnitt bei knapp 3M

diese von der letzten Stunde, auch da sieht man die spitzen im Detail

das deckt sich auch mit solchen Meldungen

influxdb.0	2021-01-20 18:15:33.302	warn	/ "{\"error\":\"timeout\"}\n"
influxdb.0	2021-01-20 18:15:33.302	warn	(925) Error on writePoint("{"value":22,"time":"2021-01-20T17:05:00.988Z","from":"system.adapter.sonoff.0","q":0,"ack":true}): Error: {"error":"timeout"}
influxdb.0	2021-01-20 18:15:21.085	warn	/ "{\"error\":\"timeout\"}\n"
influxdb.0	2021-01-20 18:15:21.085	warn	(925) Error on writePoint("{"value":4,"time":"2021-01-20T17:04:50.516Z","from":"system.adapter.sonoff.0","q":0,"ack":true}): Error: {"error":"timeout"}
broadlink2.0	2021-01-20 18:15:18.409	info	

[Meister Mopper]

@crunchip Ich bin gerade dabei, geduldig Adapter zu starten, wenn der Vorgänger ruhig wird. Bin mal gespannt welcher es ist ...

[Meister Mopper]

Weiss es noch nicht, aber hier die Reaktion, wenn der synology startet.

Wenn sich das bestätigt, mach ich ein issue auf.

[Meister Mopper]

Jetzt ist es klar. Bei mir ist es der Synology-Adapter. Hier wurde er gerade
ausgeschaltet:

[saeft_2003]

@meister-mopper

kann ich bestätigen mit dem synology adapter!!!

[Meister Mopper]

@saeft_2003 Na ja, da wissen wir ja Bescheid

[saeft_2003]

@meister-mopper

ja aaaaaber davor war der Monate aus. Ich habe diesen heute nur zufällig ( @Glasfaser ) aktiviert.

[Glasfaser]

In der Standarteinstellung ist 100 ms

Stellt ihn mal hoch , was ist dann !?

[saeft_2003]

@glasfaser

100ms ist Standard?

Bei mir stand es auf 5000ms ich habe es jetzt einfach mal extrem erhöht auf 50000ms und schaue was der diskwrite sagt.

[Meister Mopper]

@saeft_2003 sagte in ioBroker sehr hohe Diskwrites in Proxmox:

habe es jetzt einfach mal extrem erhöht auf 50000ms

Mit diesem Wert herrscht auch bei mir wieder Ruhe

Spoiler

[saeft_2003]

@meister-mopper

Also ich habe einen diskwrite von ca 3-4 MB pro Sek im Durchschnitt das macht in der Stunde 10 GB. Ich verstehe immer noch nicht wo diese Datenmengen herkommen...

Ist dazu einer von euch schon schlauer?