ioBroker sehr hohe Diskwrites in Proxmox
-
@dr-bakterius sagte in ioBroker sehr hohe Diskwrites in Proxmox:
@apollon77 sagte in ioBroker sehr hohe Diskwrites in Proxmox:
crib adapter sind in meinen Augen die einzigen die so ein behavior an den Tag legen dürfen ;-). Deamon Adapter sollten es nicht tun.
Gut, und jetzt steige ich aus...
Musst du nicht.
Den Ausdruck kannte ich bis eben auch nicht!
Aber wenn Daemon das Gegenteil ist, müssten crib-Adapter die scheduled Adapter, wie DWD/iCal usw. sein -
Am Ende gibt es zwei Haupt-Typen von adaptersn: Schedule: Die werden zu definierten Zeiten gestartet (meistens Wetter adapter). "Deamon" Adapter sind die die man startet und die dann immer laufen. Die sollen bitte am Anfang einmalig Objekte anlegen und dann nur wenn nötig ist ändern. Da muss im Zweifel der Entwickler ran
-
Da meine objects.json 32mb beträgt und bevor ich diese ebenfalls auf redis umstelle, habe ich nun mal
"writeFileInterval": 3600000,für objekte hinterlegt, mal sehen wie sich das verhält. Zwischenzeitlich mach ich mir trotzdem mal Gedanken, ob und wenn ja, wie ich das am sinnvollsten umsetzten könnte.
mit aktueller Einstellung ergibt sich bei knapp einem Tag, folgender Wert
-
ich dachte eben noch: och, bei mir sieht das mit JS3.2 aber alles easy aus...nunja, 260 GB in 2 Tagen
doch was mehr als ich dachte...schreibe aber auf 4 Platten, normale HDDs - ach kakke...stimmt nicht, ioBroker läuft auf ner SSD O.oSieht da für euch irgendwas schlimm aus?
-
@kueppert alles im grünen Bereich
-
Ich hatte testweise den ioBroker auf die Synology (HDD) ausgelagert - war aber leider weniger performant als direkt auf ne SSD ^^ Habs daher wieder zurück gedreht (geht ja bei Proxmox - wenn man weiß wie zumindest - relativ flott -- hat bei mir nen halben Tag gedauert
) -
3,15 TB in 7 Tagen...
Übeltäter schon gefunden: DWD Cronjob stand auf 1 Minute, anstatt 1 Stunde.
Mal schauen, was nach weiteren 7 Tagen da steht...Wearout nach 3 Jahren ioBroker:
-
Steht bei dir dann 15% wearout unter disks?
-
@ftdAuch wenn bissl off topic: Was auch immer der wearout Wert bei Proxmox bedeutet. Ich habe dazu ehrlich noch nie was klares gefunden. Man kann annehmen das das irgendwie sie SMART Werte nimmt und geschriebene Daten vs "maximal daten laut ssd datenblatt" ... keine Ahnung ...
-
@saeft_2003 Ja, die 15% stehen unter Disks.
@apollon77 Ich mach mir da nicht so den Kopf... die Platte kostet neu 30€. Backups über alles laufen problemlos... wenn Ausfall, dann austauschen, Backup zurückspielen, fertig.
@all Macht euch über die Wearouts nicht verrückt:
Samsung SSD EVO 850 (3,7 Jahre, 4% Wearout )
Crossair Force SSD (7,6 Jahre, 0% Wearout)
Samsung HD (11,6 Jahre, kein Wearout gelogged, summt im Dauerbetrieb wie ein Bienchen)
Zurück zum Topic: Seitdem der DWD nicht mehr minütlich schreibt, ist Ruhe bei den Diskwrites (da bei 24.01. gegen 00:00 Uhr die hellgrüne Linie):
-
@apollon77 sagte in ioBroker sehr hohe Diskwrites in Proxmox:
irgendwie sie SMART Werte nimmt und geschriebene Daten vs "maximal daten laut ssd datenblatt"
Glaube ich nicht. Bei mir werden die geschriebenen Blöcke angezeigt, doch unter Wearout finde ich nur 'N/A'.
Und auch die 'Total_LBAs_Written' nehme ich Proxmox bzw. S.M.A.R.T. nicht ab. Da steht bei mir nach 19 Monaten Betrieb doch nur 19941. Umgerechnet sind das keine 10 MB! Das hat man nach wenigen Sekunden Betrieb schon beisammen.
Eine zweite (ältere) SSD wird mir mit 69661 (= 34 MB) angezeigt.
tune2fszeigt für die gleiche Platte aber 96 GB Lifetime writes an.Also wirklich verlassen darf man sich auf die Werte nicht...
-
Also meine LBAs Written sind etws höher ... aber ja keine Ahnung was der Wert genau bedeutet. Ich hoffe und vertraue da den SMART Werten das Sie mir rechtzeitig sagen und ja je nach SSD sinds 30-100 EUR grob ... und bei mir darf eine SSD bzw ein Node ohne auswirkungen ausfallen, also alles gut
-
Der wearout von proxmox bezieht sich auf „ssd_life_left“ oder „media_wearout_indicator“
(Je nach Hersteller) hier sind 100 —> 0%, 85 —> 15% usw... -
@ftd welche Datenpunkte greifst du hier über welchen Adapter ab??
PS: Ich liege immer noch bei 50 GB/Tag und weiß nicht, wo das her kommt ^^
-
@kueppert gibts als fertiges proxmox Dashboard
-
@crunchip danke dir, aber ich nutze kein Grafana und dachte, ich visualisiere es mir selbst...hab nur keine passenden Objekte zum Loggen gefunden - außer
proxmox.0.qemu_ioBroker.diskwrite -
@kueppert es gibt den ein oder anderen Adapter, der entsprechend die objekt.json neu schreiben lässt, beim ein oder anderen ist auch dort direkt Handlungsbedarf, wie z.b. WLED, hab dort schon Bescheid gegeben. Zum anderen ist ja, wie oben erwähnt, noch in Klärung, wie es gehandhabt wird mit Zustandsänderung(timestamp).
Andernfalls wurde auch der "workaround" genannt, nen Schreibintervall zu setzen, habe ich z.b. siehe
-
@crunchip danke dir. Werde ich mal bei mir einfügen.
PS: bei 12 GB/Tag würde ich mir ja keine Gedanken machen ^^NACHTRAG: hab den Code-Snippet auch mal bei mir eingefügt und schaue mir das Verhalten jetzt weiter an.
- NACHTRAG: bei mir fällt auf, dass der WEBSPEEDY-Adapter zu hohen DISK-IOs führt (das einzige was mir bei DISK IO im Proxmox aufgefanne ist. Zeiten Ausschlag zum Lauf des Speedy passen zusammen). Muss aber nicht zu meinen 50 GB/Tag führen...
-
@crunchip sagte in ioBroker sehr hohe Diskwrites in Proxmox:
...habe ich nun mal
"writeFileInterval": 3600000,für objekte hinterlegt, mal sehen wie sich das verhält.Hier muss ich mal nachfragen. Was bedeutet das genau?
-
Die ObjectsDB wird einmal die Stunde geschrieben, auch wenn keine Änderungen in der Zeit angefallen sind.
-
Die ObjectsDB wird nur dann einmal die Stunde geschrieben, wenn Änderungen angefallen sind.
-
Die ObjectsDB wird auch dann nur einmal die Stunde geschrieben, wenn in der Zeit beliebig viele Änderungen angefallen sind?
Ich vermute 3, richtig?
-
-
@ofbeqnpolkkl6mby5e13 Sobald es eine Änderung gab läuft der Counter und dann werden alle Änderungen die ab dann bis zum Ablauf der 60 Mins aufgelaufen sind zusammen geschrieben
