Skip to content
  • Home
  • Recent
  • Tags
  • 0 Unread 0
  • Categories
  • Unreplied
  • Popular
  • GitHub
  • Docu
  • Hilfe
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Default (No Skin)
  • No Skin
Collapse
ioBroker Logo

Community Forum

donate donate
  1. ioBroker Community Home
  2. Deutsch
  3. ioBroker Allgemein
  4. ioBroker sehr hohe Diskwrites in Proxmox

NEWS

  • Jahresrückblick 2025 – unser neuer Blogbeitrag ist online! ✨
    BluefoxB
    Bluefox
    17
    1
    2.1k

  • Neuer Blogbeitrag: Monatsrückblick - Dezember 2025 🎄
    BluefoxB
    Bluefox
    13
    1
    936

  • Weihnachtsangebot 2025! 🎄
    BluefoxB
    Bluefox
    25
    1
    2.2k

ioBroker sehr hohe Diskwrites in Proxmox

Scheduled Pinned Locked Moved ioBroker Allgemein
405 Posts 35 Posters 77.7k Views 30 Watching
  • Oldest to Newest
  • Newest to Oldest
  • Most Votes
Reply
  • Reply as topic
Log in to reply
This topic has been deleted. Only users with topic management privileges can see it.
  • DiginixD Diginix

    @amg_666 Wenn er nur das Loglevel vom Host hochgesetzt hat, dann kann das vorher höhere Diskwrite schon vom Host und dessen "info" Zeilen im Log stammen. Müsste sich ja auch an der reinen Dateigröße der Logfiles erkennen lassen.
    @saeft_2003 Wie groß sind denn deine Logs der letzten Tage? Und das von heute und zukünftige müssten dann deutlich kleiner ausfallen.

    S Offline
    S Offline
    saeft_2003
    Most Active
    wrote on last edited by
    #331

    @diginix sagte in ioBroker sehr hohe Diskwrites in Proxmox:

    @saeft_2003 Wie groß sind denn deine Logs der letzten Tage? Und das von heute und zukünftige müssten dann deutlich kleiner ausfallen.

    Gezippt sind diese 5-6kb groß. Übermorgen habe ich einen kompletten Tag mit host auf warn dann kann ich sagen wie groß das log dann ist.

    M 1 Reply Last reply
    0
    • S saeft_2003

      @diginix sagte in ioBroker sehr hohe Diskwrites in Proxmox:

      @saeft_2003 Wie groß sind denn deine Logs der letzten Tage? Und das von heute und zukünftige müssten dann deutlich kleiner ausfallen.

      Gezippt sind diese 5-6kb groß. Übermorgen habe ich einen kompletten Tag mit host auf warn dann kann ich sagen wie groß das log dann ist.

      M Offline
      M Offline
      Marty56
      wrote on last edited by Marty56
      #332

      Bei mir scheint der "Übeltäter" die Persistenz der Redis Datenbank zu sein.
      Ich hatte die Defaultwerte mit 5 min bei geänderten 10 keys.

      Ich habe die Backup Frequenz mehr als den Faktor 10 reduziert.

      save 30000 1
      save 3600 10
      save 60 10000

      HW:NUC (16 GB Ram)
      OS: Debian Bullseye, Promox V7, node v16.x npm 8.19.3

      apollon77A 1 Reply Last reply
      0
      • M Marty56

        Bei mir scheint der "Übeltäter" die Persistenz der Redis Datenbank zu sein.
        Ich hatte die Defaultwerte mit 5 min bei geänderten 10 keys.

        Ich habe die Backup Frequenz mehr als den Faktor 10 reduziert.

        save 30000 1
        save 3600 10
        save 60 10000

        apollon77A Offline
        apollon77A Offline
        apollon77
        wrote on last edited by
        #333

        @marty56 ja das ist so eine sache. Aus dem Grund laufen bei mir zwei redis Instanzen und so objects und States getrennt. Objects mir aof persistent und States mit normaler persistent mit angepassten Werten. Das war bisher das optimum.

        Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

        • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
        • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
        M 1 Reply Last reply
        0
        • apollon77A apollon77

          @marty56 ja das ist so eine sache. Aus dem Grund laufen bei mir zwei redis Instanzen und so objects und States getrennt. Objects mir aof persistent und States mit normaler persistent mit angepassten Werten. Das war bisher das optimum.

          M Offline
          M Offline
          Marty56
          wrote on last edited by Marty56
          #334

          @apollon77 Danke für den Hinweis.

          Allgemein.

          Vorab. Ich bewundere das Engagement von den vielen ehrenamtlichen Entwicklern und die tolle Leistung. Ich liebe iobroker immer noch, aber
          die Komplexität von iobroker ist viel zu groß.

          Es ist sehr bedauerlich, dass der Nutzer sich mit dieser Art von "Eingeweide"- Konfiguration überhaupt beschäftigen muss

          Mich hat das Thema fast 2 h gekostet, bis ich den ganzen "Quatsch" mit der Redis Config für diese Spezialität so halbwegs verstanden und geändert hatte.

          Außerdem hätte ich nicht Promox genutzt, dann wäre mir die SSD- Schreiberei gar nicht aufgefallen und z.B. auf einem Raspberry wäre mir die SD Karte nach einem halben Jahr abgeraucht. Ich hätte mich gewundert und beim nächsten Ausfall wäre ich vermutlich zu Amazon oder Google gewechselt und hätte zähneknirschend auf etliche Funktionen verzichtet.

          Klar, wenn ich hauptberuflich Systemadministrator wäre, dann würde ich darüber nur schmunzeln und die Sache wäre in einer Minute erledigt.

          So muss ich ein Know How aufbauen, was ich einmal in meinem Leben benötige, in einem Monat ohnehin wieder vergessen haben und bei der nächsten ioBroker Installation in 2 Jahren wiederholt sich dieser Prozess wieder. Das killt jegliche Produktivität.

          So wird ioBroker leider nie Mainstream und nur nutzbar für Linux Admins und Nerds. Die Folge, die drei Gatekeeper, Apple, Google und Amazon werden sich den Markt unter sich aufteilen, mit schlechten Ansätzen dominieren und die IoT- Hersteller mit Lizenzen zu teuren Produkte zwingen.

          Das ist sehr schade und eine verpasste Chance.

          HW:NUC (16 GB Ram)
          OS: Debian Bullseye, Promox V7, node v16.x npm 8.19.3

          Thomas BraunT crunchipC apollon77A 3 Replies Last reply
          0
          • M Marty56

            @apollon77 Danke für den Hinweis.

            Allgemein.

            Vorab. Ich bewundere das Engagement von den vielen ehrenamtlichen Entwicklern und die tolle Leistung. Ich liebe iobroker immer noch, aber
            die Komplexität von iobroker ist viel zu groß.

            Es ist sehr bedauerlich, dass der Nutzer sich mit dieser Art von "Eingeweide"- Konfiguration überhaupt beschäftigen muss

            Mich hat das Thema fast 2 h gekostet, bis ich den ganzen "Quatsch" mit der Redis Config für diese Spezialität so halbwegs verstanden und geändert hatte.

            Außerdem hätte ich nicht Promox genutzt, dann wäre mir die SSD- Schreiberei gar nicht aufgefallen und z.B. auf einem Raspberry wäre mir die SD Karte nach einem halben Jahr abgeraucht. Ich hätte mich gewundert und beim nächsten Ausfall wäre ich vermutlich zu Amazon oder Google gewechselt und hätte zähneknirschend auf etliche Funktionen verzichtet.

            Klar, wenn ich hauptberuflich Systemadministrator wäre, dann würde ich darüber nur schmunzeln und die Sache wäre in einer Minute erledigt.

            So muss ich ein Know How aufbauen, was ich einmal in meinem Leben benötige, in einem Monat ohnehin wieder vergessen haben und bei der nächsten ioBroker Installation in 2 Jahren wiederholt sich dieser Prozess wieder. Das killt jegliche Produktivität.

            So wird ioBroker leider nie Mainstream und nur nutzbar für Linux Admins und Nerds. Die Folge, die drei Gatekeeper, Apple, Google und Amazon werden sich den Markt unter sich aufteilen, mit schlechten Ansätzen dominieren und die IoT- Hersteller mit Lizenzen zu teuren Produkte zwingen.

            Das ist sehr schade und eine verpasste Chance.

            Thomas BraunT Online
            Thomas BraunT Online
            Thomas Braun
            Most Active
            wrote on last edited by Thomas Braun
            #335

            @Marty56
            Viele Möglichkeiten ergeben quasi zwangsläufig eine höhere Komplexität.

            Wenn du nur einen Radiobutton zur Verfügung stellst, dann ist das ganze halt wesentlich einfacher, du bist aber als User auf die beiden Einstellungen beschränkt. Wenn du alle Möglichkeiten zur Verfügung stellst kommst du auch mit einem simplen EIN/AUS-Schalter nicht mehr hin.

            Linux-Werkzeugkasten:
            https://forum.iobroker.net/topic/42952/der-kleine-iobroker-linux-werkzeugkasten
            NodeJS Fixer Skript:
            https://forum.iobroker.net/topic/68035/iob-node-fix-skript
            iob_diag: curl -sLf -o diag.sh https://iobroker.net/diag.sh && bash diag.sh

            1 Reply Last reply
            0
            • M Marty56

              @apollon77 Danke für den Hinweis.

              Allgemein.

              Vorab. Ich bewundere das Engagement von den vielen ehrenamtlichen Entwicklern und die tolle Leistung. Ich liebe iobroker immer noch, aber
              die Komplexität von iobroker ist viel zu groß.

              Es ist sehr bedauerlich, dass der Nutzer sich mit dieser Art von "Eingeweide"- Konfiguration überhaupt beschäftigen muss

              Mich hat das Thema fast 2 h gekostet, bis ich den ganzen "Quatsch" mit der Redis Config für diese Spezialität so halbwegs verstanden und geändert hatte.

              Außerdem hätte ich nicht Promox genutzt, dann wäre mir die SSD- Schreiberei gar nicht aufgefallen und z.B. auf einem Raspberry wäre mir die SD Karte nach einem halben Jahr abgeraucht. Ich hätte mich gewundert und beim nächsten Ausfall wäre ich vermutlich zu Amazon oder Google gewechselt und hätte zähneknirschend auf etliche Funktionen verzichtet.

              Klar, wenn ich hauptberuflich Systemadministrator wäre, dann würde ich darüber nur schmunzeln und die Sache wäre in einer Minute erledigt.

              So muss ich ein Know How aufbauen, was ich einmal in meinem Leben benötige, in einem Monat ohnehin wieder vergessen haben und bei der nächsten ioBroker Installation in 2 Jahren wiederholt sich dieser Prozess wieder. Das killt jegliche Produktivität.

              So wird ioBroker leider nie Mainstream und nur nutzbar für Linux Admins und Nerds. Die Folge, die drei Gatekeeper, Apple, Google und Amazon werden sich den Markt unter sich aufteilen, mit schlechten Ansätzen dominieren und die IoT- Hersteller mit Lizenzen zu teuren Produkte zwingen.

              Das ist sehr schade und eine verpasste Chance.

              crunchipC Away
              crunchipC Away
              crunchip
              Forum Testing Most Active
              wrote on last edited by crunchip
              #336

              @marty56 sagte in ioBroker sehr hohe Diskwrites in Proxmox:

              Außerdem hätte ich nicht Promox genutzt, dann wäre mir die SSD- Schreiberei gar nicht aufgefallen

              da ich alles getrennt laufen habe,
              verglichen mit anderen CT's oder VM's , ist iobroker nicht der "Übeltäter", da hab ich z.b. beim unifi controller oder OMV die selben Werte, den "Abschuß" liefert meine Influx
              bei aktuell knapp 24 Tagen Laufzeit

              • iobroker 123GB
              • influxDB 1.59TB

              umgestiegen von Proxmox auf Unraid

              1 Reply Last reply
              0
              • M Marty56

                @apollon77 Danke für den Hinweis.

                Allgemein.

                Vorab. Ich bewundere das Engagement von den vielen ehrenamtlichen Entwicklern und die tolle Leistung. Ich liebe iobroker immer noch, aber
                die Komplexität von iobroker ist viel zu groß.

                Es ist sehr bedauerlich, dass der Nutzer sich mit dieser Art von "Eingeweide"- Konfiguration überhaupt beschäftigen muss

                Mich hat das Thema fast 2 h gekostet, bis ich den ganzen "Quatsch" mit der Redis Config für diese Spezialität so halbwegs verstanden und geändert hatte.

                Außerdem hätte ich nicht Promox genutzt, dann wäre mir die SSD- Schreiberei gar nicht aufgefallen und z.B. auf einem Raspberry wäre mir die SD Karte nach einem halben Jahr abgeraucht. Ich hätte mich gewundert und beim nächsten Ausfall wäre ich vermutlich zu Amazon oder Google gewechselt und hätte zähneknirschend auf etliche Funktionen verzichtet.

                Klar, wenn ich hauptberuflich Systemadministrator wäre, dann würde ich darüber nur schmunzeln und die Sache wäre in einer Minute erledigt.

                So muss ich ein Know How aufbauen, was ich einmal in meinem Leben benötige, in einem Monat ohnehin wieder vergessen haben und bei der nächsten ioBroker Installation in 2 Jahren wiederholt sich dieser Prozess wieder. Das killt jegliche Produktivität.

                So wird ioBroker leider nie Mainstream und nur nutzbar für Linux Admins und Nerds. Die Folge, die drei Gatekeeper, Apple, Google und Amazon werden sich den Markt unter sich aufteilen, mit schlechten Ansätzen dominieren und die IoT- Hersteller mit Lizenzen zu teuren Produkte zwingen.

                Das ist sehr schade und eine verpasste Chance.

                apollon77A Offline
                apollon77A Offline
                apollon77
                wrote on last edited by
                #337

                @marty56 äääähhhmm. Das - vor allem in Kombi mit redis - kapiere ich jetzt nicht.

                Wer bitte sagt das du redis nutzen sollst? Nur weil es geht?? Der Standard ist die file dB und die ist out of the Box da und ist für 99,x Prozent der User und use cases das sinnvolle.
                Und mit der musst du dich um nichts kümmern.

                Redis ist für Seeeehr speziellere Fälle. Gibt sogar einen forum Thread zu redis und wann es Sinn macht und was es zu beachten gibt.

                Von daher muss ich das Feedback leider in der form entschieden zurückweisen. Vllt sind wir eher an dem Punkt das ioBroker schon an einigen Stellen Zuviel kann und dann „spielekinder“ ( ;-) ) Dinge tun weil sie halt gehen und sie denken es macht Sinn. Aber ehrlich: dann gilt durchaus „selber schuld“.

                Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

                • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
                • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
                M 1 Reply Last reply
                3
                • apollon77A apollon77

                  @marty56 äääähhhmm. Das - vor allem in Kombi mit redis - kapiere ich jetzt nicht.

                  Wer bitte sagt das du redis nutzen sollst? Nur weil es geht?? Der Standard ist die file dB und die ist out of the Box da und ist für 99,x Prozent der User und use cases das sinnvolle.
                  Und mit der musst du dich um nichts kümmern.

                  Redis ist für Seeeehr speziellere Fälle. Gibt sogar einen forum Thread zu redis und wann es Sinn macht und was es zu beachten gibt.

                  Von daher muss ich das Feedback leider in der form entschieden zurückweisen. Vllt sind wir eher an dem Punkt das ioBroker schon an einigen Stellen Zuviel kann und dann „spielekinder“ ( ;-) ) Dinge tun weil sie halt gehen und sie denken es macht Sinn. Aber ehrlich: dann gilt durchaus „selber schuld“.

                  M Offline
                  M Offline
                  Marty56
                  wrote on last edited by Marty56
                  #338

                  @apollon77
                  Erstmal ich wollte niemanden verletzten. Falls ich das doch getan habe, bitte ich um Entschuldigung.

                  Ich habe redis nur aus einem Grund ausgewählt, weil ich gehofft habe, mit einer In-Memory DB das Wear-Out meiner SSD zu verlangsamen. Defakto habe ich - durch meine "nachlässige" Konfiguration - genau das Gegenteil erreicht.
                  Klar mein Fehler. Aber das war nicht mein Punkt. Mein Punkt ist, dass Otto Normaluser sich mit solchen Sachen überhaupt herumschlagen muss. Und wenn er das nicht macht, zerschießt er sich sein System nach kurzer Zeit.

                  Der file-basierte Ansatz hat ja genau dasselbe Problem. Hier muss ich in irgendwelchen Json Files neue Felder einfügen, die das Schreiben reduzieren. Meines Wissen gibt es dafür auch kein selbsterklärendes UI.
                  Die Hürde ist ähnlich hoch, wie bei Redis.

                  HW:NUC (16 GB Ram)
                  OS: Debian Bullseye, Promox V7, node v16.x npm 8.19.3

                  foxriver76F BBTownB apollon77A 3 Replies Last reply
                  0
                  • M Marty56

                    @apollon77
                    Erstmal ich wollte niemanden verletzten. Falls ich das doch getan habe, bitte ich um Entschuldigung.

                    Ich habe redis nur aus einem Grund ausgewählt, weil ich gehofft habe, mit einer In-Memory DB das Wear-Out meiner SSD zu verlangsamen. Defakto habe ich - durch meine "nachlässige" Konfiguration - genau das Gegenteil erreicht.
                    Klar mein Fehler. Aber das war nicht mein Punkt. Mein Punkt ist, dass Otto Normaluser sich mit solchen Sachen überhaupt herumschlagen muss. Und wenn er das nicht macht, zerschießt er sich sein System nach kurzer Zeit.

                    Der file-basierte Ansatz hat ja genau dasselbe Problem. Hier muss ich in irgendwelchen Json Files neue Felder einfügen, die das Schreiben reduzieren. Meines Wissen gibt es dafür auch kein selbsterklärendes UI.
                    Die Hürde ist ähnlich hoch, wie bei Redis.

                    foxriver76F Offline
                    foxriver76F Offline
                    foxriver76
                    Developer
                    wrote on last edited by
                    #339

                    @marty56 sagte in ioBroker sehr hohe Diskwrites in Proxmox:

                    Der file-basierte Ansatz hat ja genau dasselbe Problem. Hier muss ich in irgendwelchen Json Files neue Felder einfügen, die das Schreiben reduzieren. Meines Wissen gibt es dafür auch kein selbsterklärendes UI.
                    Die Hürde ist ähnlich hoch, wie bei Redis.

                    Nö, mit Admin 5 kannst du das besagte JSON via UI modifizieren.

                    Videotutorials & mehr

                    Hier könnt ihr mich unterstützen.

                    1 Reply Last reply
                    0
                    • M Marty56

                      @apollon77
                      Erstmal ich wollte niemanden verletzten. Falls ich das doch getan habe, bitte ich um Entschuldigung.

                      Ich habe redis nur aus einem Grund ausgewählt, weil ich gehofft habe, mit einer In-Memory DB das Wear-Out meiner SSD zu verlangsamen. Defakto habe ich - durch meine "nachlässige" Konfiguration - genau das Gegenteil erreicht.
                      Klar mein Fehler. Aber das war nicht mein Punkt. Mein Punkt ist, dass Otto Normaluser sich mit solchen Sachen überhaupt herumschlagen muss. Und wenn er das nicht macht, zerschießt er sich sein System nach kurzer Zeit.

                      Der file-basierte Ansatz hat ja genau dasselbe Problem. Hier muss ich in irgendwelchen Json Files neue Felder einfügen, die das Schreiben reduzieren. Meines Wissen gibt es dafür auch kein selbsterklärendes UI.
                      Die Hürde ist ähnlich hoch, wie bei Redis.

                      BBTownB Offline
                      BBTownB Offline
                      BBTown
                      wrote on last edited by BBTown
                      #340

                      @marty56
                      ich habe eher den Eindruck, dass Du dich aufgrund eines Wertes der dir aufgefallen ist (Wearout) künstlich verrückt machst, ohne dass irgend etwas los ist.

                      [EDIT]
                      auflschlussreich https://forum.iobroker.net/post/566162

                      ioBroker auf NUC (VM debian v13 (Trixie ), node v22.21.0 npm v10.9.4, js-controller v7.1.0 jsonl/jsonl / HomeMatic CCU-2 (Wired und Funk) / Philips HUE / echo.DOT / Broadlink RM pro / SONOS

                      M 1 Reply Last reply
                      0
                      • M Marty56

                        @apollon77
                        Erstmal ich wollte niemanden verletzten. Falls ich das doch getan habe, bitte ich um Entschuldigung.

                        Ich habe redis nur aus einem Grund ausgewählt, weil ich gehofft habe, mit einer In-Memory DB das Wear-Out meiner SSD zu verlangsamen. Defakto habe ich - durch meine "nachlässige" Konfiguration - genau das Gegenteil erreicht.
                        Klar mein Fehler. Aber das war nicht mein Punkt. Mein Punkt ist, dass Otto Normaluser sich mit solchen Sachen überhaupt herumschlagen muss. Und wenn er das nicht macht, zerschießt er sich sein System nach kurzer Zeit.

                        Der file-basierte Ansatz hat ja genau dasselbe Problem. Hier muss ich in irgendwelchen Json Files neue Felder einfügen, die das Schreiben reduzieren. Meines Wissen gibt es dafür auch kein selbsterklärendes UI.
                        Die Hürde ist ähnlich hoch, wie bei Redis.

                        apollon77A Offline
                        apollon77A Offline
                        apollon77
                        wrote on last edited by
                        #341

                        @marty56 an sich muss auch mit file dB niemand an dem Wert etwa ändern. Mit js Controller 3.2/3 haben wir hier optimiert. Und für Controller 3.4 stellen wir Vorauss auf jsonl um was dann nochmals optimiert.

                        Am Ende ist die Standardeinstellung ein Kompromiss zwischen wrong Datenverlust im Crash Fall und nicht Zuviel Schreiblast. Also auch wer an dem Wert rumdreht (und das „muss“ keiner) sollte verstehen was er da tut weil es Konsequenzen haben kann.

                        Von daher sieh es doch mal so: vllt gibt es ja einen Grund das bestimmte Einstellungen explizit nicht so einfach änderbar sind. ;-))

                        Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

                        • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
                        • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
                        M 1 Reply Last reply
                        0
                        • apollon77A apollon77

                          @marty56 an sich muss auch mit file dB niemand an dem Wert etwa ändern. Mit js Controller 3.2/3 haben wir hier optimiert. Und für Controller 3.4 stellen wir Vorauss auf jsonl um was dann nochmals optimiert.

                          Am Ende ist die Standardeinstellung ein Kompromiss zwischen wrong Datenverlust im Crash Fall und nicht Zuviel Schreiblast. Also auch wer an dem Wert rumdreht (und das „muss“ keiner) sollte verstehen was er da tut weil es Konsequenzen haben kann.

                          Von daher sieh es doch mal so: vllt gibt es ja einen Grund das bestimmte Einstellungen explizit nicht so einfach änderbar sind. ;-))

                          M Offline
                          M Offline
                          Marty56
                          wrote on last edited by
                          #342

                          @apollon77 Ok. Dann freue ich mich auf die Updates.

                          Nachdem ich redis etwas wenig schreiben lasse, ist mein Disk IO auf ca. 500 KB pro Stunde gesunken.

                          Diese 500 KB kann ich fast vollständig der SQLite3 DB zuordnen. Wenn ich die ausschalte, dann liegt das Disk IO bei 0 Byte (was auch schon wieder komisch ist, weil das Log ja noch geschrieben wird).

                          Kann ich statt SQLite3 eine andere Datenbank nehmen, die so ähnlich wie redis jetzt bei mir nur einmal pro Stunde schreibt?

                          HW:NUC (16 GB Ram)
                          OS: Debian Bullseye, Promox V7, node v16.x npm 8.19.3

                          paul53P 1 Reply Last reply
                          0
                          • M Marty56

                            @apollon77 Ok. Dann freue ich mich auf die Updates.

                            Nachdem ich redis etwas wenig schreiben lasse, ist mein Disk IO auf ca. 500 KB pro Stunde gesunken.

                            Diese 500 KB kann ich fast vollständig der SQLite3 DB zuordnen. Wenn ich die ausschalte, dann liegt das Disk IO bei 0 Byte (was auch schon wieder komisch ist, weil das Log ja noch geschrieben wird).

                            Kann ich statt SQLite3 eine andere Datenbank nehmen, die so ähnlich wie redis jetzt bei mir nur einmal pro Stunde schreibt?

                            paul53P Offline
                            paul53P Offline
                            paul53
                            wrote on last edited by
                            #343

                            @marty56 sagte: wie redis jetzt bei mir nur einmal pro Stunde schreibt?

                            Hast Du eine USV? Falls nicht, ist eine Stunde sehr lang.

                            Bitte verzichtet auf Chat-Nachrichten, denn die Handhabung ist grauenhaft !
                            Produktiv: RPi 2 mit S.USV, HM-MOD-RPI und SLC-USB-Stick mit root fs

                            M 1 Reply Last reply
                            0
                            • paul53P paul53

                              @marty56 sagte: wie redis jetzt bei mir nur einmal pro Stunde schreibt?

                              Hast Du eine USV? Falls nicht, ist eine Stunde sehr lang.

                              M Offline
                              M Offline
                              Marty56
                              wrote on last edited by
                              #344

                              @paul53 @paul53 Ist schon klar, dass eine Stunde lang ist. Auf der anderen Seite sind meine Zuverlässigkeitsanforderung an meine Homeautomation auch nicht extrem und die Stabilität war bisher tadellos.

                              Kann ich eigentlich die SQLlite3 DB in Redis ablegen?
                              Vermutlich eine blöde Frage.

                              HW:NUC (16 GB Ram)
                              OS: Debian Bullseye, Promox V7, node v16.x npm 8.19.3

                              apollon77A 1 Reply Last reply
                              0
                              • BBTownB BBTown

                                @marty56
                                ich habe eher den Eindruck, dass Du dich aufgrund eines Wertes der dir aufgefallen ist (Wearout) künstlich verrückt machst, ohne dass irgend etwas los ist.

                                [EDIT]
                                auflschlussreich https://forum.iobroker.net/post/566162

                                M Offline
                                M Offline
                                Marty56
                                wrote on last edited by Marty56
                                #345

                                @bbtown keine Ahnung. Ich hatte nach 16 Tagen 5 TByte geschrieben. Das erschien mir schon relativ viel

                                HW:NUC (16 GB Ram)
                                OS: Debian Bullseye, Promox V7, node v16.x npm 8.19.3

                                1 Reply Last reply
                                0
                                • M Marty56

                                  @paul53 @paul53 Ist schon klar, dass eine Stunde lang ist. Auf der anderen Seite sind meine Zuverlässigkeitsanforderung an meine Homeautomation auch nicht extrem und die Stabilität war bisher tadellos.

                                  Kann ich eigentlich die SQLlite3 DB in Redis ablegen?
                                  Vermutlich eine blöde Frage.

                                  apollon77A Offline
                                  apollon77A Offline
                                  apollon77
                                  wrote on last edited by
                                  #346

                                  @marty56 naja eine Datenbank schreibt Daten die gespeichert werden sollen. Wenn primär Daten dazu kommen sollte es an sich fast egal sein ob alles einmal pro Stunde oder direkt geschrieben wird. Bei SQLite wär ich mir da nicht gaaaanz so sicher ob das equivalent ist aber so weit auseinander sollte es auch wider nicht sein.

                                  Datenbanken haben von Natur aus die Anforderung keine Daten zu verlieren ;-) also ob Du eine dB findest die das „bricht“ weiß ich nicht ;-)

                                  Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

                                  • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
                                  • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
                                  Dr. BakteriusD 1 Reply Last reply
                                  0
                                  • apollon77A apollon77

                                    @marty56 naja eine Datenbank schreibt Daten die gespeichert werden sollen. Wenn primär Daten dazu kommen sollte es an sich fast egal sein ob alles einmal pro Stunde oder direkt geschrieben wird. Bei SQLite wär ich mir da nicht gaaaanz so sicher ob das equivalent ist aber so weit auseinander sollte es auch wider nicht sein.

                                    Datenbanken haben von Natur aus die Anforderung keine Daten zu verlieren ;-) also ob Du eine dB findest die das „bricht“ weiß ich nicht ;-)

                                    Dr. BakteriusD Offline
                                    Dr. BakteriusD Offline
                                    Dr. Bakterius
                                    Most Active
                                    wrote on last edited by
                                    #347

                                    @apollon77 Hat sich denn im controller etwas geändert? Ich habe ja schon seit Monaten 'jsonl' in Betrieb und die geschriebene Datenmenge war seitdem erfreulich gering. Doch seit Ende Juli als die ganzen Updates aufschlugen habe ich wieder eine extreme Schreiblast laut Proxmox (etwa hundertfach!). Laut htop ist es der Prozess iobroker.js-controller. Mit deutlichem Abstand folgt io.backitup.0. Ich habe mal alle Instanzen gruppenweise deaktiviert. Da hat sich nichts geändert. Erst wenn iobroker gestoppt wird, fallen die Schreibzugriffe wieder auf faktisch Null.

                                    apollon77A FredFF 2 Replies Last reply
                                    0
                                    • Dr. BakteriusD Dr. Bakterius

                                      @apollon77 Hat sich denn im controller etwas geändert? Ich habe ja schon seit Monaten 'jsonl' in Betrieb und die geschriebene Datenmenge war seitdem erfreulich gering. Doch seit Ende Juli als die ganzen Updates aufschlugen habe ich wieder eine extreme Schreiblast laut Proxmox (etwa hundertfach!). Laut htop ist es der Prozess iobroker.js-controller. Mit deutlichem Abstand folgt io.backitup.0. Ich habe mal alle Instanzen gruppenweise deaktiviert. Da hat sich nichts geändert. Erst wenn iobroker gestoppt wird, fallen die Schreibzugriffe wieder auf faktisch Null.

                                      apollon77A Offline
                                      apollon77A Offline
                                      apollon77
                                      wrote on last edited by
                                      #348

                                      @dr-bakterius Geändert hat sich nichts. Der controller 3.3 hat ne neue Version der jsonl mitgebracht und wenn Du immer noch jsonl nutzt dann sollte das auch weiterhin so sein. AUch bei jsonl hat sich nicht wirklich was geändert.

                                      Also checke mal "iobroker setup custom" zuerst. ansonsten muss irgendein adapter "schuld" sein. Den müsstest Du dann finden denke ich

                                      Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

                                      • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
                                      • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
                                      Dr. BakteriusD 1 Reply Last reply
                                      0
                                      • apollon77A apollon77

                                        @dr-bakterius Geändert hat sich nichts. Der controller 3.3 hat ne neue Version der jsonl mitgebracht und wenn Du immer noch jsonl nutzt dann sollte das auch weiterhin so sein. AUch bei jsonl hat sich nicht wirklich was geändert.

                                        Also checke mal "iobroker setup custom" zuerst. ansonsten muss irgendein adapter "schuld" sein. Den müsstest Du dann finden denke ich

                                        Dr. BakteriusD Offline
                                        Dr. BakteriusD Offline
                                        Dr. Bakterius
                                        Most Active
                                        wrote on last edited by
                                        #349

                                        @apollon77 sagte in ioBroker sehr hohe Diskwrites in Proxmox:

                                        Also checke mal "iobroker setup custom"

                                        Current configuration:
                                        - Objects database:
                                          - Type: jsonl
                                          - Host/Unix Socket: 127.0.0.1
                                          - Port: 9001
                                        - States database:
                                          - Type: jsonl
                                          - Host/Unix Socket: 127.0.0.1
                                          - Port: 9000
                                        - Data Directory: ../../iobroker-data/
                                        

                                        Sieht soweit okay aus. Und wie gesagt, ich habe alle Instanzen gestoppt und trotzdem kommt es etwa alle drei Minuten zu einem hohen Diskwrite.

                                        'htop' zeigt:
                                        htop.png

                                        Und unter Proxmox sieht man den gewaltigen Anstieg:
                                        proxmox.png

                                        Weiß echt nicht was ich noch prüfen könnte...

                                        JLegJ 1 Reply Last reply
                                        0
                                        • Dr. BakteriusD Dr. Bakterius

                                          @apollon77 Hat sich denn im controller etwas geändert? Ich habe ja schon seit Monaten 'jsonl' in Betrieb und die geschriebene Datenmenge war seitdem erfreulich gering. Doch seit Ende Juli als die ganzen Updates aufschlugen habe ich wieder eine extreme Schreiblast laut Proxmox (etwa hundertfach!). Laut htop ist es der Prozess iobroker.js-controller. Mit deutlichem Abstand folgt io.backitup.0. Ich habe mal alle Instanzen gruppenweise deaktiviert. Da hat sich nichts geändert. Erst wenn iobroker gestoppt wird, fallen die Schreibzugriffe wieder auf faktisch Null.

                                          FredFF Online
                                          FredFF Online
                                          FredF
                                          Most Active Forum Testing
                                          wrote on last edited by FredF
                                          #350

                                          @dr-bakterius seitdem jsonl angeboten wird, habe ich ioBroker umgestellt, habe die Diskwrites aber nicht weiter beobachtet.. Controller update habe ich auch schon eine Zeit lang gemacht.
                                          So schaut es derzeit aus:
                                          6ae4e69a-288e-4eb6-9aec-622d78cf4569-grafik.png
                                          iobroker setup custom:

                                          Current configuration:
                                          - Objects database:
                                            - Type: jsonl
                                            - Host/Unix Socket: 0.0.0.0
                                            - Port: 9001
                                          - States database:
                                            - Type: jsonl
                                            - Host/Unix Socket: 0.0.0.0
                                            - Port: 9000
                                          - Data Directory: ../../iobroker-data/
                                          

                                          Was ich am 17.8. um 20 Uhr gemacht habe, das die Werte seit dem wieder höher sind muss ich mal recherchieren...

                                          Edit: hmm nichts spannendes passiert, außer das wie vorher auch so ein paar Adapter abfragen starten..

                                          K 1 Reply Last reply
                                          0
                                          Reply
                                          • Reply as topic
                                          Log in to reply
                                          • Oldest to Newest
                                          • Newest to Oldest
                                          • Most Votes


                                          Support us

                                          ioBroker
                                          Community Adapters
                                          Donate
                                          FAQ Cloud / IOT
                                          HowTo: Node.js-Update
                                          HowTo: Backup/Restore
                                          Downloads
                                          BLOG

                                          581

                                          Online

                                          32.6k

                                          Users

                                          82.2k

                                          Topics

                                          1.3m

                                          Posts
                                          Community
                                          Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen | Einwilligungseinstellungen
                                          ioBroker Community 2014-2025
                                          logo
                                          • Login

                                          • Don't have an account? Register

                                          • Login or register to search.
                                          • First post
                                            Last post
                                          0
                                          • Home
                                          • Recent
                                          • Tags
                                          • Unread 0
                                          • Categories
                                          • Unreplied
                                          • Popular
                                          • GitHub
                                          • Docu
                                          • Hilfe