Skip to content
  • Home
  • Aktuell
  • Tags
  • 0 Ungelesen 0
  • Kategorien
  • Unreplied
  • Beliebt
  • GitHub
  • Docu
  • Hilfe
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Standard: (Kein Skin)
  • Kein Skin
Einklappen
ioBroker Logo

Community Forum

donate donate
  1. ioBroker Community Home
  2. Deutsch
  3. Error/Bug
  4. [gelöst] states.jsonl file viel zu groß

NEWS

  • UPDATE 31.10.: Amazon Alexa - ioBroker Skill läuft aus ?
    apollon77A
    apollon77
    48
    3
    8.7k

  • Monatsrückblick – September 2025
    BluefoxB
    Bluefox
    13
    1
    2.2k

  • Neues Video "KI im Smart Home" - ioBroker plus n8n
    BluefoxB
    Bluefox
    16
    1
    3.1k

[gelöst] states.jsonl file viel zu groß

Geplant Angeheftet Gesperrt Verschoben Error/Bug
35 Beiträge 8 Kommentatoren 3.1k Aufrufe 5 Watching
  • Älteste zuerst
  • Neuste zuerst
  • Meiste Stimmen
Antworten
  • In einem neuen Thema antworten
Anmelden zum Antworten
Dieses Thema wurde gelöscht. Nur Nutzer mit entsprechenden Rechten können es sehen.
  • R RandyAndy

    @crunchip

    Habe das File nun mal analysiert. Hat nach nicht mal 5 Stunden 710000 Zeilen.
    Das erscheint mir ein wenig viel.

    Andreas

    Thomas BraunT Online
    Thomas BraunT Online
    Thomas Braun
    Most Active
    schrieb am zuletzt editiert von
    #18

    @randyandy

    Und was hat die Analyse ergeben, wo die ganzen Einträge herkommen?

    Linux-Werkzeugkasten:
    https://forum.iobroker.net/topic/42952/der-kleine-iobroker-linux-werkzeugkasten
    NodeJS Fixer Skript:
    https://forum.iobroker.net/topic/68035/iob-node-fix-skript
    iob_diag: curl -sLf -o diag.sh https://iobroker.net/diag.sh && bash diag.sh

    R 1 Antwort Letzte Antwort
    0
    • Thomas BraunT Thomas Braun

      @randyandy

      Und was hat die Analyse ergeben, wo die ganzen Einträge herkommen?

      R Offline
      R Offline
      RandyAndy
      schrieb am zuletzt editiert von RandyAndy
      #19

      @thomas-braun

      die kommen praktisch von jedem Adapter. Und die Werte werden offensichtlich immer nur drangehängt.

      z.B.
      Wenn ich z.B. nach

      {"k":"system.adapter.hm-rega.1.connected","v":{"val":true,"ack":true,"ts":1649054073537,"q":0,"from":"system.adapter.hm-rega.1","lc":1649054073537,"expire":true}}
      

      suche dann finde ich das im File 1297 mal

      Das kann doch eigentlich nicht sein.
      Lediglich die Nummer nch ts: ändert sich

      ANdreas

      crunchipC AlCalzoneA 2 Antworten Letzte Antwort
      0
      • R RandyAndy

        @thomas-braun

        die kommen praktisch von jedem Adapter. Und die Werte werden offensichtlich immer nur drangehängt.

        z.B.
        Wenn ich z.B. nach

        {"k":"system.adapter.hm-rega.1.connected","v":{"val":true,"ack":true,"ts":1649054073537,"q":0,"from":"system.adapter.hm-rega.1","lc":1649054073537,"expire":true}}
        

        suche dann finde ich das im File 1297 mal

        Das kann doch eigentlich nicht sein.
        Lediglich die Nummer nch ts: ändert sich

        ANdreas

        crunchipC Abwesend
        crunchipC Abwesend
        crunchip
        Forum Testing Most Active
        schrieb am zuletzt editiert von
        #20

        @randyandy sagte in states.jsonl file viel zu groß:

        die kommen praktisch von jedem Adapter. Und die Werte werden offensichtlich immer nur drangehängt.

        So arbeitet ja auch jsonl
        Such mal den Thread zu jsonl, da ist es beschrieben

        umgestiegen von Proxmox auf Unraid

        1 Antwort Letzte Antwort
        0
        • R RandyAndy

          @thomas-braun

          die kommen praktisch von jedem Adapter. Und die Werte werden offensichtlich immer nur drangehängt.

          z.B.
          Wenn ich z.B. nach

          {"k":"system.adapter.hm-rega.1.connected","v":{"val":true,"ack":true,"ts":1649054073537,"q":0,"from":"system.adapter.hm-rega.1","lc":1649054073537,"expire":true}}
          

          suche dann finde ich das im File 1297 mal

          Das kann doch eigentlich nicht sein.
          Lediglich die Nummer nch ts: ändert sich

          ANdreas

          AlCalzoneA Offline
          AlCalzoneA Offline
          AlCalzone
          Developer
          schrieb am zuletzt editiert von AlCalzone
          #21

          @randyandy Kannste die Datei mal zippen und mir schicken? Eigentlich sollte ab einer bestimmten Schwelle die Datei neu geschrieben werden mit nur den relevanten Daten. Und am besten dazu noch deine /opt/iobroker/iobroker.json.

          Warum `sudo` böse ist: https://forum.iobroker.net/post/17109

          R 1 Antwort Letzte Antwort
          0
          • R Offline
            R Offline
            RandyAndy
            schrieb am zuletzt editiert von
            #22

            Hallo,

            geht leider nicht. Die Datei ist gezippt schon viel zu groß un das System läßt das nicht mehr zu

            Andreas

            1 Antwort Letzte Antwort
            0
            • AlCalzoneA AlCalzone

              @randyandy Kannste die Datei mal zippen und mir schicken? Eigentlich sollte ab einer bestimmten Schwelle die Datei neu geschrieben werden mit nur den relevanten Daten. Und am besten dazu noch deine /opt/iobroker/iobroker.json.

              R Offline
              R Offline
              RandyAndy
              schrieb am zuletzt editiert von
              #23

              @alcalzone

              So sollte es funktionieren.
              Files

              Andreas

              apollon77A 1 Antwort Letzte Antwort
              0
              • AlCalzoneA Offline
                AlCalzoneA Offline
                AlCalzone
                Developer
                schrieb am zuletzt editiert von
                #24

                Problem gefunden: iobroker.json enthält unzulässige Settings. Nicht sicher, wo diese herkommen, aber diese beiden Blöcke müssen weg:
                b6a0b63a-b5a7-4dac-86f3-d2132e0628a3-grafik.png

                Wenn autoCompress keine sinnvollen Einstellungen enthält, sondern nur {}, dann sorgt das dafür, dass niemals auto-compressed wird - mit obigem Problem.
                Gleichfalls sorgt "throttleFS": {} dafür, dass Änderungen nicht wie sonst gesammelt und zeitversetzt, sondern immer und sofort auf Platte geschrieben werden.
                Bei backup bin ich mir nicht 100% sicher, aber "backup": {} könnte auch dafür sorgen, dass es keine regelmäßigen, automatischen Backups von den states und objects gibt.

                Warum `sudo` böse ist: https://forum.iobroker.net/post/17109

                R 1 Antwort Letzte Antwort
                0
                • R RandyAndy

                  @alcalzone

                  So sollte es funktionieren.
                  Files

                  Andreas

                  apollon77A Offline
                  apollon77A Offline
                  apollon77
                  schrieb am zuletzt editiert von
                  #25

                  @randyandy Kann es sein das du mal im Admin uter "Host" die Settings geändert hast und so ein iobrokwr.json neu geschrieben wurde?

                  Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

                  • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
                  • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
                  R 1 Antwort Letzte Antwort
                  0
                  • apollon77A apollon77

                    @randyandy Kann es sein das du mal im Admin uter "Host" die Settings geändert hast und so ein iobrokwr.json neu geschrieben wurde?

                    R Offline
                    R Offline
                    RandyAndy
                    schrieb am zuletzt editiert von RandyAndy
                    #26

                    @apollon77

                    nein an den Parametern habe ich nicht rumgespielt.
                    Allerdings habe ich von beiden Systemen die Settings verglichen.
                    Ich habe dann versucht zwei Pfade zu verändern ../../iobroker-data das im stabilen System nicht eingetragen war. War aber immer negativ und die Pfade wurden sofort wieder eingetragen oder wurden nicht abgespeichert.
                    Ich habe aber in der nahen Vergangenheit beim instabilen System alle Updates des js-controllers eingespielt und da waren wohl einige instabil (laut Forum). Kann es daran liegen? Beim zweiten stabilen System habe ich das nicht gemacht. Da bin ich zwar inzwischen auch auf auf der neuesten Version aber ohne die Zwischenlösungen.

                    Andreas

                    apollon77A 1 Antwort Letzte Antwort
                    0
                    • AlCalzoneA AlCalzone

                      Problem gefunden: iobroker.json enthält unzulässige Settings. Nicht sicher, wo diese herkommen, aber diese beiden Blöcke müssen weg:
                      b6a0b63a-b5a7-4dac-86f3-d2132e0628a3-grafik.png

                      Wenn autoCompress keine sinnvollen Einstellungen enthält, sondern nur {}, dann sorgt das dafür, dass niemals auto-compressed wird - mit obigem Problem.
                      Gleichfalls sorgt "throttleFS": {} dafür, dass Änderungen nicht wie sonst gesammelt und zeitversetzt, sondern immer und sofort auf Platte geschrieben werden.
                      Bei backup bin ich mir nicht 100% sicher, aber "backup": {} könnte auch dafür sorgen, dass es keine regelmäßigen, automatischen Backups von den states und objects gibt.

                      R Offline
                      R Offline
                      RandyAndy
                      schrieb am zuletzt editiert von RandyAndy
                      #27

                      @alcalzone

                      Hi

                      erst einmal vielen Dank, ich hatte da schon große Sorgen und war schon im Kopf unterwegs das System neu aufzusetzen mit manuellem kopieren wichtiger Dateien (Skripte, VIS, Bilder usw.).
                      Wie soll ich nun vorgehen, die Datei löschen und das System erstellt Sie dann neu oder manuell mit einem Editor anzupassen.
                      Jetzt ist mir auch klar warum ich beim Einspielen eines Backups (wobei ich ein Image eines zweiten Systems verwendet habe) immer wieder das gleiche Phänomen gesehen habe. Vermutlich wurde die iobroker.json Datei auch mit eingespielt und dann war das Problem immer wieder da.
                      Ich werde das heute Abend testen und dann Feedback geben.

                      Andreas

                      AlCalzoneA 1 Antwort Letzte Antwort
                      0
                      • R RandyAndy

                        @apollon77

                        nein an den Parametern habe ich nicht rumgespielt.
                        Allerdings habe ich von beiden Systemen die Settings verglichen.
                        Ich habe dann versucht zwei Pfade zu verändern ../../iobroker-data das im stabilen System nicht eingetragen war. War aber immer negativ und die Pfade wurden sofort wieder eingetragen oder wurden nicht abgespeichert.
                        Ich habe aber in der nahen Vergangenheit beim instabilen System alle Updates des js-controllers eingespielt und da waren wohl einige instabil (laut Forum). Kann es daran liegen? Beim zweiten stabilen System habe ich das nicht gemacht. Da bin ich zwar inzwischen auch auf auf der neuesten Version aber ohne die Zwischenlösungen.

                        Andreas

                        apollon77A Offline
                        apollon77A Offline
                        apollon77
                        schrieb am zuletzt editiert von
                        #28

                        @randyandy Danke, aber dieser Zustand kann meiner Erinnerung nach durch kein Update gekommen sein. Interessant wo es herkommt

                        Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

                        • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
                        • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
                        R 1 Antwort Letzte Antwort
                        0
                        • R RandyAndy

                          @alcalzone

                          Hi

                          erst einmal vielen Dank, ich hatte da schon große Sorgen und war schon im Kopf unterwegs das System neu aufzusetzen mit manuellem kopieren wichtiger Dateien (Skripte, VIS, Bilder usw.).
                          Wie soll ich nun vorgehen, die Datei löschen und das System erstellt Sie dann neu oder manuell mit einem Editor anzupassen.
                          Jetzt ist mir auch klar warum ich beim Einspielen eines Backups (wobei ich ein Image eines zweiten Systems verwendet habe) immer wieder das gleiche Phänomen gesehen habe. Vermutlich wurde die iobroker.json Datei auch mit eingespielt und dann war das Problem immer wieder da.
                          Ich werde das heute Abend testen und dann Feedback geben.

                          Andreas

                          AlCalzoneA Offline
                          AlCalzoneA Offline
                          AlCalzone
                          Developer
                          schrieb am zuletzt editiert von
                          #29

                          @randyandy sagte in states.jsonl file viel zu groß:

                          Wie soll ich nun vorgehen, die Datei löschen und das System erstellt Sie dann neu oder manuell mit einem Editor anzupassen.

                          Siehe Chatverlauf:

                          iobroker.json enthält folgende Settings:

                          "backup": {},
                          "jsonlOptions": {
                            "autoCompress": {},
                            "throttleFS": {}
                          },
                          

                          jeweils für objects und states.

                          Stoppe iobroker, entferne diese beiden Abschnitte aus iobroker.json. Starte iobroker wieder

                          Warum `sudo` böse ist: https://forum.iobroker.net/post/17109

                          1 Antwort Letzte Antwort
                          0
                          • apollon77A apollon77

                            @randyandy Danke, aber dieser Zustand kann meiner Erinnerung nach durch kein Update gekommen sein. Interessant wo es herkommt

                            R Offline
                            R Offline
                            RandyAndy
                            schrieb am zuletzt editiert von
                            #30

                            @apollon77

                            Ich habe da noch eine Idee habe ich aber alCalzone im Chat geschrieben. ICh möchte keine Vermutungen posten.

                            In der Summe wäre es sicherlich eine gute Idee diese Datei(en) dann abzusichern und vielleicht die Größe zu monitoren und/oder die Struktur der Datei und sinnvolle Settings abzuftragen und gegebenenfalls anzupassen.
                            Jedenfalls kann es zu einem unsicheren Zustand führen und das sollte oder besser darf so nicht sein.
                            Das ist ohne Wertung und in der Summe bin ich ein Fan von ioBroker. Die Leistung von Euch allen ist nicht hoch genug einzustufen.

                            Andreas

                            AlCalzoneA 1 Antwort Letzte Antwort
                            0
                            • R RandyAndy

                              @apollon77

                              Ich habe da noch eine Idee habe ich aber alCalzone im Chat geschrieben. ICh möchte keine Vermutungen posten.

                              In der Summe wäre es sicherlich eine gute Idee diese Datei(en) dann abzusichern und vielleicht die Größe zu monitoren und/oder die Struktur der Datei und sinnvolle Settings abzuftragen und gegebenenfalls anzupassen.
                              Jedenfalls kann es zu einem unsicheren Zustand führen und das sollte oder besser darf so nicht sein.
                              Das ist ohne Wertung und in der Summe bin ich ein Fan von ioBroker. Die Leistung von Euch allen ist nicht hoch genug einzustufen.

                              Andreas

                              AlCalzoneA Offline
                              AlCalzoneA Offline
                              AlCalzone
                              Developer
                              schrieb am zuletzt editiert von
                              #31

                              @randyandy Sind schon dran... Die (optimierten) Default-Settings werden - sagen wir mal - auf eine suboptimale Weise gesetzt, sodass sie in deinem Fall gar keine Auswirkungen haben.

                              Warum `sudo` böse ist: https://forum.iobroker.net/post/17109

                              R 1 Antwort Letzte Antwort
                              0
                              • AlCalzoneA AlCalzone

                                @randyandy Sind schon dran... Die (optimierten) Default-Settings werden - sagen wir mal - auf eine suboptimale Weise gesetzt, sodass sie in deinem Fall gar keine Auswirkungen haben.

                                R Offline
                                R Offline
                                RandyAndy
                                schrieb am zuletzt editiert von
                                #32

                                @alcalzone

                                Habe nun die Änderungen durchgeführt und nun ist die states.jsonl mit rund 4MB analog zum anderen System.
                                Noch ein Hinweis: Ich mußte die "fehlerhafte" states.jsonl aber erst löschen. Mit dem Befehl "iob start" ist das System nicht mehr hochgekommen. Habe ca. 30 Minuten gewartet und dann aufgegeben.

                                Vielen Dank noch einmal für alles.

                                Andreas

                                1 Antwort Letzte Antwort
                                0
                                • FoGF Offline
                                  FoGF Offline
                                  FoG
                                  schrieb am zuletzt editiert von FoG
                                  #33

                                  Ich habe leider das gleiche Problem ... states.jsonl wächst innerhalb von 2 Tagen auf 5 GB ... einspielen aus dem Backup rettet wieder 2 Tage lang wenn nix mehr geht.

                                  Die Einträge in iobroker.json habe ich raus gemacht - hilft aber auch nix (reboot gemacht).
                                  (deleted "autoCompress": {}, "throttleFS": {} in Objects und States Abschnitt unter Backup).

                                   "jsonlOptions": {
                                      }
                                  
                                  
                                  apollon77A 1 Antwort Letzte Antwort
                                  0
                                  • FoGF FoG

                                    Ich habe leider das gleiche Problem ... states.jsonl wächst innerhalb von 2 Tagen auf 5 GB ... einspielen aus dem Backup rettet wieder 2 Tage lang wenn nix mehr geht.

                                    Die Einträge in iobroker.json habe ich raus gemacht - hilft aber auch nix (reboot gemacht).
                                    (deleted "autoCompress": {}, "throttleFS": {} in Objects und States Abschnitt unter Backup).

                                     "jsonlOptions": {
                                        }
                                    
                                    
                                    apollon77A Offline
                                    apollon77A Offline
                                    apollon77
                                    schrieb am zuletzt editiert von
                                    #34

                                    @fog mach den ganzen jsonlOptions Abschnitt weg

                                    Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

                                    • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
                                    • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
                                    FoGF 1 Antwort Letzte Antwort
                                    0
                                    • apollon77A apollon77

                                      @fog mach den ganzen jsonlOptions Abschnitt weg

                                      FoGF Offline
                                      FoGF Offline
                                      FoG
                                      schrieb am zuletzt editiert von
                                      #35

                                      @apollon77 - super, vielen Dank. Das war die Lösung.

                                      Schönen Ostermontag !

                                      1 Antwort Letzte Antwort
                                      0
                                      Antworten
                                      • In einem neuen Thema antworten
                                      Anmelden zum Antworten
                                      • Älteste zuerst
                                      • Neuste zuerst
                                      • Meiste Stimmen


                                      Support us

                                      ioBroker
                                      Community Adapters
                                      Donate

                                      975

                                      Online

                                      32.4k

                                      Benutzer

                                      81.5k

                                      Themen

                                      1.3m

                                      Beiträge
                                      Community
                                      Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen | Einwilligungseinstellungen
                                      ioBroker Community 2014-2025
                                      logo
                                      • Anmelden

                                      • Du hast noch kein Konto? Registrieren

                                      • Anmelden oder registrieren, um zu suchen
                                      • Erster Beitrag
                                        Letzter Beitrag
                                      0
                                      • Home
                                      • Aktuell
                                      • Tags
                                      • Ungelesen 0
                                      • Kategorien
                                      • Unreplied
                                      • Beliebt
                                      • GitHub
                                      • Docu
                                      • Hilfe