Skip to content
  • Home
  • Recent
  • Tags
  • 0 Unread 0
  • Categories
  • Unreplied
  • Popular
  • GitHub
  • Docu
  • Hilfe
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Default (No Skin)
  • No Skin
Collapse
ioBroker Logo

Community Forum

donate donate
  1. ioBroker Community Home
  2. Deutsch
  3. Tester
  4. EXPERIMENTELL: JsonL Datenbank für js-controller

NEWS

  • Jahresrückblick 2025 – unser neuer Blogbeitrag ist online! ✨
    BluefoxB
    Bluefox
    17
    1
    2.1k

  • Neuer Blogbeitrag: Monatsrückblick - Dezember 2025 🎄
    BluefoxB
    Bluefox
    13
    1
    930

  • Weihnachtsangebot 2025! 🎄
    BluefoxB
    Bluefox
    25
    1
    2.2k

EXPERIMENTELL: JsonL Datenbank für js-controller

Scheduled Pinned Locked Moved Tester
187 Posts 20 Posters 31.6k Views 28 Watching
  • Oldest to Newest
  • Newest to Oldest
  • Most Votes
Reply
  • Reply as topic
Log in to reply
This topic has been deleted. Only users with topic management privileges can see it.
  • A Adnim

    Hi!
    habe heute morgen umgestellt. Master läuft auf den ersten Blick einwandfrei. Disk I/o scheint nun in einer andern Welt zu sein.

    Mein Slave bekomme ich aber noch nicht ins Rennen.

    Bekomme nur die Fehlermeldung dort:
    No Connection to Database Possible...

    Current configuration:
    - Objects database:
      - Type: jsonl
      - Host/Unix Socket: 192.165.175.15
      - Port: 9001
    - States database:
      - Type: jsonl
      - Host/Unix Socket: 192.165.175.15
      - Port: 9000
    - Data Directory: ../../iobroker-data/
    

    Muss ich hier noch was anpassen?
    Iobroker Log des Slaves hat auch nur die Fehlermeldung drinne, verbunden mit Restarts deswegen.

    apollon77A Offline
    apollon77A Offline
    apollon77
    wrote on last edited by
    #59

    @adnim wie sieht die Master konfig aus?

    Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

    • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
    • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
    A 1 Reply Last reply
    0
    • apollon77A apollon77

      @adnim wie sieht die Master konfig aus?

      A Offline
      A Offline
      Adnim
      wrote on last edited by
      #60

      @apollon77

      Current configuration:
      - Objects database:
        - Type: jsonl
        - Host/Unix Socket: 127.0.0.1
        - Port: 9001
      - States database:
        - Type: jsonl
        - Host/Unix Socket: 127.0.0.1
        - Port: 9000
      - Data Directory: ../../iobroker-data/
      
      
      apollon77A 1 Reply Last reply
      0
      • A Adnim

        @apollon77

        Current configuration:
        - Objects database:
          - Type: jsonl
          - Host/Unix Socket: 127.0.0.1
          - Port: 9001
        - States database:
          - Type: jsonl
          - Host/Unix Socket: 127.0.0.1
          - Port: 9000
        - Data Directory: ../../iobroker-data/
        
        
        apollon77A Offline
        apollon77A Offline
        apollon77
        wrote on last edited by
        #61

        @adnim Jupp der Master erlaubt nur lokale Verbindungen. Schreib in die konfig beim Master mal 0.0.0.0 als ip rein bei beiden dbs. Dann klappt’s auch.

        Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

        • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
        • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
        A ? 2 Replies Last reply
        0
        • apollon77A apollon77

          @adnim Jupp der Master erlaubt nur lokale Verbindungen. Schreib in die konfig beim Master mal 0.0.0.0 als ip rein bei beiden dbs. Dann klappt’s auch.

          A Offline
          A Offline
          Adnim
          wrote on last edited by Adnim
          #62

          @apollon77

          Ja dann klappts auch :) Danke!

          Datenbank läuft Stabil, Write Load ist komplett verschwunden super Sache.

          1 Reply Last reply
          0
          • FredFF Online
            FredFF Online
            FredF
            Most Active Forum Testing
            wrote on last edited by
            #63

            @apollon77 @AlCalzone
            Angeregt durchs mitlesen des Disk Write Beitrags und auch schon längeren Überlegungen ob ich mein System auf redis umstellen soll oder nicht, habe ich mich nun mal getraut auf jsonl umzustellen.

            Bilder sagen oft mehr als tausend Worte:


            Diskwrites.PNG


            DiskwritesJSONI.PNG

            Einfach Toll wie mit euren stetigen Optimierungen und Verbesserungen die ihr anscheinend aus dem Nichts zaubert (kommt mir nicht wissenden zumindest so vor) ioBroker so weiter entwickelt wird.

            Weiter so!

            1 Reply Last reply
            2
            • apollon77A apollon77

              @adnim Jupp der Master erlaubt nur lokale Verbindungen. Schreib in die konfig beim Master mal 0.0.0.0 als ip rein bei beiden dbs. Dann klappt’s auch.

              ? Offline
              ? Offline
              A Former User
              wrote on last edited by
              #64

              @apollon77

              sieht ja echt interessant aus, lohnt es sich von Redis auf jsonl umzustellen??

              Ich betreibe auf dem iobroker auch ein Redisserver und n Slave auf der Syno..

              apollon77A 1 Reply Last reply
              0
              • ? A Former User

                @apollon77

                sieht ja echt interessant aus, lohnt es sich von Redis auf jsonl umzustellen??

                Ich betreibe auf dem iobroker auch ein Redisserver und n Slave auf der Syno..

                apollon77A Offline
                apollon77A Offline
                apollon77
                wrote on last edited by
                #65

                @ilovegym das musst du wissen. Am Ende kann redis genau so sparsam sein wenn man ihn richtig einrichtet ;-))

                Beitrag hat geholfen? Votet rechts unten im Beitrag :-) https://paypal.me/Apollon77 / https://github.com/sponsors/Apollon77

                • Debug-Log für Instanz einschalten? Admin -> Instanzen -> Expertenmodus -> Instanz aufklappen - Loglevel ändern
                • Logfiles auf Platte /opt/iobroker/log/… nutzen, Admin schneidet Zeilen ab
                ? 1 Reply Last reply
                0
                • apollon77A apollon77

                  @ilovegym das musst du wissen. Am Ende kann redis genau so sparsam sein wenn man ihn richtig einrichtet ;-))

                  ? Offline
                  ? Offline
                  A Former User
                  wrote on last edited by
                  #66

                  @apollon77

                  Danke, ok, ich wart mal ab, was die Erfahrungen in den nächsten Wochen so zeigen, und wenn ich Zeit habe, teste ich das mit nem Clone mal aus.

                  Denke aber, mein Redis ist schon echt flott.

                  Bin gerade fertig mit der Umstellung von den Xiaomi-Gateways auf n CC26X2R, und hab 140 Sensoren neu angelernt.. :D

                  S 1 Reply Last reply
                  1
                  • ? A Former User

                    @apollon77

                    Danke, ok, ich wart mal ab, was die Erfahrungen in den nächsten Wochen so zeigen, und wenn ich Zeit habe, teste ich das mit nem Clone mal aus.

                    Denke aber, mein Redis ist schon echt flott.

                    Bin gerade fertig mit der Umstellung von den Xiaomi-Gateways auf n CC26X2R, und hab 140 Sensoren neu angelernt.. :D

                    S Offline
                    S Offline
                    saeft_2003
                    Most Active
                    wrote on last edited by
                    #67

                    @ilovegym sagte in EXPERIMENTELL: JsonL Datenbank für js-controller:

                    Bin gerade fertig mit der Umstellung von den Xiaomi-Gateways auf n CC26X2R, und hab 140 Sensoren neu angelernt.. :D

                    Wow 140... das Gleiche hatte ich vor ca. einem Jahr gemacht und da waren es „nur“ 50 Sensoren und das war schon eine große Arbeit 🙈

                    1 Reply Last reply
                    0
                    • ScroungerS Offline
                      ScroungerS Offline
                      Scrounger
                      Developer
                      wrote on last edited by
                      #68

                      @apollon77 @AlCalzone
                      Anbei meine Erfahrungen mit jsonl, einfach nur top, super Arbeit :+1:

                      9dcde5ce-51f8-4d16-8c1f-3c674d9e18af-grafik.png

                      Disk IO pro Stunden liegt jetzt bei 260MiB, statt ursprünglich 35 GiB :-)

                      Weiter ist mir aufgefallen, dass die CPU Last mit jsonl ebenfalls runter gegangen ist:
                      eec939b6-59c0-4fa7-897e-fa692d9790c0-grafik.png

                      crunchipC L 2 Replies Last reply
                      2
                      • ScroungerS Scrounger

                        @apollon77 @AlCalzone
                        Anbei meine Erfahrungen mit jsonl, einfach nur top, super Arbeit :+1:

                        9dcde5ce-51f8-4d16-8c1f-3c674d9e18af-grafik.png

                        Disk IO pro Stunden liegt jetzt bei 260MiB, statt ursprünglich 35 GiB :-)

                        Weiter ist mir aufgefallen, dass die CPU Last mit jsonl ebenfalls runter gegangen ist:
                        eec939b6-59c0-4fa7-897e-fa692d9790c0-grafik.png

                        crunchipC Away
                        crunchipC Away
                        crunchip
                        Forum Testing Most Active
                        wrote on last edited by
                        #69

                        @scrounger sagte in EXPERIMENTELL: JsonL Datenbank für js-controller:

                        Weiter ist mir aufgefallen, dass die CPU Last mit jsonl ebenfalls runter gegangen ist:

                        bei mir genau das Gegenteil
                        77dcfd91-2071-4051-aa78-fa99f79a4d2a-image.png

                        umgestiegen von Proxmox auf Unraid

                        Dr. BakteriusD 1 Reply Last reply
                        0
                        • crunchipC crunchip

                          @scrounger sagte in EXPERIMENTELL: JsonL Datenbank für js-controller:

                          Weiter ist mir aufgefallen, dass die CPU Last mit jsonl ebenfalls runter gegangen ist:

                          bei mir genau das Gegenteil
                          77dcfd91-2071-4051-aa78-fa99f79a4d2a-image.png

                          Dr. BakteriusD Offline
                          Dr. BakteriusD Offline
                          Dr. Bakterius
                          Most Active
                          wrote on last edited by Dr. Bakterius
                          #70

                          @crunchip sagte in EXPERIMENTELL: JsonL Datenbank für js-controller:

                          bei mir genau das Gegenteil

                          Bei mir ist die CPU-Last auch gestiegen. Jedoch nicht ganz so extrem sondern "nur" um ~65% (6,2% > 10,2%). Damit liegt sie etwas höher als zu Beginn mit file|file (9,7%).

                          1 Reply Last reply
                          0
                          • A Offline
                            A Offline
                            Adnim
                            wrote on last edited by Adnim
                            #71

                            Meine CPU last hat sich auch um ca.2% erhöht, dafür keinerlei Schreibload mehr. Läuft Spitze. Maybee sollte das der neue StandartStandard werden mit JsonL!?

                            cpu.JPG
                            jsonl.JPG

                            Dr. BakteriusD O 2 Replies Last reply
                            0
                            • A Adnim

                              Meine CPU last hat sich auch um ca.2% erhöht, dafür keinerlei Schreibload mehr. Läuft Spitze. Maybee sollte das der neue StandartStandard werden mit JsonL!?

                              cpu.JPG
                              jsonl.JPG

                              Dr. BakteriusD Offline
                              Dr. BakteriusD Offline
                              Dr. Bakterius
                              Most Active
                              wrote on last edited by
                              #72

                              @adnim
                              a) Standard ist keine Standart. :-)

                              b) In deinem Fall sehe ich einen Anstieg wie bei mir um ~65% (von 2% auf 3,5%) oder 1,5%-Punkte.

                              A 1 Reply Last reply
                              0
                              • Dr. BakteriusD Dr. Bakterius

                                @adnim
                                a) Standard ist keine Standart. :-)

                                b) In deinem Fall sehe ich einen Anstieg wie bei mir um ~65% (von 2% auf 3,5%) oder 1,5%-Punkte.

                                A Offline
                                A Offline
                                Adnim
                                wrote on last edited by
                                #73

                                @dr-bakterius
                                :D danke für den Hinweis! :)

                                Ja Prozentual ist der Anstieg schon heftig. Aber da bin ich ganz entspannt das kostet mich etwas Strom, CPU hat ja keinen Verschleiß wie eine Festplatte. Wenn man das noch in den Griff bekommt umso besser, lüppt aber auch so...

                                Dr. BakteriusD 1 Reply Last reply
                                0
                                • A Adnim

                                  @dr-bakterius
                                  :D danke für den Hinweis! :)

                                  Ja Prozentual ist der Anstieg schon heftig. Aber da bin ich ganz entspannt das kostet mich etwas Strom, CPU hat ja keinen Verschleiß wie eine Festplatte. Wenn man das noch in den Griff bekommt umso besser, lüppt aber auch so...

                                  Dr. BakteriusD Offline
                                  Dr. BakteriusD Offline
                                  Dr. Bakterius
                                  Most Active
                                  wrote on last edited by
                                  #74

                                  @adnim Stimme dir eh zu - finde das neue Konzept bisher auch toll. Wobei eine CPU und die anderen Komponenten natürlich auch schneller altern je höher sie belastet werden. Doch das ist bei diesen Werten und im Vergleich zu den Datenträgern wirklich zu vernachlässigen.

                                  1 Reply Last reply
                                  0
                                  • ScroungerS Scrounger

                                    @apollon77 @AlCalzone
                                    Anbei meine Erfahrungen mit jsonl, einfach nur top, super Arbeit :+1:

                                    9dcde5ce-51f8-4d16-8c1f-3c674d9e18af-grafik.png

                                    Disk IO pro Stunden liegt jetzt bei 260MiB, statt ursprünglich 35 GiB :-)

                                    Weiter ist mir aufgefallen, dass die CPU Last mit jsonl ebenfalls runter gegangen ist:
                                    eec939b6-59c0-4fa7-897e-fa692d9790c0-grafik.png

                                    L Offline
                                    L Offline
                                    lonsimbt
                                    wrote on last edited by
                                    #75

                                    @scrounger @crunchip

                                    Bei mir sieht es bzgl. der Diskwrites sehr ähnlich aus:
                                    bild2.jpg
                                    bild1.jpg

                                    Nach der Einstellung geringerer Schreibzyklen für redis (States und Objects) ist die Schreiblast deutlich runtergegangen. Mit der Umstellung auf die aktuelle Version des js-controller und jsonl (erst nur Objects dann States und Objects) ist ein weiterer spürbarer Rückgang zu verzeichnen.

                                    Die CPU-Auslastung geht - insbesondere seit auch die States in der jsonl-DB liegen - spürbar nach oben (~+40 % von 3,25% auf 4,5%).

                                    Gruß Marco

                                    iobroker im Container (debian Bullseye) unter proxmox 7.1
                                    debmatic in VM (debian Buster) unter proxmox 7.1 mit HB-RF-USB und RPI-RF-MOD
                                    40 HomeMatic Geräte, Phillips Hue, Ikea Tradfri, Logitech Harmony Hub, Botvac Connected, Robonect

                                    AlCalzoneA apollon77A 2 Replies Last reply
                                    0
                                    • A Adnim

                                      Meine CPU last hat sich auch um ca.2% erhöht, dafür keinerlei Schreibload mehr. Läuft Spitze. Maybee sollte das der neue StandartStandard werden mit JsonL!?

                                      cpu.JPG
                                      jsonl.JPG

                                      O Offline
                                      O Offline
                                      oFbEQnpoLKKl6mbY5e13
                                      wrote on last edited by oFbEQnpoLKKl6mbY5e13
                                      #76

                                      @adnim sagte in EXPERIMENTELL: JsonL Datenbank für js-controller:

                                      Maybee sollte das der neue Standard werden mit JsonL!?

                                      Wieviele hatten denn seit ihrer Umstellung Situationen, in denen das neue Schreibverfahren seine Robustheit unter Beweis stellen konnte?

                                      1 Reply Last reply
                                      0
                                      • L lonsimbt

                                        @scrounger @crunchip

                                        Bei mir sieht es bzgl. der Diskwrites sehr ähnlich aus:
                                        bild2.jpg
                                        bild1.jpg

                                        Nach der Einstellung geringerer Schreibzyklen für redis (States und Objects) ist die Schreiblast deutlich runtergegangen. Mit der Umstellung auf die aktuelle Version des js-controller und jsonl (erst nur Objects dann States und Objects) ist ein weiterer spürbarer Rückgang zu verzeichnen.

                                        Die CPU-Auslastung geht - insbesondere seit auch die States in der jsonl-DB liegen - spürbar nach oben (~+40 % von 3,25% auf 4,5%).

                                        Gruß Marco

                                        AlCalzoneA Offline
                                        AlCalzoneA Offline
                                        AlCalzone
                                        Developer
                                        wrote on last edited by
                                        #77

                                        @lonsimbt sagte in EXPERIMENTELL: JsonL Datenbank für js-controller:

                                        3,25% auf 4,5%

                                        Das ist jetzt alles nicht so die Welt, aber wir haben bereits grundlegend was in der File DB identifiziert (der Teil, der auch von JSONL genutzt wird), was das verursachen könnte.

                                        Warum `sudo` böse ist: https://forum.iobroker.net/post/17109

                                        1 Reply Last reply
                                        1
                                        • M Offline
                                          M Offline
                                          Megawaldi
                                          wrote on last edited by
                                          #78

                                          Habt ihr beides, also States und Objects auf JsonL umgestellt?
                                          Ich nutze im moment noch radis für states und file für objects und bin am überlegen wie ich das in Zukunft so haben will.

                                          1 Reply Last reply
                                          0
                                          Reply
                                          • Reply as topic
                                          Log in to reply
                                          • Oldest to Newest
                                          • Newest to Oldest
                                          • Most Votes


                                          Support us

                                          ioBroker
                                          Community Adapters
                                          Donate

                                          736

                                          Online

                                          32.6k

                                          Users

                                          82.2k

                                          Topics

                                          1.3m

                                          Posts
                                          Community
                                          Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen | Einwilligungseinstellungen
                                          ioBroker Community 2014-2025
                                          logo
                                          • Login

                                          • Don't have an account? Register

                                          • Login or register to search.
                                          • First post
                                            Last post
                                          0
                                          • Home
                                          • Recent
                                          • Tags
                                          • Unread 0
                                          • Categories
                                          • Unreplied
                                          • Popular
                                          • GitHub
                                          • Docu
                                          • Hilfe