Navigation

    Logo
    • Register
    • Login
    • Search
    • Recent
    • Tags
    • Unread
    • Categories
    • Unreplied
    • Popular
    • GitHub
    • Docu
    • Hilfe
    1. Home
    2. Deutsch
    3. ioBroker Allgemein
    4. SQL-Adapter verursacht hohe CPU-Last

    NEWS

    • Neuer Blog: Fotos und Eindrücke aus Solingen

    • ioBroker@Smart Living Forum Solingen, 14.06. - Agenda added

    • ioBroker goes Matter ... Matter Adapter in Stable

    SQL-Adapter verursacht hohe CPU-Last

    This topic has been deleted. Only users with topic management privileges can see it.
    • AxelF1977
      AxelF1977 @Urs last edited by

      @Urs sagte in SQL-Adapter verursacht hohe CPU-Last:

      @AxelF1977 Danke

      Gerne, bin ja froh wenn ich auch mal helfen kann, und mir nicht nur geholfen wird

      1 Reply Last reply Reply Quote 0
      • Nashra
        Nashra Most Active Forum Testing last edited by

        Moin, nach dem Update auf 3.1.5 ging es stetig aufwärts mit der Last. Heute Morgen
        gegen 6 Uhr ging es radikal nach unten und im Log waren auch sehr viele Fehler kurz davor.
        Mal sehen ob es wieder hoch geht oder sich beruhigt hat. Achja, die Extremspitzen waren
        bei mir vom Adapter "DasWetter", warum auch immer.
        auslastung.PNG

        AxelF1977 1 Reply Last reply Reply Quote 0
        • AxelF1977
          AxelF1977 @Nashra last edited by

          @Nashra sagte in SQL-Adapter verursacht hohe CPU-Last:
          Achja, die Extremspitzen waren

          bei mir vom Adapter "DasWetter", warum auch immer.
          auslastung.PNG

          Kann ich bestättigen, Das Wetter und hue-extended verursachen bei mir auch eine höhere Last aktuell. Noch vor dem Javascript Adapter, die ansich gut zu tun hat.

          MySQL bleibt bei ca. 3%

          1 Reply Last reply Reply Quote 0
          • Nashra
            Nashra Most Active Forum Testing last edited by

            Nicht falsch verstehen, man sieht diese Spitzen hier sehr schlecht. Es war alles auf sehr hohem Niveau am laufen,
            nur DasWetter haute noch mehr drauf. Die anderen Adapter waren auch für die hohe Last verantwortlich wie man
            ja sieht. Komisch ist/war nur das es langsam angestiegen ist über ca. 24 Std. und heute Morgen dieser Einbruch
            kam. Mal sehen was in den nächsten Stunden passiert.

            1 Reply Last reply Reply Quote 0
            • U
              Urs last edited by Urs

              Einen kontinuierlichen Anstieg wie bei Dir konnte ich nicht beobachten. Aber trotzdem komisch, denn auch bei mir ist heute Nacht was los gewesen. Allerdings etwas früher und in die andere Richtung:
              c10baa98-131e-4118-b3aa-e645e22b2e7e-image.png
              Einen eindeutigen Schuldigen konnte ich bisher nicht ausmachen. Bis auf den system.host.iobroker-Live der im Moment zwischen 5 und 10% CPU Last pendelt (vermutlich normal dass der erhöht ist?) scheinen alle anderen Adapter keine übermässigen CPU-Zeiten aufzuweisen. Aber da ich die Werte bisher nicht aufgezeichnet und auch nicht wirklich angeschaut habe ist es schwierig konkrete Aussagen dazu zu machen. Im Log hab ich auf die schnelle auch nichts wirklich auffälliges gefunden.

              Daswetter hat bei mir seit gestern gerade mal 0.35s cputime, ist aber auch alive = false. ist das bei euch auch so? Ist der nur alive wenn er Daten holt? Das wäre dann bei mir nur alle 30 Minuten.

              Nashra 1 Reply Last reply Reply Quote 0
              • Nashra
                Nashra Most Active Forum Testing @Urs last edited by

                @Urs sagte in SQL-Adapter verursacht hohe CPU-Last:

                Daswetter hat bei mir seit gestern gerade mal 0.35s cputime, ist aber auch alive = false. ist das bei euch auch so? Ist der nur alive wenn er Daten holt? Das wäre dann bei mir nur alle 30 Minuten.

                Jep, die extremen Spitzen waren bei mir auch alle 30 Minuten....DasWetter, nur alive wenn er Daten holt.
                Aber bei mir steigt es wieder an, das ist doch nicht normal...
                auslastung2.PNG

                Was läuft:
                admin 4.1.1
                js-controller 3.1.5
                Script-engine 4.6.17
                Nodejs 12.18.0
                NPM 6.14.4

                1 Reply Last reply Reply Quote 0
                • AxelF1977
                  AxelF1977 last edited by

                  Interessant ist, dass sich die ganze LAst der CPU auf nur 8 Adapter verteilt. Wobei 2 der Top 4 sogar deaktiviert sind...

                  fcac057a-10d0-4fc5-aeba-67efb1bee141-image.png

                  Es gibt immer mal Spitzen, z.B. ca. 00:30 und ca. 12:30 Uhr ansonsten läuft ioBroker recht ruhig seit dem Update. Ich sehe bei mir keinen größeren Anstieg mehr.

                  5ddba3d0-3ab6-4615-90d7-d8bda98b723e-image.png

                  1 Reply Last reply Reply Quote 0
                  • U
                    Urs last edited by

                    Hmm...es gibt Sachen die muss ich nicht verstehen, bei mir ist inzwischen auch wieder alles im Lot:
                    57160645-b38b-4bea-bc7d-2d8e6e6676e6-image.png
                    Das einzige was ich um die Zeit als die Last wieder runter ging gemacht habe ist mich im Iobroker eingeloggt, ein paar cpu-Daten der Adapter und das Logbuch kurz angeschaut. Habe weder Iobroker noch irgend ein Adapter neu gestartet oder irgendwelche Änderungen daran ausgeführt. Komisch...
                    Aber egal, im Moment ist wieder alles im Lot, mal schauen wie lange.

                    @AxelF1977 Noch was anderes: Womit hast Du Deine Visualisierung realisiert? Die steht nicht zufällig irgendwo online zur Verfügung? Ich sehe da nämlich immer wieder interessante Details...so jetzt wieder in der Übersicht der CPU-Auslastung...

                    Danke
                    Urs

                    AxelF1977 1 Reply Last reply Reply Quote 0
                    • AxelF1977
                      AxelF1977 @Urs last edited by AxelF1977

                      @Urs sagte in SQL-Adapter verursacht hohe CPU-Last:

                      @AxelF1977 Noch was anderes: Womit hast Du Deine Visualisierung realisiert? Die steht nicht zufällig irgendwo online zur Verfügung? Ich sehe da nämlich immer wieder interessante Details...so jetzt wieder in der Übersicht der CPU-Auslastung...

                      Danke
                      Urs

                      Hi Urs,

                      sobald das Projekt komplett fertig ist, stelle ich es in einem Thema vor. An sich gibt es da schon eins, aber ich habe das von Grund auf neu aufgebaut, bzw. bin noch an Details dran.

                      https://forum.iobroker.net/topic/27704/visualisierung-mit-material-design?page=1

                      Das ist alles sehr umfangreich, daher schaue ich dann mal, wie ich das dann exportiere.

                      Einige Widgets kann ich Dir aber schon mal liefern

                      Widgets kleine Diagramme CPU und RAM
                      Line-chart-cpuram.txt

                      Widgets Kreisdiagramme, diese brauchen noch Datenpunkte
                      Kreisdiagramme.txt

                      5b7b9140-2362-4472-9328-122bfc5befec-image.png

                      Widget großes Diagramm CPU in eigene VIEW packen, _card_Diagramme_Proxmox_cpuram_ioBroker_cpu_popup
                      Line-chart-cpu.txt

                      Widget großes Diagramm RAM in eigene VIEW packen, _card_Diagramme_Proxmox_cpuram_ioBroker_RAM_popup
                      Line-chart-ram.txt

                      Funktioniert NUR mit dem Material Design Adapter und Uhulas Material Design CSS. Justgage muss auch vorhanden sein.

                      Bei Fragen gerne als private Nachricht

                      1 Reply Last reply Reply Quote 0
                      • Nashra
                        Nashra Most Active Forum Testing last edited by

                        Nur zur Info, Übeltäter gefunden. Der Info-Adapter war durch ein Update wohl etwas
                        durcheinander bei den Einstellungen. Deaktiviert und schon ging die Last rapide runter.
                        auslastung3.PNG

                        1 Reply Last reply Reply Quote 0
                        • liv-in-sky
                          liv-in-sky last edited by liv-in-sky

                          admin 4.1.1
                          js-controller 3.1.5 - last auch mit 3.1.4 und auch mit 2.2.9
                          Script-engine 4.6.17
                          Nodejs 12.17.0
                          NPM 6.14.4

                          bei mir ist die hohe last auch

                          Image 2.png

                          habe viele einträge dieser art:

                          sql.0	2020-06-13 09:14:49.121	warn	(12765) No realID found for sensate.1.liv.57f8d1c7c744606b08a169f602b799698320c941d7a3739f988a4add97153ac2.value
                          sql.0	2020-06-13 09:14:49.121	warn	(12765) No realID found for sensate.1.Unknown.57f8d1c7c744606b08a169f602b799698320c941d7a3739f988a4add97153ac2.value
                          sql.0	2020-06-13 09:14:49.121	warn	(12765) No realID found for Sonoff.5.SonoffPow2.ENERGY_Power
                          sql.0	2020-06-13 09:14:49.121	warn	(12765) No realID found for javascript.0.Tabelle_EnergieRechnung.Shelly Virtuell.MonGeskWh
                          sql.0	2020-06-13 09:14:49.121	warn	(12765) No realID found for javascript.0.Tabelle_EnergieRechnung.Shelly Virtuell.MonBeforekWh
                          sql.0	2020-06-13 09:14:49.120	warn	(12765) No realID found for javascript.0.Tabelle_EnergieRechnung.Shelly Virtuell.monkWh
                          sql.0	2020-06-13 09:14:49.120	warn	(12765) No realID found for javascript.0.Tabelle_EnergieRechnung.Shelly Virtuell.todaykWh
                          sql.0	2020-06-13 09:14:49.120	warn	(12765) No realID found for hm-rpc.9.OEQ1713445.4.SET_TEMPERATURE
                          sql.0	2020-06-13 09:14:49.120	warn	(12765) No realID found for hm-rpc.9.OEQ1713445.4.ACTUAL_TEMPERATURE
                          sql.0	2020-06-13 09:14:49.120	warn	(12765) No realID found for hm-rpc.6.OEQ0301166.2.SET_TEMPERATURE
                          sql.0	2020-06-13 09:14:49.120	warn	(12765) No realID found for hm-rpc.6.OEQ0301166.1.TEMPERATURE
                          sql.0	2020-06-13 09:14:49.120	warn	(12765) No realID found for hm-rpc.6.OEQ0301166.1.HUMIDITY
                          sql.0	2020-06-13 09:14:49.119	warn	(12765) No realID found for hm-rpc.6.OEQ1674852.2.SET_TEMPERATURE
                          sql.0	2020-06-13 09:14:49.119	warn	(12765) No realID found for hm-rpc.6.OEQ1674852.1.TEMPERATURE
                          sql.0	2020-06-13 09:14:49.119	warn	(12765) No realID found for hm-rpc.6.OEQ1674852.1.HUMIDITY
                          sql.0	2020-06-13 09:14:49.119	warn	(12765) No realID found for hm-rpc.6.OEQ1713445.4.SET_TEMPERATURE
                          sql.0	2020-06-13 09:14:49.119	warn	(12765) No realID found for hm-rpc.6.OEQ1713445.4.ACTUAL_TEMPERATURE
                          sql.0	2020-06-13 09:14:49.119	warn	(12765) No realID found for hm-rpc.0.MEQ0705328.1.GAS_POWER
                          sql.0	2020-06-13 09:14:49.119	warn	(12765) No realID found for hm-rpc.2.0001D3C99C5416.6.POWER
                          sql.0	2020-06-13 09:14:49.119	warn	(12765) No realID found for hm-rpc.2.00185709ACB04E.1.WIND_SPEED
                          sql.0	2020-06-13 09:14:49.118	warn	(12765) No realID found for hm-rpc.2.00185709ACB04E.1.HUMIDITY
                          sql.0	2020-06-13 09:14:49.118	warn	(12765) No realID found for hm-rpc.2.00185709ACB04E.1.ACTUAL_TEMPERATURE
                          sql.0	2020-06-13 09:14:49.118	warn	(12765) No realID found for hm-rpc.2.000E9A4995C244.1.HUMIDITY
                          sql.0	2020-06-13 09:14:49.118	warn	(12765) No realID found for hm-rpc.2.000E9A4995C244.1.ACTUAL_TEMPERATURE
                          

                          @apollon77 hast du vielleicht eine idee dazu ?

                          1 Reply Last reply Reply Quote 0
                          • Nashra
                            Nashra Most Active Forum Testing last edited by Nashra

                            Moin, eigentlich wundert es mich das es so wenigen auffällt das die Last hochgeht.
                            Seit Tagen bin ich dies ja auch am beobachten und versuche den oder die Übeltäter
                            zu finden. Anbei ein Diagram wo man dies sieht und wo ich kurz vor 9 Uhr den
                            Javascript-Adapter neu gestartet habe.
                            cpu-auslastung.PNG

                            admin 4.1.1
                            js-controller 3.1.5
                            Script-Engine 4.6.17
                            Nodejs 12.18.0
                            NPM 6.14.4

                            Nachtrag:
                            Ich glaube nicht das es nur an der Script-Engine liegt da ich es auch mit älteren Versionen versucht habe.
                            Was mir aber dabei aufgefallen ist, das es mit diesen etwas länger dauert bis sich die CPU-Last wieder
                            langsam in Bereiche von über 50% bewegt.

                            Dr. Bakterius 1 Reply Last reply Reply Quote 0
                            • liv-in-sky
                              liv-in-sky last edited by

                              konnte meine last erstmal wieder runter bekommen

                              habe gestern objekte importiert zum teten eines scriptes - darin waren viele dtenpunkte für einen eintrag in die history angeklickt - habe alle diese einträge gelöscht

                              scheint im moment wieder zu funktionieren - last ist wieder wie üblich - ca. 10% - außer bei speedtest, da wird es wieder höher

                              werde mal weiter beobachten, was passiert, wenn länger läuft

                              1 Reply Last reply Reply Quote 0
                              • Dr. Bakterius
                                Dr. Bakterius Most Active @Nashra last edited by

                                @Nashra sagte in SQL-Adapter verursacht hohe CPU-Last:

                                eigentlich wundert es mich das es so wenigen auffällt das die Last hochgeht.

                                Vielleicht weil das nicht bei jedem so ist? So sieht die CPU-Last meines Proxmox-LCX über die vergangenen 7 Tage aus:
                                cpu.png

                                Da steigt nichts an.

                                1 Reply Last reply Reply Quote 0
                                • Nashra
                                  Nashra Most Active Forum Testing last edited by

                                  Ich verstehe es ja auch nicht @Dr-Bakterius da es monatelang ohne Probleme lief. Nach der Restart
                                  der Script-Engine heute morgen fängt es jetzt langsam wieder an zu steigen.
                                  cpu-auslastung2.PNG

                                  1 Reply Last reply Reply Quote 0
                                  • Nashra
                                    Nashra Most Active Forum Testing last edited by

                                    Tach auch, Problem der hohen CPU-Last lokalisiert 😊
                                    Zuerst, in Common und Global waren noch zwei alte Scripte (Eventlist) aktiviert und
                                    dann noch der DasWetter-Adapter und der Unifi-Adapter deaktiviert.
                                    Danach war Ruhe d.h. die Scripte sind egal aber das die zwei Adapter beim Daten laden
                                    bis zu 70% Cpu-Last haben das geht mal gar nicht. Der schlimmste hierbei ist der
                                    Unifi da dieser im Minutentakt abfragt. DasWetter holt nur alle 2 Stunden jetzt aber der Unif
                                    muß dran glauben obwohl ich das Teil bräuchte.

                                    liv-in-sky 1 Reply Last reply Reply Quote 0
                                    • liv-in-sky
                                      liv-in-sky @Nashra last edited by

                                      @Nashra frage neuen unifi adapter auch jede minute ab- war bzw. macht bei mir kein problem

                                      Nashra 1 Reply Last reply Reply Quote 0
                                      • Nashra
                                        Nashra Most Active Forum Testing @liv-in-sky last edited by

                                        @liv-in-sky sagte in SQL-Adapter verursacht hohe CPU-Last:

                                        @Nashra frage neuen unifi adapter auch jede minute ab- war bzw. macht bei mir kein problem

                                        Hm, bei mir läuft IO im LXC Container und ob es daran liegt bezweifle ich.
                                        Habe Unifi vorhin um 17:20 aktiviert, schau dir mal die Grafik an, nicht normal
                                        cpu-auslastung3.PNG
                                        und um ca 17:30 wieder deaktiviert weil mir das zu doll wird.

                                        liv-in-sky 1 Reply Last reply Reply Quote 0
                                        • liv-in-sky
                                          liv-in-sky @Nashra last edited by liv-in-sky

                                          @Nashra

                                          • hast du ein script, das darauf (adapter datenpunkte) reagiert und einen fehler hat
                                          • hast du das unifi script deaktiviert
                                          • ist das auch, wenn du alle 3 minuten abfrägst?

                                          mehr fällt mir im moment nicht ein

                                          Nashra 1 Reply Last reply Reply Quote 0
                                          • Nashra
                                            Nashra Most Active Forum Testing @liv-in-sky last edited by

                                            @liv-in-sky sagte in SQL-Adapter verursacht hohe CPU-Last:

                                            @Nashra

                                            • hast du ein script, das darauf (adapter datenpunkte) reagiert und einen fehler hat
                                            • hast du das unifi script deaktiviert

                                            mehr fällt mir im moment nicht ein

                                            Nö alles deaktiviert. Ich hole auch nur die Daten für die Anwesenheit der Handy's, sonst nichts.

                                            liv-in-sky 2 Replies Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Support us

                                            ioBroker
                                            Community Adapters
                                            Donate
                                            FAQ Cloud / IOT
                                            HowTo: Node.js-Update
                                            HowTo: Backup/Restore
                                            Downloads
                                            BLOG

                                            861
                                            Online

                                            31.9k
                                            Users

                                            80.1k
                                            Topics

                                            1.3m
                                            Posts

                                            sql adapter cpu last
                                            13
                                            79
                                            7145
                                            Loading More Posts
                                            • Oldest to Newest
                                            • Newest to Oldest
                                            • Most Votes
                                            Reply
                                            • Reply as topic
                                            Log in to reply
                                            Community
                                            Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen
                                            The ioBroker Community 2014-2023
                                            logo