Navigation

    Logo
    • Register
    • Login
    • Search
    • Recent
    • Tags
    • Unread
    • Categories
    • Unreplied
    • Popular
    • GitHub
    • Docu
    • Hilfe
    1. Home
    2. Deutsch
    3. Einsteigerfragen
    4. InfluxDB - Daten weg / Wiederherstellung [gelöst]

    NEWS

    • ioBroker@Smart Living Forum Solingen, 14.06. - Agenda added

    • ioBroker goes Matter ... Matter Adapter in Stable

    • Monatsrückblick - April 2025

    InfluxDB - Daten weg / Wiederherstellung [gelöst]

    This topic has been deleted. Only users with topic management privileges can see it.
    • Glasfaser
      Glasfaser @Naturfreund last edited by

      @naturfreund sagte in InfluxDB - Daten weg / Wiederherstellung:

      Und jeden Tag ab 5:10 Uhr:

      und auch 4:10 Uhr

      2023-01-09 04:10:30.903 - info: influxdb.0 (13722) Connecting http://localhost:8086/ ...
      

      im Stundentakt !?

      1 Reply Last reply Reply Quote 0
      • Glasfaser
        Glasfaser @Naturfreund last edited by Glasfaser

        @crunchip

        @naturfreund sagte in InfluxDB - Daten weg / Wiederherstellung:
        2023-01-08 05:09:53.776 - warn: influxdb.0 (13722) Error on writePoint("{"value":1030.9249,"time":"2023-01-08T04:09:52.757Z","from":"system.adapter.sma-em.0","q":0,"ack":true}): Error: connect ECONNREFUSED 127.0.0.1:8086 / "connect ECONNREFUSED 127.0.0.1:8086""

        ich lese das so , der Raspberry hat die Zeit 5:09 Uhr und er will den Wert von 4:09 Uhr schreiben .

        Da passt doch was nicht zusammen , aber ich denke mal nicht das deswegen ein ECONNREFUSED kommt!?

        Homoran crunchip 2 Replies Last reply Reply Quote 0
        • Homoran
          Homoran Global Moderator Administrators @Glasfaser last edited by

          @glasfaser sagte in InfluxDB - Daten weg / Wiederherstellung:

          Da passt doch was nicht zusammen ,

          Zeitzonen?

          1 Reply Last reply Reply Quote 0
          • crunchip
            crunchip Forum Testing Most Active @Glasfaser last edited by crunchip

            @glasfaser ich hatte damals auch Probleme mit error on writePoint, teilweise waren bei mir mehrere Stunden oder sogar Tage dazwischen in der Meldung, nicht nur eine Stunde.
            Abhilfe schaffte ich mit den Einstellungen in der Influx Instanz
            41cc1a1b-0e59-44de-8db3-9121770be899-image.png

            allerdings hatte ich nicht das Problem das die Datenbank nicht erreichbar wäre

            Glasfaser N 3 Replies Last reply Reply Quote 0
            • Glasfaser
              Glasfaser @crunchip last edited by Glasfaser

              @crunchip sagte in InfluxDB - Daten weg / Wiederherstellung:

              allerdings hatte ich nicht das Problem das die Datenbank nicht erreichbar wäre

              und das finde ich gerade merkwürdig .

              ich hatte es nur um 5:10 Uhr / sporalisch in der Woche und kein Fehler / Hinweis ( Adapterstart oder Sonstiges ) dazu gefunden .

              Bei Ihm ist es schon im Stundentakt wenn ich das so deute . 4:10 / 5:10 Uhr

              1 Reply Last reply Reply Quote 0
              • crunchip
                crunchip Forum Testing Most Active @Naturfreund last edited by

                @naturfreund weil ich mal etwas quergelesen habe https://forum.iobroker.net/post/508617
                wie ist der aktuelle Stand Netzwerktechnisch?

                oder
                @naturfreund sagte in SMA Wechselrichter:

                Die Aktualisierungen vom sma-em Adapter kommen zwar mit einer höheren Abtastrate (jede 10ms wird ein Wert über den Bus verschickt), allerdings ändert sich der Wert den der HM2.0 heraus schickt nur alle 2 Sekunden.
                Die Werte die über modbus vom WR kommen werden jede Sekunde verschickt.

                shelly em hast du auch noch soweit ich gelesen habe
                ist dein Pi vllt damit überfordert

                N 1 Reply Last reply Reply Quote 0
                • N
                  Naturfreund @crunchip last edited by Naturfreund

                  @crunchip Die Einstellung habe ich in einem anderen Thread schon gefunden. Gibt es eine Definition für den Wert? Was ist "eine Schreibaktion" ? Mir fehlt da die Einordnung

                  @glasfaser

                  Zum Überblick ein Screenshot aus dem Log:
                  0ae4a7de-4540-42c9-b0a3-6c88c1c93ed1-image.png

                  Die Warnungen "Error on writePoint" kommen ab 2:42 Uhr für jeden Datenpunkt .Häufigkeit varriert je nach Datenpunkt, ich hab aber auch error-counts von 10 gesehen.

                  Mit dem Backitup Adapter scheinst du einen guten Riecher gehabt zu haben, die Sicherung startet um 2:40 Uhr:

                  15019cb1-66d7-436d-8c70-34767311524d-image.png

                  Der Error: connect ECONNREFUSED kommt um 5:10 Uhr einmal.

                  Error on writePoint

                  Vor dem Error: connect ECONNREFUSED sehe ich noch nichts auffälligs, außer den Wetteradapter.

                  2023-01-10 05:09:02.714 - info: weatherunderground.0 (5762) starting. Version 3.4.2 in /opt/iobroker/node_modules/iobroker.weatherunderground, node: v16.17.0, js-controller: 4.0.24
                  2023-01-10 05:09:08.279 - info: weatherunderground.0 (5762) Terminated (NO_ERROR): Without reason
                  2023-01-10 05:09:08.809 - info: host.raspberrypi instance system.adapter.weatherunderground.0 terminated with code 0 (NO_ERROR)
                  2023-01-10 05:09:53.355 - warn: influxdb.0 (13722) Error on writePoint("{"value":147.1,"time":"2023-01-10T04:09:53.342Z","from":"system.adapter.sma-em.0","q":0,"ack":true}): Error: connect ECONNREFUSED 127.0.0.1:8086 / "connect ECONNREFUSED 127.0.0.1:8086""
                  2023-01-10 05:10:03.362 - info: influxdb.0 (13722) Connecting http://localhost:8086/ ...
                  2023-01-10 05:10:03.362 - info: influxdb.0 (13722) Influx DB Version used: 1.x
                  2023-01-10 05:10:03.378 - error: influxdb.0 (13722) Error: connect ECONNREFUSED 127.0.0.1:8086
                  2023-01-10 05:10:13.379 - info: influxdb.0 (13722) Connecting http://localhost:8086/ ...
                  2023-01-10 05:10:13.380 - info: influxdb.0 (13722) Influx DB Version used: 1.x
                  

                  Weatherunderground läuft recht häufig:
                  b151f3e5-d1bf-4ae4-ab19-afb085d3f4b4-image.png

                  Glasfaser crunchip 2 Replies Last reply Reply Quote 0
                  • Glasfaser
                    Glasfaser @Naturfreund last edited by

                    @naturfreund

                    Mit dem Backitup Adapter scheinst du einen guten Riecher gehabt zu haben, die Sicherung startet um 2:40 Uhr:

                    Sicherst du auch Influx damit oder nur den ioBroker

                    1 Reply Last reply Reply Quote 0
                    • N
                      Naturfreund last edited by

                      @glasfaser Beides

                      1 Reply Last reply Reply Quote 0
                      • N
                        Naturfreund @crunchip last edited by

                        @crunchip said in InfluxDB - Daten weg / Wiederherstellung:

                        @glasfaser ich hatte damals auch Probleme mit error on writePoint, teilweise waren bei mir mehrere Stunden oder sogar Tage dazwischen in der Meldung, nicht nur eine Stunde.
                        Abhilfe schaffte ich mit den Einstellungen in der Influx Instanz
                        41cc1a1b-0e59-44de-8db3-9121770be899-image.png

                        allerdings hatte ich nicht das Problem das die Datenbank nicht erreichbar wäre

                        Ok, hab die Erklärung gefunden:
                        By changing the configuration it is possible to cache new data points up to a defined count or a defined maximum interval after which all points are stored into the database. This also gives better performance and less system load compared to writing the data points directly. InfluxDB has a limitation of the maximum size for writes which is at around 2MB. It should be safe to have up to 15.000 data points as buffer maximum, maybe also 20.000, but this highly depends on the length of your datapoint-IDs.

                        Quelle: https://github.com/ioBroker/ioBroker.influxdb

                        Glasfaser 1 Reply Last reply Reply Quote 0
                        • Glasfaser
                          Glasfaser @Naturfreund last edited by

                          @naturfreund

                          Wie groß ist das Backup von Influx bzw. von ioBroker

                          ls -lAh /opt/iobroker/backups/
                          
                          N 1 Reply Last reply Reply Quote 0
                          • N
                            Naturfreund @Glasfaser last edited by

                            @glasfaser

                            Irgendwie wusste ich, das wird die nächste Frage 😉
                            1,3 GB sind das aktuell.

                            12.1.2023, 02:40 >>> influxDB_2023_01_12-02_40_18_backupiobroker.tar.gz <<< (1.3GiB)

                            1 Reply Last reply Reply Quote 0
                            • N
                              Naturfreund last edited by Naturfreund

                              Was mir gerade aufgefallen ist, Backitup legt die Backups teilweise auch lokal ab obwohl ich Google Drive als Zielort gewählt habe:

                              Lokal:
                              63852eb8-40fb-49f2-8032-3509c30feff6-image.png

                              Google Drive:

                              e70b3535-32a9-48e9-85e1-a8af9e521bd9-image.png

                              Wenn er die Sicherungen tatsächlich parallel ablegt, dann wurdert mich ja nichts. Da aber dann die Frage, warum? Lokal ist nicht konfiguriert. Oder werden die Sicherungen erst lokal abgelegt und dann in Google Drive kopiert?

                              1 Reply Last reply Reply Quote 0
                              • crunchip
                                crunchip Forum Testing Most Active last edited by

                                @naturfreund ich nutze zwar nicht google, aber die werden local abgelegt und wenn abgeschloßen gelöscht, ausser das das "Zielverzeichnis" ist nicht erreichbar, dann verbleiben sie local
                                selbiges gilt auch für manuelle backups, diese verbleiben ebenfalls local und müssen manuell gelöscht werden.

                                1 Reply Last reply Reply Quote 0
                                • crunchip
                                  crunchip Forum Testing Most Active @Naturfreund last edited by crunchip

                                  @naturfreund sagte in InfluxDB - Daten weg / Wiederherstellung:

                                  Weatherunderground läuft recht häufig:

                                  was hast du da eingestellt?
                                  2133ff89-aff1-4bf3-bbf8-3ddbaacc5ce9-image.png

                                  die Antwort steht noch aus? https://forum.iobroker.net/post/927078

                                  1 Reply Last reply Reply Quote 0
                                  • N
                                    Naturfreund @crunchip last edited by Naturfreund

                                    @crunchip said in InfluxDB - Daten weg / Wiederherstellung:

                                    @naturfreund weil ich mal etwas quergelesen habe https://forum.iobroker.net/post/508617
                                    wie ist der aktuelle Stand Netzwerktechnisch?

                                    oder
                                    @naturfreund sagte in SMA Wechselrichter:

                                    Die Aktualisierungen vom sma-em Adapter kommen zwar mit einer höheren Abtastrate (jede 10ms wird ein Wert über den Bus verschickt), allerdings ändert sich der Wert den der HM2.0 heraus schickt nur alle 2 Sekunden.
                                    Die Werte die über modbus vom WR kommen werden jede Sekunde verschickt.

                                    shelly em hast du auch noch soweit ich gelesen habe
                                    ist dein Pi vllt damit überfordert

                                    Ja, das ist noch aktuell so.
                                    Den Shelly 3 EM habe ich nicht mehr. Die historischen Daten möchte ich allerdings behalten, deshalb existiert der Datenpunkt noch. Viele Shellys habe ich bereits wieder raus geschmissen. Grundsätzlich sollte ich mal aufräumen, shame on me.

                                    Die Einstellungen vom Wetteradapter hatte ich oben schon gepostet, ist vielleicht unter gegangen. Ich hole die Daten zu bestimmten Zeiten ab:

                                    @naturfreund said in InfluxDB - Daten weg / Wiederherstellung:

                                    Weatherunderground läuft recht häufig:
                                    b151f3e5-d1bf-4ae4-ab19-afb085d3f4b4-image.png

                                    crunchip 1 Reply Last reply Reply Quote 0
                                    • crunchip
                                      crunchip Forum Testing Most Active @Naturfreund last edited by

                                      @naturfreund sagte in InfluxDB - Daten weg / Wiederherstellung:

                                      Ich hole die Daten zu bestimmten Zeiten ab:

                                      das habe ich schon gesehen, warum in 3-4 Minuten Takt, das überlastet und bringt auch nix, deshalb hab ich doch die korrekte Einstellung gezeigt.

                                      @naturfreund sagte in InfluxDB - Daten weg / Wiederherstellung:

                                      Ja, das ist noch aktuell so.

                                      Netztwerk?

                                      N 1 Reply Last reply Reply Quote 0
                                      • N
                                        Naturfreund @crunchip last edited by

                                        @crunchip

                                        Die Daten hole ich so hochfrequent, da ich einige davon mit meiner PV Anlage abgleiche (solare Einstrahlung).
                                        Werde ich auf 15 Minuten reduzieren.
                                        Dann funktioniert das Skript allerdings nicht mehr 😬

                                        Außerdem hab ich das Backup für die InfluxDB heute ausgesetzt.

                                        Die "Schreibaktionen zusammenfassen" hab ich auf 50 geändert. Mit 15000/5000/1000/100 kommen mir die Werte für die Visualisierung zu langsam.

                                        Morgen werden wir im Log sehen ob es was gebracht hat.

                                        Netzwerk dürfte kein Flaschenhals sein, ich habe je nach Standort im Haus zwischen 100 und 1100 MBits. Raspi/Router/Wechselrichter/SMA HM 2.0 hängen alle am Gigabit Switch über Kabel (max 2m).

                                        1 Reply Last reply Reply Quote 0
                                        • N
                                          Naturfreund last edited by

                                          Log war heute leer was die obigen Warnings und Errors betrifft.

                                          Das Backup auf Google Drive war eine Notlösung. Werde jetzt endlich die NAS einbinden und die Sicherungen dort ablegen und damit noch einmal testen.

                                          Zweites Problem, wie bekomme ich die alten Daten wieder hergestellt?

                                          1 Reply Last reply Reply Quote 0
                                          • crunchip
                                            crunchip Forum Testing Most Active last edited by

                                            @naturfreund sagte in InfluxDB - Daten weg / Wiederherstellung:

                                            wie bekomme ich die alten Daten wieder hergestellt

                                            welche alten Daten?

                                            N 1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Support us

                                            ioBroker
                                            Community Adapters
                                            Donate

                                            717
                                            Online

                                            31.7k
                                            Users

                                            79.8k
                                            Topics

                                            1.3m
                                            Posts

                                            7
                                            142
                                            10644
                                            Loading More Posts
                                            • Oldest to Newest
                                            • Newest to Oldest
                                            • Most Votes
                                            Reply
                                            • Reply as topic
                                            Log in to reply
                                            Community
                                            Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen
                                            The ioBroker Community 2014-2023
                                            logo