Skip to content
  • Home
  • Recent
  • Tags
  • 0 Unread 0
  • Categories
  • Unreplied
  • Popular
  • GitHub
  • Docu
  • Hilfe
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Default (No Skin)
  • No Skin
Collapse
ioBroker Logo

Community Forum

donate donate
  1. ioBroker Community Home
  2. Deutsch
  3. ioBroker Allgemein
  4. Frage : Migrate MySQL nach Influxdb

NEWS

  • Jahresrückblick 2025 – unser neuer Blogbeitrag ist online! ✨
    BluefoxB
    Bluefox
    17
    1
    2.0k

  • Neuer Blogbeitrag: Monatsrückblick - Dezember 2025 🎄
    BluefoxB
    Bluefox
    13
    1
    927

  • Weihnachtsangebot 2025! 🎄
    BluefoxB
    Bluefox
    25
    1
    2.2k

Frage : Migrate MySQL nach Influxdb

Scheduled Pinned Locked Moved ioBroker Allgemein
151 Posts 31 Posters 27.8k Views 25 Watching
  • Oldest to Newest
  • Newest to Oldest
  • Most Votes
Reply
  • Reply as topic
Log in to reply
This topic has been deleted. Only users with topic management privileges can see it.
  • E Edelweiss

    @gender ,
    ich habe nochmal eine Frage zu deiner Beschreibung.
    Wie und wo setzt man den ack Wert auf "Boolean True" ?

    Wäre dankbar dafür , habe bis dato das Textfile erstellt
    Gruß

    JackGruberJ Offline
    JackGruberJ Offline
    JackGruber
    wrote on last edited by
    #61

    @edelweiss der Qert steht standardmäßig auf true, kann aber in der database.json mittels store_ack_boolean geändert werden.

    S 1 Reply Last reply
    0
    • E Edelweiss

      @gender ,
      ich habe nochmal eine Frage zu deiner Beschreibung.
      Wie und wo setzt man den ack Wert auf "Boolean True" ?

      Wäre dankbar dafür , habe bis dato das Textfile erstellt
      Gruß

      G Offline
      G Offline
      gender
      wrote on last edited by
      #62

      @edelweiss

      Der Wert ist oben in meiner Anleitung im Python-Skript bereits auf true gesetzt. Du selbst musst den also nicht "irgendwo" setzen; dass passiert bereits in dem Python-Skript.

      1 Reply Last reply
      0
      • E Offline
        E Offline
        Edelweiss
        wrote on last edited by Edelweiss
        #63

        @gender
        @JackGruber

        danke für eure Antworten.

        Bin hier noch komplett neu (Docker und influxDBs)

        Habe jetzt den Import in meinen Docker geladen und mit dem Befehl

        influx -import -path=import.txt
        

        gestartet.

        Er bring mir aber dann die Meldung

        2021/02/05 21:43:19 error: error parsing query: found StromzaehlerGesamt, expect
        ed SELECT, DELETE, SHOW, CREATE, DROP, EXPLAIN, GRANT, REVOKE, ALTER, SET, KILL 
        at line 1, char 1
        

        Die Datenbank hat er allerdings angelegt, aber es sind keien Measurements darin

        In meinem import.txt sieht es folgendermaßen aus

        
        #DDL 
        CREATE DATABASE Dummschul
        
        #DML
        #CONTEXT-DATABASE: Dummschul
        
        StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.902 1612560689242000000
        StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.2 1612560689242000000
        StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.249 1612560629226000000
        StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.893 1612560629225000000
        

        Könnte ihr mir Bitte noch einen Anstoß geben :innocent:

        Danke

        G 1 Reply Last reply
        0
        • E Edelweiss

          @gender
          @JackGruber

          danke für eure Antworten.

          Bin hier noch komplett neu (Docker und influxDBs)

          Habe jetzt den Import in meinen Docker geladen und mit dem Befehl

          influx -import -path=import.txt
          

          gestartet.

          Er bring mir aber dann die Meldung

          2021/02/05 21:43:19 error: error parsing query: found StromzaehlerGesamt, expect
          ed SELECT, DELETE, SHOW, CREATE, DROP, EXPLAIN, GRANT, REVOKE, ALTER, SET, KILL 
          at line 1, char 1
          

          Die Datenbank hat er allerdings angelegt, aber es sind keien Measurements darin

          In meinem import.txt sieht es folgendermaßen aus

          
          #DDL 
          CREATE DATABASE Dummschul
          
          #DML
          #CONTEXT-DATABASE: Dummschul
          
          StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.902 1612560689242000000
          StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.2 1612560689242000000
          StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.249 1612560629226000000
          StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.893 1612560629225000000
          

          Könnte ihr mir Bitte noch einen Anstoß geben :innocent:

          Danke

          G Offline
          G Offline
          gender
          wrote on last edited by
          #64

          @edelweiss
          Hmm, ich glaube du bist dann beim Importieren nicht an der richtigen Stelle. Du musst (soweit ich mich erinnere) nur in die Komandokonsole von Influx und dort den import-Befehl ausführen und nicht direkt in der Konsole schon in die Datenbank reingehen...

          1 Reply Last reply
          0
          • E Offline
            E Offline
            Edelweiss
            wrote on last edited by Edelweiss
            #65

            Hallo zusammen,
            ich wollte nur ein kurzes Feedback geben woran es gelegen hat.

            Scheinbar stimmt etwas nicht mit der Txt Datei (sie hat aber die c7e8c4c9-bcc3-4c45-96e5-0aa817ecde85-grafik.png Kennung ) , welche aus dem py Script generiert wird.

            Ich habe nämlich den Inhalt daraus 1:1 in die influx NOAA_ data.txt kopiert und danach funktionierte es, beim importieren

            Desweiteren funktionierte es bei mir auch nur, wenn der haeder mit jeweils einer Zeile Versatz eingetragen wird.

            #DDL 
            
            CREATE DATABASE Dummschul
            
            #DML
            
            #CONTEXT-DATABASE: Dummschul
            

            Danke für die Hilfe
            Gruß

            1 Reply Last reply
            1
            • JackGruberJ JackGruber

              @edelweiss der Qert steht standardmäßig auf true, kann aber in der database.json mittels store_ack_boolean geändert werden.

              S Offline
              S Offline
              Sputnik24
              wrote on last edited by
              #66

              @jackgruber

              Vielen Dank für das tolle Script. Das Script läuft bei mir erfolgreich durch, Grafana zeigt mir auch alle Datenpunkte an, sagt aber "No data". Die Daten werden vom sql Adapter in eine MariaDB auf der Synology gespeichert.

              Muss ich im Script etwas anpassen?

              Danke

              JackGruberJ 1 Reply Last reply
              0
              • S Sputnik24

                @jackgruber

                Vielen Dank für das tolle Script. Das Script läuft bei mir erfolgreich durch, Grafana zeigt mir auch alle Datenpunkte an, sagt aber "No data". Die Daten werden vom sql Adapter in eine MariaDB auf der Synology gespeichert.

                Muss ich im Script etwas anpassen?

                Danke

                JackGruberJ Offline
                JackGruberJ Offline
                JackGruber
                wrote on last edited by
                #67

                @sputnik24
                Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

                Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
                use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

                S M 2 Replies Last reply
                0
                • JackGruberJ JackGruber

                  @sputnik24
                  Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

                  Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
                  use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

                  S Offline
                  S Offline
                  Sputnik24
                  wrote on last edited by Sputnik24
                  #68

                  @jackgruber Ich lass iobroker mittlerweile Daten in influxdb speichern. Diese werden mir in Grafana auch angezeigt. Ich vermute ein Problem mit dem timestamp Format.

                  Ich hab die database nochmal gelöscht und neu angelegt, jetzt funktioniert es.

                  1 Reply Last reply
                  0
                  • JackGruberJ JackGruber

                    @sputnik24
                    Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

                    Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
                    use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

                    M Offline
                    M Offline
                    marco-mh
                    wrote on last edited by
                    #69

                    @jackgruber Hallo, ich wollte mich auch mal versuchen an deinem Script. Meine MYSQL DB umfasst mittlerweile 1,8 Mio Einträge. Ich bin allerdings ne absolute NULL in sachen Scripte und bekomme schon graue Haare.
                    Jetzt hab ich das Script mit meinen Daten, so das ich denke das es richtig ist, geändert. Nun bekomme ich folgende meldung

                    
                    C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                      File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 156
                        print(f"Processing row {processed_rows + 1:,} to {processed_rows + len(selected_rows):,} from LIMIT {start_row:,} / {start_row + query_max_rows:,} " +
                                                                                                                                                                           ^
                    SyntaxError: invalid syntax
                    
                    C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>
                    
                    

                    wo kann hier der Fehler sein?

                    Meine geänderten Daten sehen so aus

                    
                    {\rtf1\ansi\deff0\nouicompat{\fonttbl{\f0\fnil\fcharset0 Courier New;}}
                    {\*\generator Riched20 10.0.14393}\viewkind4\uc1 
                    \pard\f0\fs22\lang1033\par
                        MYSQL_CONNECTION = pymysql.connect(host=db['MySQL']['192.168.178.8'],\par
                                                           port=db['MySQL']['3306'],\par
                                                           user=db['MySQL']['root'],\par
                                                           password=db['MySQL']['XXXXXX'],\par
                                                           db=db['MySQL']['database'])\par
                    except pymysql.OperationalError as error:\par
                        print(error)\par
                        sys.exit(1)\par
                    except Exception as ex:\par
                        print("MySQL connection error")\par
                        print(ex)\par
                        sys.exit(1)\par
                    \par
                    \par
                    INFLUXDB_CONNECTION = InfluxDBClient(host=db['InfluxDB']['192.168.178.102'],\par
                                                         ssl=db['InfluxDB']['ssl'],\par
                                                         verify_ssl=True,\par
                                                         port=db['InfluxDB']['22'],\par
                                                         username=db['InfluxDB']['iobroker'],\par
                                                         password=db['InfluxDB']['XXXXXX'],\par
                                                         database=db['InfluxDB']['iobroker_import'])\par
                    }
                    
                    

                    Danke für die hilfe. Gruß Marco

                    node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                    JackGruberJ 1 Reply Last reply
                    0
                    • M marco-mh

                      @jackgruber Hallo, ich wollte mich auch mal versuchen an deinem Script. Meine MYSQL DB umfasst mittlerweile 1,8 Mio Einträge. Ich bin allerdings ne absolute NULL in sachen Scripte und bekomme schon graue Haare.
                      Jetzt hab ich das Script mit meinen Daten, so das ich denke das es richtig ist, geändert. Nun bekomme ich folgende meldung

                      
                      C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                        File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 156
                          print(f"Processing row {processed_rows + 1:,} to {processed_rows + len(selected_rows):,} from LIMIT {start_row:,} / {start_row + query_max_rows:,} " +
                                                                                                                                                                             ^
                      SyntaxError: invalid syntax
                      
                      C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>
                      
                      

                      wo kann hier der Fehler sein?

                      Meine geänderten Daten sehen so aus

                      
                      {\rtf1\ansi\deff0\nouicompat{\fonttbl{\f0\fnil\fcharset0 Courier New;}}
                      {\*\generator Riched20 10.0.14393}\viewkind4\uc1 
                      \pard\f0\fs22\lang1033\par
                          MYSQL_CONNECTION = pymysql.connect(host=db['MySQL']['192.168.178.8'],\par
                                                             port=db['MySQL']['3306'],\par
                                                             user=db['MySQL']['root'],\par
                                                             password=db['MySQL']['XXXXXX'],\par
                                                             db=db['MySQL']['database'])\par
                      except pymysql.OperationalError as error:\par
                          print(error)\par
                          sys.exit(1)\par
                      except Exception as ex:\par
                          print("MySQL connection error")\par
                          print(ex)\par
                          sys.exit(1)\par
                      \par
                      \par
                      INFLUXDB_CONNECTION = InfluxDBClient(host=db['InfluxDB']['192.168.178.102'],\par
                                                           ssl=db['InfluxDB']['ssl'],\par
                                                           verify_ssl=True,\par
                                                           port=db['InfluxDB']['22'],\par
                                                           username=db['InfluxDB']['iobroker'],\par
                                                           password=db['InfluxDB']['XXXXXX'],\par
                                                           database=db['InfluxDB']['iobroker_import'])\par
                      }
                      
                      

                      Danke für die hilfe. Gruß Marco

                      JackGruberJ Offline
                      JackGruberJ Offline
                      JackGruber
                      wrote on last edited by
                      #70

                      @marco-mh bitte nur die database.json.example in database.json umbenennen und die daten dort eintragen.

                      M 1 Reply Last reply
                      0
                      • JackGruberJ JackGruber

                        @marco-mh bitte nur die database.json.example in database.json umbenennen und die daten dort eintragen.

                        M Offline
                        M Offline
                        marco-mh
                        wrote on last edited by
                        #71

                        @jackgruber Danke für die schnelle Antwort. Aber der Fehler bleibt leider.
                        ichnhab die Daten jetzt in der Json geändert.

                        node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                        JackGruberJ 1 Reply Last reply
                        0
                        • M marco-mh

                          @jackgruber Danke für die schnelle Antwort. Aber der Fehler bleibt leider.
                          ichnhab die Daten jetzt in der Json geändert.

                          JackGruberJ Offline
                          JackGruberJ Offline
                          JackGruber
                          wrote on last edited by
                          #72

                          @marco-mh Welche python version ist im einsatz?

                          M 1 Reply Last reply
                          0
                          • JackGruberJ JackGruber

                            @marco-mh Welche python version ist im einsatz?

                            M Offline
                            M Offline
                            marco-mh
                            wrote on last edited by
                            #73

                            @jackgruber 3.9.5

                            node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                            JackGruberJ 1 Reply Last reply
                            0
                            • M marco-mh

                              @jackgruber 3.9.5

                              JackGruberJ Offline
                              JackGruberJ Offline
                              JackGruber
                              wrote on last edited by
                              #74

                              @marco-mh OK, das ist ok. Aber die Fehlermeldung deutet auf ein altes python ...

                              Die Zeile ist nur für den Status, kann daher auch auskommentiert/gelöscht werden.

                              M 1 Reply Last reply
                              0
                              • JackGruberJ JackGruber

                                @marco-mh OK, das ist ok. Aber die Fehlermeldung deutet auf ein altes python ...

                                Die Zeile ist nur für den Status, kann daher auch auskommentiert/gelöscht werden.

                                M Offline
                                M Offline
                                marco-mh
                                wrote on last edited by
                                #75

                                @jackgruber ok, die 157 und 181 musste ich auch # setzen
                                jetzt kommt folgendes

                                
                                C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                                Traceback (most recent call last):
                                  File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 5, in <module>
                                    from influxdb import InfluxDBClient
                                ImportError: No module named influxdb
                                
                                

                                node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                JackGruberJ 1 Reply Last reply
                                0
                                • M marco-mh

                                  @jackgruber ok, die 157 und 181 musste ich auch # setzen
                                  jetzt kommt folgendes

                                  
                                  C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                                  Traceback (most recent call last):
                                    File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 5, in <module>
                                      from influxdb import InfluxDBClient
                                  ImportError: No module named influxdb
                                  
                                  
                                  JackGruberJ Offline
                                  JackGruberJ Offline
                                  JackGruber
                                  wrote on last edited by
                                  #76

                                  wie in der anleitung beschrieben pip install -r requirements.txt ausgeführt?

                                  M 3 Replies Last reply
                                  0
                                  • JackGruberJ JackGruber

                                    wie in der anleitung beschrieben pip install -r requirements.txt ausgeführt?

                                    M Offline
                                    M Offline
                                    marco-mh
                                    wrote on last edited by
                                    #77

                                    @jackgruber ja hab ich im extrahierten ordner gemacht

                                    node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                    1 Reply Last reply
                                    0
                                    • JackGruberJ JackGruber

                                      wie in der anleitung beschrieben pip install -r requirements.txt ausgeführt?

                                      M Offline
                                      M Offline
                                      marco-mh
                                      wrote on last edited by
                                      #78

                                      @jackgruber ach quatsch, hab den ja gelöscht und neu extrahiert

                                      node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                      1 Reply Last reply
                                      0
                                      • JackGruberJ JackGruber

                                        wie in der anleitung beschrieben pip install -r requirements.txt ausgeführt?

                                        M Offline
                                        M Offline
                                        marco-mh
                                        wrote on last edited by
                                        #79

                                        @jackgruber bei der installation kam folgendes, ist das ok?

                                        
                                        WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                        WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                        WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                        WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                        WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                        WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                        WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                        WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                        WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                        
                                        

                                        aber nach der installation kommt immer noch der selbe fehler

                                        node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                        JackGruberJ 1 Reply Last reply
                                        0
                                        • M marco-mh

                                          @jackgruber bei der installation kam folgendes, ist das ok?

                                          
                                          WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                          WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                          WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                          WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                          WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                          WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                          WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                          WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                          WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                          
                                          

                                          aber nach der installation kommt immer noch der selbe fehler

                                          JackGruberJ Offline
                                          JackGruberJ Offline
                                          JackGruber
                                          wrote on last edited by JackGruber
                                          #80

                                          @marco-mh Morgen, also ich bin mir fast sicher, dass ne alte python version < 3.6 beim aufruf genutzt wird.
                                          Ich hab das Script angepasst um dies zu überüfen. Bitte nochmals herunterladen und testen.

                                          Zum pip fehler. Da stimmt was nicht mit den installierten packeten.
                                          Was passiert bei einem pip freeze und dann pip list.

                                          M 2 Replies Last reply
                                          0
                                          Reply
                                          • Reply as topic
                                          Log in to reply
                                          • Oldest to Newest
                                          • Newest to Oldest
                                          • Most Votes


                                          Support us

                                          ioBroker
                                          Community Adapters
                                          Donate
                                          FAQ Cloud / IOT
                                          HowTo: Node.js-Update
                                          HowTo: Backup/Restore
                                          Downloads
                                          BLOG

                                          354

                                          Online

                                          32.6k

                                          Users

                                          82.2k

                                          Topics

                                          1.3m

                                          Posts
                                          Community
                                          Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen | Einwilligungseinstellungen
                                          ioBroker Community 2014-2025
                                          logo
                                          • Login

                                          • Don't have an account? Register

                                          • Login or register to search.
                                          • First post
                                            Last post
                                          0
                                          • Home
                                          • Recent
                                          • Tags
                                          • Unread 0
                                          • Categories
                                          • Unreplied
                                          • Popular
                                          • GitHub
                                          • Docu
                                          • Hilfe