Skip to content
  • Home
  • Recent
  • Tags
  • 0 Unread 0
  • Categories
  • Unreplied
  • Popular
  • GitHub
  • Docu
  • Hilfe
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Default (No Skin)
  • No Skin
Collapse
ioBroker Logo

Community Forum

donate donate
  1. ioBroker Community Home
  2. Deutsch
  3. ioBroker Allgemein
  4. Frage : Migrate MySQL nach Influxdb

NEWS

  • Jahresrückblick 2025 – unser neuer Blogbeitrag ist online! ✨
    BluefoxB
    Bluefox
    17
    1
    3.7k

  • Neuer Blogbeitrag: Monatsrückblick - Dezember 2025 🎄
    BluefoxB
    Bluefox
    13
    1
    1.2k

  • Weihnachtsangebot 2025! 🎄
    BluefoxB
    Bluefox
    25
    1
    2.5k

Frage : Migrate MySQL nach Influxdb

Scheduled Pinned Locked Moved ioBroker Allgemein
151 Posts 31 Posters 28.0k Views 25 Watching
  • Oldest to Newest
  • Newest to Oldest
  • Most Votes
Reply
  • Reply as topic
Log in to reply
This topic has been deleted. Only users with topic management privileges can see it.
  • B base

    @JackGruber PS C:\Users\Base> Test-NetConnection 192.168.1.100 -p 3306 ComputerName : 192.168.1.100
    RemoteAddress : 192.168.1.100
    RemotePort : 3306
    InterfaceAlias : WiFi
    SourceAddress : 192.168.1.72
    TcpTestSucceeded : True

    PS C:\Users\Base>

    JackGruberJ Offline
    JackGruberJ Offline
    JackGruber
    wrote on last edited by
    #55

    @base oh stimt, MySQL standard port ist 3306 :)

    Hm also der port ist erreichbar, aber das script kann sich ned verbinden ...
    Hast du Verschlüsselung für MySQL aktiviert?

    änder mal folgende Zeilen

    try:
        MYSQL_CONNECTION = pymysql.connect(host = db['MySQL']['host'],
                                        port = db['MySQL']['port'],
                                        user = db['MySQL']['user'],
                                        password = db['MySQL']['password'],
                                        db = db['MySQL']['database'])
    except pymysql.OperationalError as error:
        print (error)
        sys.exit(1)
    except Exception as ex:
        print("MySQL connection error")
        print(ex)
        sys.exit(1)
    

    in nur das ab:

    MYSQL_CONNECTION = pymysql.connect(host = db['MySQL']['host'],
                                    port = db['MySQL']['port'],
                                    user = db['MySQL']['user'],
                                    password = db['MySQL']['password'],
                                    db = db['MySQL']['database'])
    

    Achte darauf, das vor den MYSQL_CONNECTION keine lehrzeichen sind!
    Danach post mal die ganze Fehlerausgabe.

    B 1 Reply Last reply
    0
    • JackGruberJ JackGruber

      @base oh stimt, MySQL standard port ist 3306 :)

      Hm also der port ist erreichbar, aber das script kann sich ned verbinden ...
      Hast du Verschlüsselung für MySQL aktiviert?

      änder mal folgende Zeilen

      try:
          MYSQL_CONNECTION = pymysql.connect(host = db['MySQL']['host'],
                                          port = db['MySQL']['port'],
                                          user = db['MySQL']['user'],
                                          password = db['MySQL']['password'],
                                          db = db['MySQL']['database'])
      except pymysql.OperationalError as error:
          print (error)
          sys.exit(1)
      except Exception as ex:
          print("MySQL connection error")
          print(ex)
          sys.exit(1)
      

      in nur das ab:

      MYSQL_CONNECTION = pymysql.connect(host = db['MySQL']['host'],
                                      port = db['MySQL']['port'],
                                      user = db['MySQL']['user'],
                                      password = db['MySQL']['password'],
                                      db = db['MySQL']['database'])
      

      Achte darauf, das vor den MYSQL_CONNECTION keine lehrzeichen sind!
      Danach post mal die ganze Fehlerausgabe.

      B Offline
      B Offline
      base
      wrote on last edited by
      #56

      @JackGruber

      RESTART: C:\Users\Base\Downloads\iobroker_mysql_2_influxdb-master\iobroker_mysql_2_influxdb-master\migrate.py
      Traceback (most recent call last):
      File "C:\Users\Base\Downloads\iobroker_mysql_2_influxdb-master\iobroker_mysql_2_influxdb-master\migrate.py", line 33, in <module>
      MYSQL_CONNECTION = pymysql.connect(host = db['192.168.1.100']['host'],
      KeyError: '192.168.1.100'

      JackGruberJ 1 Reply Last reply
      0
      • B base

        @JackGruber

        RESTART: C:\Users\Base\Downloads\iobroker_mysql_2_influxdb-master\iobroker_mysql_2_influxdb-master\migrate.py
        Traceback (most recent call last):
        File "C:\Users\Base\Downloads\iobroker_mysql_2_influxdb-master\iobroker_mysql_2_influxdb-master\migrate.py", line 33, in <module>
        MYSQL_CONNECTION = pymysql.connect(host = db['192.168.1.100']['host'],
        KeyError: '192.168.1.100'

        JackGruberJ Offline
        JackGruberJ Offline
        JackGruber
        wrote on last edited by
        #57

        @base ok, pass bitte die database.json an, nicht das script, so wie in der database.json.example als beispiel!

        B 1 Reply Last reply
        0
        • JackGruberJ JackGruber

          @base ok, pass bitte die database.json an, nicht das script, so wie in der database.json.example als beispiel!

          B Offline
          B Offline
          base
          wrote on last edited by
          #58

          @JackGruber

          ok, jetzt hats geklappt. War ne schwere Geburt. Vielen Dank für das Script, deinen Support und deine Geduld:grin:

          JackGruberJ 1 Reply Last reply
          0
          • B base

            @JackGruber

            ok, jetzt hats geklappt. War ne schwere Geburt. Vielen Dank für das Script, deinen Support und deine Geduld:grin:

            JackGruberJ Offline
            JackGruberJ Offline
            JackGruber
            wrote on last edited by
            #59

            @base na dann ist ja gut wenns geklappt hat :)

            1 Reply Last reply
            0
            • E Offline
              E Offline
              Edelweiss
              wrote on last edited by
              #60

              @gender ,
              ich habe nochmal eine Frage zu deiner Beschreibung.
              Wie und wo setzt man den ack Wert auf "Boolean True" ?

              Wäre dankbar dafür , habe bis dato das Textfile erstellt
              Gruß

              JackGruberJ G 2 Replies Last reply
              0
              • E Edelweiss

                @gender ,
                ich habe nochmal eine Frage zu deiner Beschreibung.
                Wie und wo setzt man den ack Wert auf "Boolean True" ?

                Wäre dankbar dafür , habe bis dato das Textfile erstellt
                Gruß

                JackGruberJ Offline
                JackGruberJ Offline
                JackGruber
                wrote on last edited by
                #61

                @edelweiss der Qert steht standardmäßig auf true, kann aber in der database.json mittels store_ack_boolean geändert werden.

                S 1 Reply Last reply
                0
                • E Edelweiss

                  @gender ,
                  ich habe nochmal eine Frage zu deiner Beschreibung.
                  Wie und wo setzt man den ack Wert auf "Boolean True" ?

                  Wäre dankbar dafür , habe bis dato das Textfile erstellt
                  Gruß

                  G Offline
                  G Offline
                  gender
                  wrote on last edited by
                  #62

                  @edelweiss

                  Der Wert ist oben in meiner Anleitung im Python-Skript bereits auf true gesetzt. Du selbst musst den also nicht "irgendwo" setzen; dass passiert bereits in dem Python-Skript.

                  1 Reply Last reply
                  0
                  • E Offline
                    E Offline
                    Edelweiss
                    wrote on last edited by Edelweiss
                    #63

                    @gender
                    @JackGruber

                    danke für eure Antworten.

                    Bin hier noch komplett neu (Docker und influxDBs)

                    Habe jetzt den Import in meinen Docker geladen und mit dem Befehl

                    influx -import -path=import.txt
                    

                    gestartet.

                    Er bring mir aber dann die Meldung

                    2021/02/05 21:43:19 error: error parsing query: found StromzaehlerGesamt, expect
                    ed SELECT, DELETE, SHOW, CREATE, DROP, EXPLAIN, GRANT, REVOKE, ALTER, SET, KILL 
                    at line 1, char 1
                    

                    Die Datenbank hat er allerdings angelegt, aber es sind keien Measurements darin

                    In meinem import.txt sieht es folgendermaßen aus

                    
                    #DDL 
                    CREATE DATABASE Dummschul
                    
                    #DML
                    #CONTEXT-DATABASE: Dummschul
                    
                    StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.902 1612560689242000000
                    StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.2 1612560689242000000
                    StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.249 1612560629226000000
                    StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.893 1612560629225000000
                    

                    Könnte ihr mir Bitte noch einen Anstoß geben :innocent:

                    Danke

                    G 1 Reply Last reply
                    0
                    • E Edelweiss

                      @gender
                      @JackGruber

                      danke für eure Antworten.

                      Bin hier noch komplett neu (Docker und influxDBs)

                      Habe jetzt den Import in meinen Docker geladen und mit dem Befehl

                      influx -import -path=import.txt
                      

                      gestartet.

                      Er bring mir aber dann die Meldung

                      2021/02/05 21:43:19 error: error parsing query: found StromzaehlerGesamt, expect
                      ed SELECT, DELETE, SHOW, CREATE, DROP, EXPLAIN, GRANT, REVOKE, ALTER, SET, KILL 
                      at line 1, char 1
                      

                      Die Datenbank hat er allerdings angelegt, aber es sind keien Measurements darin

                      In meinem import.txt sieht es folgendermaßen aus

                      
                      #DDL 
                      CREATE DATABASE Dummschul
                      
                      #DML
                      #CONTEXT-DATABASE: Dummschul
                      
                      StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.902 1612560689242000000
                      StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.2 1612560689242000000
                      StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.249 1612560629226000000
                      StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.893 1612560629225000000
                      

                      Könnte ihr mir Bitte noch einen Anstoß geben :innocent:

                      Danke

                      G Offline
                      G Offline
                      gender
                      wrote on last edited by
                      #64

                      @edelweiss
                      Hmm, ich glaube du bist dann beim Importieren nicht an der richtigen Stelle. Du musst (soweit ich mich erinnere) nur in die Komandokonsole von Influx und dort den import-Befehl ausführen und nicht direkt in der Konsole schon in die Datenbank reingehen...

                      1 Reply Last reply
                      0
                      • E Offline
                        E Offline
                        Edelweiss
                        wrote on last edited by Edelweiss
                        #65

                        Hallo zusammen,
                        ich wollte nur ein kurzes Feedback geben woran es gelegen hat.

                        Scheinbar stimmt etwas nicht mit der Txt Datei (sie hat aber die c7e8c4c9-bcc3-4c45-96e5-0aa817ecde85-grafik.png Kennung ) , welche aus dem py Script generiert wird.

                        Ich habe nämlich den Inhalt daraus 1:1 in die influx NOAA_ data.txt kopiert und danach funktionierte es, beim importieren

                        Desweiteren funktionierte es bei mir auch nur, wenn der haeder mit jeweils einer Zeile Versatz eingetragen wird.

                        #DDL 
                        
                        CREATE DATABASE Dummschul
                        
                        #DML
                        
                        #CONTEXT-DATABASE: Dummschul
                        

                        Danke für die Hilfe
                        Gruß

                        1 Reply Last reply
                        1
                        • JackGruberJ JackGruber

                          @edelweiss der Qert steht standardmäßig auf true, kann aber in der database.json mittels store_ack_boolean geändert werden.

                          S Offline
                          S Offline
                          Sputnik24
                          wrote on last edited by
                          #66

                          @jackgruber

                          Vielen Dank für das tolle Script. Das Script läuft bei mir erfolgreich durch, Grafana zeigt mir auch alle Datenpunkte an, sagt aber "No data". Die Daten werden vom sql Adapter in eine MariaDB auf der Synology gespeichert.

                          Muss ich im Script etwas anpassen?

                          Danke

                          JackGruberJ 1 Reply Last reply
                          0
                          • S Sputnik24

                            @jackgruber

                            Vielen Dank für das tolle Script. Das Script läuft bei mir erfolgreich durch, Grafana zeigt mir auch alle Datenpunkte an, sagt aber "No data". Die Daten werden vom sql Adapter in eine MariaDB auf der Synology gespeichert.

                            Muss ich im Script etwas anpassen?

                            Danke

                            JackGruberJ Offline
                            JackGruberJ Offline
                            JackGruber
                            wrote on last edited by
                            #67

                            @sputnik24
                            Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

                            Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
                            use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

                            S M 2 Replies Last reply
                            0
                            • JackGruberJ JackGruber

                              @sputnik24
                              Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

                              Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
                              use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

                              S Offline
                              S Offline
                              Sputnik24
                              wrote on last edited by Sputnik24
                              #68

                              @jackgruber Ich lass iobroker mittlerweile Daten in influxdb speichern. Diese werden mir in Grafana auch angezeigt. Ich vermute ein Problem mit dem timestamp Format.

                              Ich hab die database nochmal gelöscht und neu angelegt, jetzt funktioniert es.

                              1 Reply Last reply
                              0
                              • JackGruberJ JackGruber

                                @sputnik24
                                Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

                                Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
                                use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

                                M Offline
                                M Offline
                                marco-mh
                                wrote on last edited by
                                #69

                                @jackgruber Hallo, ich wollte mich auch mal versuchen an deinem Script. Meine MYSQL DB umfasst mittlerweile 1,8 Mio Einträge. Ich bin allerdings ne absolute NULL in sachen Scripte und bekomme schon graue Haare.
                                Jetzt hab ich das Script mit meinen Daten, so das ich denke das es richtig ist, geändert. Nun bekomme ich folgende meldung

                                
                                C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                                  File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 156
                                    print(f"Processing row {processed_rows + 1:,} to {processed_rows + len(selected_rows):,} from LIMIT {start_row:,} / {start_row + query_max_rows:,} " +
                                                                                                                                                                                       ^
                                SyntaxError: invalid syntax
                                
                                C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>
                                
                                

                                wo kann hier der Fehler sein?

                                Meine geänderten Daten sehen so aus

                                
                                {\rtf1\ansi\deff0\nouicompat{\fonttbl{\f0\fnil\fcharset0 Courier New;}}
                                {\*\generator Riched20 10.0.14393}\viewkind4\uc1 
                                \pard\f0\fs22\lang1033\par
                                    MYSQL_CONNECTION = pymysql.connect(host=db['MySQL']['192.168.178.8'],\par
                                                                       port=db['MySQL']['3306'],\par
                                                                       user=db['MySQL']['root'],\par
                                                                       password=db['MySQL']['XXXXXX'],\par
                                                                       db=db['MySQL']['database'])\par
                                except pymysql.OperationalError as error:\par
                                    print(error)\par
                                    sys.exit(1)\par
                                except Exception as ex:\par
                                    print("MySQL connection error")\par
                                    print(ex)\par
                                    sys.exit(1)\par
                                \par
                                \par
                                INFLUXDB_CONNECTION = InfluxDBClient(host=db['InfluxDB']['192.168.178.102'],\par
                                                                     ssl=db['InfluxDB']['ssl'],\par
                                                                     verify_ssl=True,\par
                                                                     port=db['InfluxDB']['22'],\par
                                                                     username=db['InfluxDB']['iobroker'],\par
                                                                     password=db['InfluxDB']['XXXXXX'],\par
                                                                     database=db['InfluxDB']['iobroker_import'])\par
                                }
                                
                                

                                Danke für die hilfe. Gruß Marco

                                node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                JackGruberJ 1 Reply Last reply
                                0
                                • M marco-mh

                                  @jackgruber Hallo, ich wollte mich auch mal versuchen an deinem Script. Meine MYSQL DB umfasst mittlerweile 1,8 Mio Einträge. Ich bin allerdings ne absolute NULL in sachen Scripte und bekomme schon graue Haare.
                                  Jetzt hab ich das Script mit meinen Daten, so das ich denke das es richtig ist, geändert. Nun bekomme ich folgende meldung

                                  
                                  C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                                    File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 156
                                      print(f"Processing row {processed_rows + 1:,} to {processed_rows + len(selected_rows):,} from LIMIT {start_row:,} / {start_row + query_max_rows:,} " +
                                                                                                                                                                                         ^
                                  SyntaxError: invalid syntax
                                  
                                  C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>
                                  
                                  

                                  wo kann hier der Fehler sein?

                                  Meine geänderten Daten sehen so aus

                                  
                                  {\rtf1\ansi\deff0\nouicompat{\fonttbl{\f0\fnil\fcharset0 Courier New;}}
                                  {\*\generator Riched20 10.0.14393}\viewkind4\uc1 
                                  \pard\f0\fs22\lang1033\par
                                      MYSQL_CONNECTION = pymysql.connect(host=db['MySQL']['192.168.178.8'],\par
                                                                         port=db['MySQL']['3306'],\par
                                                                         user=db['MySQL']['root'],\par
                                                                         password=db['MySQL']['XXXXXX'],\par
                                                                         db=db['MySQL']['database'])\par
                                  except pymysql.OperationalError as error:\par
                                      print(error)\par
                                      sys.exit(1)\par
                                  except Exception as ex:\par
                                      print("MySQL connection error")\par
                                      print(ex)\par
                                      sys.exit(1)\par
                                  \par
                                  \par
                                  INFLUXDB_CONNECTION = InfluxDBClient(host=db['InfluxDB']['192.168.178.102'],\par
                                                                       ssl=db['InfluxDB']['ssl'],\par
                                                                       verify_ssl=True,\par
                                                                       port=db['InfluxDB']['22'],\par
                                                                       username=db['InfluxDB']['iobroker'],\par
                                                                       password=db['InfluxDB']['XXXXXX'],\par
                                                                       database=db['InfluxDB']['iobroker_import'])\par
                                  }
                                  
                                  

                                  Danke für die hilfe. Gruß Marco

                                  JackGruberJ Offline
                                  JackGruberJ Offline
                                  JackGruber
                                  wrote on last edited by
                                  #70

                                  @marco-mh bitte nur die database.json.example in database.json umbenennen und die daten dort eintragen.

                                  M 1 Reply Last reply
                                  0
                                  • JackGruberJ JackGruber

                                    @marco-mh bitte nur die database.json.example in database.json umbenennen und die daten dort eintragen.

                                    M Offline
                                    M Offline
                                    marco-mh
                                    wrote on last edited by
                                    #71

                                    @jackgruber Danke für die schnelle Antwort. Aber der Fehler bleibt leider.
                                    ichnhab die Daten jetzt in der Json geändert.

                                    node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                    JackGruberJ 1 Reply Last reply
                                    0
                                    • M marco-mh

                                      @jackgruber Danke für die schnelle Antwort. Aber der Fehler bleibt leider.
                                      ichnhab die Daten jetzt in der Json geändert.

                                      JackGruberJ Offline
                                      JackGruberJ Offline
                                      JackGruber
                                      wrote on last edited by
                                      #72

                                      @marco-mh Welche python version ist im einsatz?

                                      M 1 Reply Last reply
                                      0
                                      • JackGruberJ JackGruber

                                        @marco-mh Welche python version ist im einsatz?

                                        M Offline
                                        M Offline
                                        marco-mh
                                        wrote on last edited by
                                        #73

                                        @jackgruber 3.9.5

                                        node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                        JackGruberJ 1 Reply Last reply
                                        0
                                        • M marco-mh

                                          @jackgruber 3.9.5

                                          JackGruberJ Offline
                                          JackGruberJ Offline
                                          JackGruber
                                          wrote on last edited by
                                          #74

                                          @marco-mh OK, das ist ok. Aber die Fehlermeldung deutet auf ein altes python ...

                                          Die Zeile ist nur für den Status, kann daher auch auskommentiert/gelöscht werden.

                                          M 1 Reply Last reply
                                          0
                                          Reply
                                          • Reply as topic
                                          Log in to reply
                                          • Oldest to Newest
                                          • Newest to Oldest
                                          • Most Votes


                                          Support us

                                          ioBroker
                                          Community Adapters
                                          Donate
                                          FAQ Cloud / IOT
                                          HowTo: Node.js-Update
                                          HowTo: Backup/Restore
                                          Downloads
                                          BLOG

                                          338

                                          Online

                                          32.7k

                                          Users

                                          82.4k

                                          Topics

                                          1.3m

                                          Posts
                                          Community
                                          Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen | Einwilligungseinstellungen
                                          ioBroker Community 2014-2025
                                          logo
                                          • Login

                                          • Don't have an account? Register

                                          • Login or register to search.
                                          • First post
                                            Last post
                                          0
                                          • Home
                                          • Recent
                                          • Tags
                                          • Unread 0
                                          • Categories
                                          • Unreplied
                                          • Popular
                                          • GitHub
                                          • Docu
                                          • Hilfe