Skip to content
  • Aktuell
  • Tags
  • 0 Ungelesen 0
  • Kategorien
  • Unreplied
  • Beliebt
  • GitHub
  • Docu
  • Hilfe
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Standard: (Kein Skin)
  • Kein Skin
Einklappen
ioBroker Logo
  1. ioBroker Community Home
  2. Deutsch
  3. ioBroker Allgemein
  4. Frage : Migrate MySQL nach Influxdb

NEWS

  • UPDATE 31.10.: Amazon Alexa - ioBroker Skill läuft aus ?
    apollon77A
    apollon77
    48
    3
    8.2k

  • Monatsrückblick – September 2025
    BluefoxB
    Bluefox
    13
    1
    1.9k

  • Neues Video "KI im Smart Home" - ioBroker plus n8n
    BluefoxB
    Bluefox
    15
    1
    2.2k

Frage : Migrate MySQL nach Influxdb

Geplant Angeheftet Gesperrt Verschoben ioBroker Allgemein
151 Beiträge 31 Kommentatoren 25.7k Aufrufe 25 Watching
  • Älteste zuerst
  • Neuste zuerst
  • Meiste Stimmen
Antworten
  • In einem neuen Thema antworten
Anmelden zum Antworten
Dieses Thema wurde gelöscht. Nur Nutzer mit entsprechenden Rechten können es sehen.
  • E Offline
    E Offline
    Edelweiss
    schrieb am zuletzt editiert von Edelweiss
    #63

    @gender
    @JackGruber

    danke für eure Antworten.

    Bin hier noch komplett neu (Docker und influxDBs)

    Habe jetzt den Import in meinen Docker geladen und mit dem Befehl

    influx -import -path=import.txt
    

    gestartet.

    Er bring mir aber dann die Meldung

    2021/02/05 21:43:19 error: error parsing query: found StromzaehlerGesamt, expect
    ed SELECT, DELETE, SHOW, CREATE, DROP, EXPLAIN, GRANT, REVOKE, ALTER, SET, KILL 
    at line 1, char 1
    

    Die Datenbank hat er allerdings angelegt, aber es sind keien Measurements darin

    In meinem import.txt sieht es folgendermaßen aus

    
    #DDL 
    CREATE DATABASE Dummschul
    
    #DML
    #CONTEXT-DATABASE: Dummschul
    
    StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.902 1612560689242000000
    StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.2 1612560689242000000
    StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.249 1612560629226000000
    StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.893 1612560629225000000
    

    Könnte ihr mir Bitte noch einen Anstoß geben 😇

    Danke

    G 1 Antwort Letzte Antwort
    0
    • E Edelweiss

      @gender
      @JackGruber

      danke für eure Antworten.

      Bin hier noch komplett neu (Docker und influxDBs)

      Habe jetzt den Import in meinen Docker geladen und mit dem Befehl

      influx -import -path=import.txt
      

      gestartet.

      Er bring mir aber dann die Meldung

      2021/02/05 21:43:19 error: error parsing query: found StromzaehlerGesamt, expect
      ed SELECT, DELETE, SHOW, CREATE, DROP, EXPLAIN, GRANT, REVOKE, ALTER, SET, KILL 
      at line 1, char 1
      

      Die Datenbank hat er allerdings angelegt, aber es sind keien Measurements darin

      In meinem import.txt sieht es folgendermaßen aus

      
      #DDL 
      CREATE DATABASE Dummschul
      
      #DML
      #CONTEXT-DATABASE: Dummschul
      
      StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.902 1612560689242000000
      StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.2 1612560689242000000
      StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.249 1612560629226000000
      StromzaehlerGesamt ack=True,from="system.adapter.wiffi-wz.0",q=0.0,value=0.893 1612560629225000000
      

      Könnte ihr mir Bitte noch einen Anstoß geben 😇

      Danke

      G Offline
      G Offline
      gender
      schrieb am zuletzt editiert von
      #64

      @edelweiss
      Hmm, ich glaube du bist dann beim Importieren nicht an der richtigen Stelle. Du musst (soweit ich mich erinnere) nur in die Komandokonsole von Influx und dort den import-Befehl ausführen und nicht direkt in der Konsole schon in die Datenbank reingehen...

      1 Antwort Letzte Antwort
      0
      • E Offline
        E Offline
        Edelweiss
        schrieb am zuletzt editiert von Edelweiss
        #65

        Hallo zusammen,
        ich wollte nur ein kurzes Feedback geben woran es gelegen hat.

        Scheinbar stimmt etwas nicht mit der Txt Datei (sie hat aber die c7e8c4c9-bcc3-4c45-96e5-0aa817ecde85-grafik.png Kennung ) , welche aus dem py Script generiert wird.

        Ich habe nämlich den Inhalt daraus 1:1 in die influx NOAA_ data.txt kopiert und danach funktionierte es, beim importieren

        Desweiteren funktionierte es bei mir auch nur, wenn der haeder mit jeweils einer Zeile Versatz eingetragen wird.

        #DDL 
        
        CREATE DATABASE Dummschul
        
        #DML
        
        #CONTEXT-DATABASE: Dummschul
        

        Danke für die Hilfe
        Gruß

        1 Antwort Letzte Antwort
        1
        • JackGruberJ JackGruber

          @edelweiss der Qert steht standardmäßig auf true, kann aber in der database.json mittels store_ack_boolean geändert werden.

          S Offline
          S Offline
          Sputnik24
          schrieb am zuletzt editiert von
          #66

          @jackgruber

          Vielen Dank für das tolle Script. Das Script läuft bei mir erfolgreich durch, Grafana zeigt mir auch alle Datenpunkte an, sagt aber "No data". Die Daten werden vom sql Adapter in eine MariaDB auf der Synology gespeichert.

          Muss ich im Script etwas anpassen?

          Danke

          JackGruberJ 1 Antwort Letzte Antwort
          0
          • S Sputnik24

            @jackgruber

            Vielen Dank für das tolle Script. Das Script läuft bei mir erfolgreich durch, Grafana zeigt mir auch alle Datenpunkte an, sagt aber "No data". Die Daten werden vom sql Adapter in eine MariaDB auf der Synology gespeichert.

            Muss ich im Script etwas anpassen?

            Danke

            JackGruberJ Offline
            JackGruberJ Offline
            JackGruber
            schrieb am zuletzt editiert von
            #67

            @sputnik24
            Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

            Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
            use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

            S M 2 Antworten Letzte Antwort
            0
            • JackGruberJ JackGruber

              @sputnik24
              Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

              Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
              use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

              S Offline
              S Offline
              Sputnik24
              schrieb am zuletzt editiert von Sputnik24
              #68

              @jackgruber Ich lass iobroker mittlerweile Daten in influxdb speichern. Diese werden mir in Grafana auch angezeigt. Ich vermute ein Problem mit dem timestamp Format.

              Ich hab die database nochmal gelöscht und neu angelegt, jetzt funktioniert es.

              1 Antwort Letzte Antwort
              0
              • JackGruberJ JackGruber

                @sputnik24
                Hört sich eher danach an, dass etwas in der auswertung nicht stimmt.

                Einfach das influx Kommandozeilenwerkzeug per influx öffnen, dann die Datenbank auswählen
                use <DATENBANK> und per SELECT * FROM <MEASUREMENT_NAME> LIMIT 5 sich ein paar Datensätze anzeigen lassen um dies zu überprüfen.

                M Offline
                M Offline
                marco-mh
                schrieb am zuletzt editiert von
                #69

                @jackgruber Hallo, ich wollte mich auch mal versuchen an deinem Script. Meine MYSQL DB umfasst mittlerweile 1,8 Mio Einträge. Ich bin allerdings ne absolute NULL in sachen Scripte und bekomme schon graue Haare.
                Jetzt hab ich das Script mit meinen Daten, so das ich denke das es richtig ist, geändert. Nun bekomme ich folgende meldung

                
                C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                  File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 156
                    print(f"Processing row {processed_rows + 1:,} to {processed_rows + len(selected_rows):,} from LIMIT {start_row:,} / {start_row + query_max_rows:,} " +
                                                                                                                                                                       ^
                SyntaxError: invalid syntax
                
                C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>
                
                

                wo kann hier der Fehler sein?

                Meine geänderten Daten sehen so aus

                
                {\rtf1\ansi\deff0\nouicompat{\fonttbl{\f0\fnil\fcharset0 Courier New;}}
                {\*\generator Riched20 10.0.14393}\viewkind4\uc1 
                \pard\f0\fs22\lang1033\par
                    MYSQL_CONNECTION = pymysql.connect(host=db['MySQL']['192.168.178.8'],\par
                                                       port=db['MySQL']['3306'],\par
                                                       user=db['MySQL']['root'],\par
                                                       password=db['MySQL']['XXXXXX'],\par
                                                       db=db['MySQL']['database'])\par
                except pymysql.OperationalError as error:\par
                    print(error)\par
                    sys.exit(1)\par
                except Exception as ex:\par
                    print("MySQL connection error")\par
                    print(ex)\par
                    sys.exit(1)\par
                \par
                \par
                INFLUXDB_CONNECTION = InfluxDBClient(host=db['InfluxDB']['192.168.178.102'],\par
                                                     ssl=db['InfluxDB']['ssl'],\par
                                                     verify_ssl=True,\par
                                                     port=db['InfluxDB']['22'],\par
                                                     username=db['InfluxDB']['iobroker'],\par
                                                     password=db['InfluxDB']['XXXXXX'],\par
                                                     database=db['InfluxDB']['iobroker_import'])\par
                }
                
                

                Danke für die hilfe. Gruß Marco

                node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                JackGruberJ 1 Antwort Letzte Antwort
                0
                • M marco-mh

                  @jackgruber Hallo, ich wollte mich auch mal versuchen an deinem Script. Meine MYSQL DB umfasst mittlerweile 1,8 Mio Einträge. Ich bin allerdings ne absolute NULL in sachen Scripte und bekomme schon graue Haare.
                  Jetzt hab ich das Script mit meinen Daten, so das ich denke das es richtig ist, geändert. Nun bekomme ich folgende meldung

                  
                  C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                    File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 156
                      print(f"Processing row {processed_rows + 1:,} to {processed_rows + len(selected_rows):,} from LIMIT {start_row:,} / {start_row + query_max_rows:,} " +
                                                                                                                                                                         ^
                  SyntaxError: invalid syntax
                  
                  C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>
                  
                  

                  wo kann hier der Fehler sein?

                  Meine geänderten Daten sehen so aus

                  
                  {\rtf1\ansi\deff0\nouicompat{\fonttbl{\f0\fnil\fcharset0 Courier New;}}
                  {\*\generator Riched20 10.0.14393}\viewkind4\uc1 
                  \pard\f0\fs22\lang1033\par
                      MYSQL_CONNECTION = pymysql.connect(host=db['MySQL']['192.168.178.8'],\par
                                                         port=db['MySQL']['3306'],\par
                                                         user=db['MySQL']['root'],\par
                                                         password=db['MySQL']['XXXXXX'],\par
                                                         db=db['MySQL']['database'])\par
                  except pymysql.OperationalError as error:\par
                      print(error)\par
                      sys.exit(1)\par
                  except Exception as ex:\par
                      print("MySQL connection error")\par
                      print(ex)\par
                      sys.exit(1)\par
                  \par
                  \par
                  INFLUXDB_CONNECTION = InfluxDBClient(host=db['InfluxDB']['192.168.178.102'],\par
                                                       ssl=db['InfluxDB']['ssl'],\par
                                                       verify_ssl=True,\par
                                                       port=db['InfluxDB']['22'],\par
                                                       username=db['InfluxDB']['iobroker'],\par
                                                       password=db['InfluxDB']['XXXXXX'],\par
                                                       database=db['InfluxDB']['iobroker_import'])\par
                  }
                  
                  

                  Danke für die hilfe. Gruß Marco

                  JackGruberJ Offline
                  JackGruberJ Offline
                  JackGruber
                  schrieb am zuletzt editiert von
                  #70

                  @marco-mh bitte nur die database.json.example in database.json umbenennen und die daten dort eintragen.

                  M 1 Antwort Letzte Antwort
                  0
                  • JackGruberJ JackGruber

                    @marco-mh bitte nur die database.json.example in database.json umbenennen und die daten dort eintragen.

                    M Offline
                    M Offline
                    marco-mh
                    schrieb am zuletzt editiert von
                    #71

                    @jackgruber Danke für die schnelle Antwort. Aber der Fehler bleibt leider.
                    ichnhab die Daten jetzt in der Json geändert.

                    node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                    JackGruberJ 1 Antwort Letzte Antwort
                    0
                    • M marco-mh

                      @jackgruber Danke für die schnelle Antwort. Aber der Fehler bleibt leider.
                      ichnhab die Daten jetzt in der Json geändert.

                      JackGruberJ Offline
                      JackGruberJ Offline
                      JackGruber
                      schrieb am zuletzt editiert von
                      #72

                      @marco-mh Welche python version ist im einsatz?

                      M 1 Antwort Letzte Antwort
                      0
                      • JackGruberJ JackGruber

                        @marco-mh Welche python version ist im einsatz?

                        M Offline
                        M Offline
                        marco-mh
                        schrieb am zuletzt editiert von
                        #73

                        @jackgruber 3.9.5

                        node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                        JackGruberJ 1 Antwort Letzte Antwort
                        0
                        • M marco-mh

                          @jackgruber 3.9.5

                          JackGruberJ Offline
                          JackGruberJ Offline
                          JackGruber
                          schrieb am zuletzt editiert von
                          #74

                          @marco-mh OK, das ist ok. Aber die Fehlermeldung deutet auf ein altes python ...

                          Die Zeile ist nur für den Status, kann daher auch auskommentiert/gelöscht werden.

                          M 1 Antwort Letzte Antwort
                          0
                          • JackGruberJ JackGruber

                            @marco-mh OK, das ist ok. Aber die Fehlermeldung deutet auf ein altes python ...

                            Die Zeile ist nur für den Status, kann daher auch auskommentiert/gelöscht werden.

                            M Offline
                            M Offline
                            marco-mh
                            schrieb am zuletzt editiert von
                            #75

                            @jackgruber ok, die 157 und 181 musste ich auch # setzen
                            jetzt kommt folgendes

                            
                            C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                            Traceback (most recent call last):
                              File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 5, in <module>
                                from influxdb import InfluxDBClient
                            ImportError: No module named influxdb
                            
                            

                            node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                            JackGruberJ 1 Antwort Letzte Antwort
                            0
                            • M marco-mh

                              @jackgruber ok, die 157 und 181 musste ich auch # setzen
                              jetzt kommt folgendes

                              
                              C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master>migrate.py ALL
                              Traceback (most recent call last):
                                File "C:\Users\marco\Downloads\iobroker_mysql_2_influxdb-master\migrate.py", line 5, in <module>
                                  from influxdb import InfluxDBClient
                              ImportError: No module named influxdb
                              
                              
                              JackGruberJ Offline
                              JackGruberJ Offline
                              JackGruber
                              schrieb am zuletzt editiert von
                              #76

                              wie in der anleitung beschrieben pip install -r requirements.txt ausgeführt?

                              M 3 Antworten Letzte Antwort
                              0
                              • JackGruberJ JackGruber

                                wie in der anleitung beschrieben pip install -r requirements.txt ausgeführt?

                                M Offline
                                M Offline
                                marco-mh
                                schrieb am zuletzt editiert von
                                #77

                                @jackgruber ja hab ich im extrahierten ordner gemacht

                                node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                1 Antwort Letzte Antwort
                                0
                                • JackGruberJ JackGruber

                                  wie in der anleitung beschrieben pip install -r requirements.txt ausgeführt?

                                  M Offline
                                  M Offline
                                  marco-mh
                                  schrieb am zuletzt editiert von
                                  #78

                                  @jackgruber ach quatsch, hab den ja gelöscht und neu extrahiert

                                  node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                  1 Antwort Letzte Antwort
                                  0
                                  • JackGruberJ JackGruber

                                    wie in der anleitung beschrieben pip install -r requirements.txt ausgeführt?

                                    M Offline
                                    M Offline
                                    marco-mh
                                    schrieb am zuletzt editiert von
                                    #79

                                    @jackgruber bei der installation kam folgendes, ist das ok?

                                    
                                    WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                    WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                    WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                    WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                    WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                    WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                    WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                    WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                    WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                    
                                    

                                    aber nach der installation kommt immer noch der selbe fehler

                                    node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                    JackGruberJ 1 Antwort Letzte Antwort
                                    0
                                    • M marco-mh

                                      @jackgruber bei der installation kam folgendes, ist das ok?

                                      
                                      WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                      WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                      WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                      WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                      WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                      WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                      WARNING: Ignoring invalid distribution -p (c:\python39\lib\site-packages)
                                      WARNING: Ignoring invalid distribution -ip (c:\python39\lib\site-packages)
                                      WARNING: Ignoring invalid distribution - (c:\python39\lib\site-packages)
                                      
                                      

                                      aber nach der installation kommt immer noch der selbe fehler

                                      JackGruberJ Offline
                                      JackGruberJ Offline
                                      JackGruber
                                      schrieb am zuletzt editiert von JackGruber
                                      #80

                                      @marco-mh Morgen, also ich bin mir fast sicher, dass ne alte python version < 3.6 beim aufruf genutzt wird.
                                      Ich hab das Script angepasst um dies zu überüfen. Bitte nochmals herunterladen und testen.

                                      Zum pip fehler. Da stimmt was nicht mit den installierten packeten.
                                      Was passiert bei einem pip freeze und dann pip list.

                                      M 2 Antworten Letzte Antwort
                                      0
                                      • JackGruberJ JackGruber

                                        @marco-mh Morgen, also ich bin mir fast sicher, dass ne alte python version < 3.6 beim aufruf genutzt wird.
                                        Ich hab das Script angepasst um dies zu überüfen. Bitte nochmals herunterladen und testen.

                                        Zum pip fehler. Da stimmt was nicht mit den installierten packeten.
                                        Was passiert bei einem pip freeze und dann pip list.

                                        M Offline
                                        M Offline
                                        marco-mh
                                        schrieb am zuletzt editiert von
                                        #81

                                        @jackgruber guten Morgen und vielen Dank für die frühe und viele Hilfe. 👍😀
                                        Ich muss mal gucken wann Ich das am WE schaffe. Heute is erstmal schönes Wetter und heute Abend 15 Scheiben Steaks vergrillen.
                                        Ich melde mich 👍, schönen Start ins WE

                                        node.js 16.15.1, NPM 8.11, js.Controller 4.0.23

                                        JackGruberJ 1 Antwort Letzte Antwort
                                        0
                                        • M marco-mh

                                          @jackgruber guten Morgen und vielen Dank für die frühe und viele Hilfe. 👍😀
                                          Ich muss mal gucken wann Ich das am WE schaffe. Heute is erstmal schönes Wetter und heute Abend 15 Scheiben Steaks vergrillen.
                                          Ich melde mich 👍, schönen Start ins WE

                                          JackGruberJ Offline
                                          JackGruberJ Offline
                                          JackGruber
                                          schrieb am zuletzt editiert von
                                          #82

                                          @marco-mh guter Plan 🙂

                                          1 Antwort Letzte Antwort
                                          0
                                          Antworten
                                          • In einem neuen Thema antworten
                                          Anmelden zum Antworten
                                          • Älteste zuerst
                                          • Neuste zuerst
                                          • Meiste Stimmen


                                          Support us

                                          ioBroker
                                          Community Adapters
                                          Donate
                                          FAQ Cloud / IOT
                                          HowTo: Node.js-Update
                                          HowTo: Backup/Restore
                                          Downloads
                                          BLOG

                                          769

                                          Online

                                          32.4k

                                          Benutzer

                                          81.4k

                                          Themen

                                          1.3m

                                          Beiträge
                                          Community
                                          Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen | Einwilligungseinstellungen
                                          ioBroker Community 2014-2025
                                          logo
                                          • Anmelden

                                          • Du hast noch kein Konto? Registrieren

                                          • Anmelden oder registrieren, um zu suchen
                                          • Erster Beitrag
                                            Letzter Beitrag
                                          0
                                          • Aktuell
                                          • Tags
                                          • Ungelesen 0
                                          • Kategorien
                                          • Unreplied
                                          • Beliebt
                                          • GitHub
                                          • Docu
                                          • Hilfe