Test Adapter influxdb 2.0
-
Hallo Zusammen,
ich habe Ubuntu 20.04 auf dem mein Iobroker läuft und dort auch die Influxdb v1.6.4. Würde gerne auf v2.1 upgraden, weil ich denke, das es irgendwann sowieso sein muss. Gibt es ein einfaches "HowTo", für Influxdb Laien wie mich, gerade im Zusammenhang mit iobroker? So ganz einfach scheint es ja nicht zu sein.
Danke -
@msauer vor dem Schritt stehe ich auch grad.
Im Moment läuft bei mir:- influxDB.0-Adapter mit influxdb 1.8.6. produktiv im Einsatz
- influxDB.1-Adapter mit influxdb 2.1.x testweise im Einsatz
Soweit scheint influxDB 2.1.x gut zu laufen. Die ersten Schritte zur Erstellung mit proxmox container habe ich hier beschrieben:
https://forum.iobroker.net/topic/49939/howto-influxdb-2-1-auf-debian-11-proxmox-ct-installieren?_=1639990970142Für das Upgrade gibt es dann diese Beschreibung, die du wahrscheinlich auch kennst, nur finde ich diese auch nicht so einfach zu verstehen:
https://docs.influxdata.com/influxdb/v2.1/upgrade/v1-to-v2/Für mein Verständnis ist "automatic upgrade" um aus der 1.8.6 direkt die 2.1.x zu erstellen.
Und "manually upgrade" eventuell um das alte Archiv in die neue 2.1.x rüber zu bringen??
Eigentlich möchte ich ja lieber mein frisch erstelltes influxdb2.1.x benutzen und das alte Archiv da "reinladen". Aber das habe ich noch nicht versucht/verstanden...Was ich verstanden habe: bei influx1.x hatte man "database" und bei influx2.x heißt das nun "bucket"
-
@lobomau Naja das Hauptthema (und auch ich scheue mich noch vor der Migration) ist der Transfer der Daten. Am Ende ein Dump mit folgendem Import ... Also man braucht PLATZ ... und das je nach DB Größe VIEL davon
-
Naja... wie oft schaut ihr denn Daten aus den letzten Jahren an? Wieso nicht einen harten Schnitt machen? Zum 01.01.?
Alte Daten von 2017 - 31.12.2021 InfluxV1
Neue Daten ab 01.01.2021 - InfluxV2Und ihr habt ein sauberes neues System ohne Transferschwierigkeiten.
-
@ftd ich glaub ich mach das so. Danke für den Tipp
Um das komfortabel zu machen... wie am besten vorgehen? Am besten ein Script, dass alle gespeicherten Werte umhängt von influxd.0 auf influxd.1 Adapter.
Persönlich kann ich es nur händisch. Ich würde unter Objekte gehen und rechts filtern nach influxd.0, oder?
-
@ftd Die Idee hatte ich auch schonmal und da haste zum teil einfach recht :-)) Bzw man kann ja am Ende die alten Daten immer noch in aller Ruhe nachträglich importieren ... mal überlegen
-
@lobomau Also wenn mach ich es auch da hart ... alles einrichten ... testsystem testen. Dann in der influxdb instanz konfig umstellen auf v2 und damit geht alles ins neue rüber
-
@apollon77 achso. Das könnte ja sehr einfach sein. Einfach in der alten Instanz (bei mir influxd.0 mit influxdb 1.8.6) die Einstellungen der neuen Testinstanz (influxd.1 mit influxdb 2.1.x) eintragen. Wird das funktionieren? Wäre zumindest null Aufwand.
Edit. Achne... die Vergangenheit wird ja nicht mehr funktionieren.
Edit2: Oder vielleicht doch? Ich könnte es ja so machen. Dann geht natürlich nicht mehr die Vergangenheit (gleichzeitig)... die liegt ja auch auf einem anderen Server. Und wenn ich nun mal die alten Daten wiedersehen möchte, könnte ich doch wieder die Adaptereinstellungen auf influxdb1.x mit den entsprechenden Einstellungen stellen und würde diese wieder sehen, oder? -
@lobomau Das lesen der alten daten vom anderen Server wird schwierig ... bei mir nicht relevant weil ich Grafana nutze ... aber naja. Ich hab erher noch andere challenges fr die Umstellung (zb Collectd was das neue nicht mehr von Hause aus kann)
-
Hallo,
ich habe mir auf meinem NUC (proxmox) einen Container erstellt und habe dort influxdb + Grafana installiert. Mit dem Adapter influxdb v2.4.0 habe ich anfangs die Daten noch in die DB geschaufelt bekommen, aber nun erhalte ich immer wieder den FehlerHttpError: 404 Not Found : 404 page not found. Für die Aufteilung meiner Daten (heating, energy, sensors) habe ich drei Buckets in der InfluxDB angelegt und demensprechend auch drei Instanzen im iobroker mit den passenden "DB Namen".Im Browser ist die Adresse (http://<IP>:8086) jedoch erreichbar. Könnt ihr mir hier mit Lösungsansätzen weiterhelfen?
Danke euch und Grüße
-
@splatterjoe Hast du mal genaueres Log?
-
@splatterjoe sagte in Test Adapter influxdb 2.0:
einen Container erstellt
und wie groß? kann es sein das die bootdisk voll ist?
edit
der Ram voll ist?
hatte nämlich kürzlich zu Testzwecken, mit einen LXC für influx 2 erstellt, aber nur 1GB Ram vergeben, einen einzigen DP reingeschrieben,
paar Tage später hatte ich auch error Meldungen im Log -
@apollon77 said in Test Adapter influxdb 2.0:
@splatterjoe Hast du mal genaueres Log?
Ich habe das Loglevel auf debug gestellt und den Adapter neugestartet.
@crunchip Ich habe dem Container 1GB gegeben und im Moment sind gerade einmal 240MB in Benutzung. Es scheint somit nicht am RAM zu liegen .
EDIT:
Ich habe den RAM der iobroker-VM überprüft und hier waren nur noch 400MB frei. Ich habe der VM nun mal etwas mehr gegönnt und musste sie daher auch neustarten. Et voila... Die Instanzen können sich wieder korrekt verbinden. Falls sich das Problem wiederholen sollte, melde ich mich nochmal.Danke & Grüße
-
@splatterjoe dann überprüfe mal das Proxmox log, dort sollte was zu finden sein
-
@crunchip
Kurioserweise sehe ich auch hier immer wieder den Fehler 404, da ich vom proxmox die Metriken an die influxdb schicke. Das spricht dann doch eher für ein Problem bei der influxDB, oder?Beispiel:
Jan 19 11:23:09 proxmox pvestatd[997]: metrics send error 'influxDB': 404 Not Found -
@splatterjoe Ja klingt es
-
@splatterjoe sagte in Test Adapter influxdb 2.0:
für ein Problem bei der influxDB, oder?
ja, da du wie oben geschrieben hast
@splatterjoe sagte in Test Adapter influxdb 2.0:
Ich habe dem Container 1GB gegeben
der Ram irgendwann überläuft und der LXC "abkackt", 1Gb ist zu wenig
mein LXC hat sich bei 1,5GB Ram eingependelt(3Gb vergeben), da läuft nur Influx und es werden nur 2 Datenpunkte geloggt -
@crunchip
Ich logge hier ein paar mehr Datenpunkte, aber ich werde den zugewiesenen RAM auf 3GB erhöhen und den Verbauch mal im Auge behalten. -
"Important: For now just use the initial owner auth token because we still struggle on how to create a token that has sufficient permissions. The Owner Token was generated on InfluxDB setup process."
Wie kommt man da im Nachgang noch dran?
EDIT:
-
@passuff sagte in Test Adapter influxdb 2.0:
"Important: For now just use the initial owner auth token because we still struggle on how to create a token that has sufficient permissions. The Owner Token was generated on InfluxDB setup process."
du meinst hier?
