Jahresrückblick 2025 – unser neuer Blogbeitrag ist online! ✨

[bitwicht]

@Marc-Berg

zu dem Script, verstehe ich das richtig:

import "timezone"
 
option task = {name: "Downsampling Vb_Stromzaehler", cron: "15 0 * * *"}
 
option location = timezone.location(name: "Europe/Berlin")
 
data =
    from(bucket: "ioBroker")
        |> range(start: -2mo, stop: now())
        |> filter(fn: (r) => r["_measurement"] == "Vb_Stromzaehler")
        |> filter(fn: (r) => r["from"] == "system.adapter.javascript.0")
        // Spalten "_start", "_stop", "ack", "from", "q", ausschliessen
        |> drop(columns: ["ack", "q", "from"])
 
data
    |> aggregateWindow(every: 1d, fn: last, timeSrc: "_start")
    // In Wh ohne Komma
    |> toInt()
    |> set(key: "_measurement", value: "Hauptzaehler") 
    // Use the to() function to validate that the results look correct. This is optional.
    |> to(bucket: "Stromverbrauch", org: "RBE")

Was bedeutet:
name: "Downsampling Vb_Stromzaehler"
Ist das frei wählbar oder ein Bucket / Measurement ?

range(start: -2mo, stop: now())
Wenn das Script täglich läuft müsste doch auch -1d reichen weil er doch dann regelmäßig wegschreibt oder warum macht er hier -2mo ?

|> filter(fn: (r) => r["_measurement"] == "Vb_Stromzaehler")
|> filter(fn: (r) => r["from"] == "system.adapter.javascript.0")
er filtert nach measurement aber warum dann noch das from ?
ich habe hier immer: |> filter(fn: (r) => r["_field"] == "value")

|> set(key: "_measurement", value: "Hauptzaehler")
|> to(bucket: "Stromverbrauch", org: "RBE")
das heißt es wird in das bucket Stromverbrauch mit _measurement "Hauptzaehler" geschrieben oder ?

[Marc Berg]

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Was bedeutet:
name: "Downsampling Vb_Stromzaehler"
Ist das frei wählbar oder ein Bucket / Measurement ?

Lege über die Oberfläche einfach mal einen neuen Task an. Dann siehst du, dass die Eingaben aus der Gui übernommen werden. Dies ist also einfach nur ein Name, der beliebig sein kann.

range(start: -2mo, stop: now())
Wenn das Script täglich läuft müsste doch auch -1d reichen weil er doch dann regelmäßig wegschreibt oder warum macht er hier -2mo ?

Wenn das Skript aus welchen Gründen auch immer mal nicht laufen sollte, ist es besser ein paar Tage weiter in die Vergangenheit zu gehen. Bei einem Job, der Tagesdaten zusammenstellt, wären 2 Monate wohl zu viel.
Aber darauf achten, dass auch ein "stop" angegeben werden muss, sonst holst du die angebrochenen Tage, an welchem der Task läuft mit rein. Steht hier im Thread weiter oben, wie das geht.

|> set(key: "_measurement", value: "Hauptzaehler")
|> to(bucket: "Stromverbrauch", org: "RBE")
das heißt es wird in das bucket Stromverbrauch mit _measurement "Hauptzaehler" geschrieben oder ?

genau, ist natürlich frei wählbar.

[bitwicht]

@Marc-Berg

du meinst so:

|> range(start: -2mo, stop: date.truncate(t:-1s, unit:1mo)

Jetzt verstehe ich deine Aussage und dann das Problem.

Ich wollen mit " stop: now()) " arbeiten und den Task alle 30 Minuten laufen lassen.
Dann hätte ich in der Grafana Abfrage auch immer auch den aktuellen Tag mit drin.

Dumm aber das ich dann pro Stunde 2 Werte schreibe.

So ein Mist, immer ein neues Problem

[Marc Berg]

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

|> range(start: -2mo, stop: date.truncate(t:-1s, unit:1mo)

in diesem Beispiel würde JETZT (11.01.24 14:00) die Abfrage vom 12.12.23 14:00 bis 01.01.24 00:00 Uhr laufen. Das bedeutet, dass du auch für den Startzeitpunkt mit "truncate" arbeiten musst und statt des Monats den Tag nehmen musst, um ganze Tage bis gestern zu erfassen.

|> range(start: date.truncate(t:-3d, unit:1d), stop: date.truncate(t:-1s, unit:1d))

das bedeutet JETZT: vom 08.01.24 00:00 Uhr bis 11.01.24 00:00 Uhr

[bitwicht]

@Marc Berg

OK, baue ich gleich um.
In deinem Beispiel ist -3d.

Wenn ich das Script jetzt täglich ausführe und heute starte:

schreibt er am 11.01
Tageswert 11.1
Tageswert 10.1
Tageswert 09.1

schreibt er am 12.01
Tageswert 12.1
Tageswert 11.1
Tageswert 10.1

Ist dann der Tageswert vom 10.1, bzw. 11.11 doppelt vorhanden (zwei Einträge in der DB) oder "überschreibt" er den bestehenden?

[bitwicht]

@Marc-Berg

Hallo Marc.

Ich bin noch immer an dem Umbau und möchte jetzt ein measuremnt das über 100K Einträge hat etwas ausdünnen.

Ich arbeiten im Influx Data Explorer.
Was passte denn an diesem Syntax nicht?

from(bucket: "iobroker-unlimited")
    |> range(start: -36mo, stop: -2mo)
    |> filter(fn: (r) => r._measurement == "Strom-IR-Haus-Bezug")
    |> aggregateWindow(every: 1d, fn: last, timeSrc: "_start")
    |> toInt()
    |> set(key: "_measurement", value: "TEST-Strom-IR-Haus-Bezug")
    |> to(bucket: "iobroker-unlimited")

Fehler:

 runtime error @5:8-5:15: toInt: failed to evaluate map function: cannot convert string "system.adapter.sonoff.0" to int due to invalid syntax

[Marc Berg]

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Was passte denn an diesem Syntax nicht?

Dir fehlt der Filter auf die Spalte "value", sonst bekommst du wahrscheinlich auch die internen Spalten "q" "ack" und "from" mit, wenn die Daten aus dem Adapter kommen.

from(bucket: "iobroker-unlimited")
    |> range(start: -36mo, stop: -2mo)
    |> filter(fn: (r) => r._measurement == "Strom-IR-Haus-Bezug")
    |> filter(fn: (r) => r["_field"] == "value")
    |> aggregateWindow(every: 1d, fn: last, timeSrc: "_start")
    |> toInt()
    |> set(key: "_measurement", value: "TEST-Strom-IR-Haus-Bezug")
    |> to(bucket: "iobroker-unlimited")

[bitwicht]

@Marc-Berg

Er legt mir das neue measurement an, aber wenn ich im Data Explorer bin fehlt bei field "value"

Im Grafana kann ich die Daten aber anzeigen lassen.
Warum fehlen denn im Dataexplorer die Felder ?

[Marc Berg]

@bitwicht sagte in [Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern]

Warum fehlen denn im Dataexplorer die Felder ?

Wahrscheinlich hast du den Zeitraum nicht groß genug gewählt.

[bitwicht]

@Marc-Berg

stimmt :-)

Das heißt ich kopiere jetzt das original-measuremnt in ein measuremnt -TEMP
dann vom TEMP die Dante von XX bis 31.12.2023 aggregiert zurück in das original-measuremnt
und dann von 1.1.2024 bis heute zurück in das original-measuremntdie

ganz schöner Aufwand.

Gibt es nicht ein Befehl der von XX bis YY nur den einen Wert pro Tag stehen lässt und alles andere weghaut ?

[bitwicht]

delete.......

[bitwicht]

deleteeeee

[bitwicht]

@Marc-Berg

Ich versuche jetzt gerade in das neu angelegte Bucket die Historischen Werte einzutragen (was im alten Bucket nicht ging).

Manueller Import
Einstellung: Sekunden

PV_SE_Erzeugung_Monat_Adapter value="374000" 1706740200

Wenn ich dann eine Abfrage auf das Measuremnt mache um wir die Werte anzeigen zu lassen kommt immer der Fehler:

unsupported input type for mean aggregate: string

Was mache ich denn beim Import falsch?

[Marc Berg]

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Was mache ich denn beim Import falsch?

Du wirst in deiner (wahrscheinlich automatisch erstellen) Abfrage ein "aggregateWindow" drin haben, was auf einer Spalte, die nicht vom Typ "number" ist, nicht funktioniert. Wenn du den Wert in " setzt, wird daraus automatisch ein String.

[bitwicht]

Passt, das wars. Danke.

[bitwicht]

@Marc-Berg

Ich habe die Daten (ca. 12 Monate) dann so eingegeben ohne Problem:

PV_SE_Erzeugung_Monat_Adapter value=374000 1706740200

Nach weiterer Eingabe von ca. 12 Monaten kommt jetzt dieser Fehler:

panic: runtime error: invalid memory address or nil pointer dereference

Ich habe jetzt das komplette measuremnt gelöscht und neu angelegt, jetzt scheint es zu gehen

[bitwicht]

@Marc-Berg

Hast du hier noch eine Idee:

Ich gebe diesen Unix Zeit ein:

1669761000

Das ist laut Rechner der: Your Time Zone Tue Nov 29 2022 23:30:00 GMT+0100 (Mitteleuropäische Normalzeit)

In der Influx wird es aber als

2022-12-02T20:48:00.000Z

eingetragen

[Marc Berg]

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Hast du hier noch eine Idee:

Ich kann mir jetzt nicht vorstellen, dass die InfluxDB aus diesem Timestamp ein falsches Datum macht.
Und aus diesen zwei "Schnipseln" ist das für mich auch nicht wirklich "beweisbar".

[bitwicht]

@Marc-Berg

hier mein Import:

PV_SE_Erzeugung_Jahr_Adapter value=21300000 1703975400 (30.12.2023)
PV_SE_Erzeugung_Jahr_Adapter value=23200000 1672439400 (30.12.2022)
PV_SE_Erzeugung_Jahr_Adapter value=21800000 1640903400 (30.12.2021)

und was dann in der DB steht:

Die Zeit auf dem System passt:

Fri 16 Feb 11:34:52 CET 2024

[Marc Berg]

@bitwicht

zeig mal die Abfrage: