Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern

bitwicht

bitte

const {InfluxDB} = require('@influxdata/influxdb-client')
const fs = require('fs')
 
// vvvvvvvvvvvvvvv ANPASSEN!!! vvvvvvvvvvvvvvv
const Token ='xxxxxxxxxxxxx'
const Url ='http://192.168.0.11:8086'
const Org = 'home'
const Bucket = 'iobroker'
const measurement1 = "PV-SEWeb-Ertrag-Tag"
const Outputfile = '/opt/iobroker/exports/daily_previous_month.txt'
 
const query = ` import "date" 
                import "timezone" 
                option location = timezone.location(name: "Europe/Berlin") 
            
                from(bucket: "${Bucket}")
                |> range(start:date.truncate(t:-1mo, unit:1mo)) 
                |> filter(fn: (r) => r._measurement == "${measurement1}")
                |> filter(fn: (r) => r._field == "value")
                |> aggregateWindow(every: 1d,fn:max,timeSrc: "_start",createEmpty:false)
                |> pivot(rowKey:["_time"], columnKey: ["_measurement"], valueColumn: "_value")
                |> rename(columns: {"${measurement1}": "PV-SEWeb-Ertrag-Tag"})
                |> keep(columns: ["_time", "PV-SEWeb-Ertrag-Tag"])    
                `
// ^^^^^^^^^^^^^^^ ANPASSEN!!! ^^^^^^^^^^^^^^^
 
const client = new InfluxDB({
  url: Url,
  token: Token
})
 
const queryApi = client.getQueryApi(Org)
 
const stream = fs.createWriteStream(Outputfile) // , {flags: 'a'} zum Anhängen an die Datei
 
const writeToFile = (fluxRow) => {
  let fluxdate = new Date(fluxRow._time)
  let formattedDate = fluxdate.toLocaleDateString('de-DE', { day: '2-digit', month: '2-digit', year: '2-digit' })
  stream.write(`da[dx++]="${formattedDate}|${fluxRow.PV-SEWeb-Ertrag-Tag};0|"\n`)
}
 
queryApi.queryRows(query, {
  next: (row, tableMeta) => writeToFile(tableMeta.toObject(row)),
  error: error => {
    console.error(error);
    console.error('\nFinished ERROR');
  },
  complete: () => {
    stream.end();
    console.log('\nFinished SUCCESS');
  },
});

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

das kommt durch die Bindestriche in der Umbenennung in

 |> rename(columns: {"${measurement1}": "PV-SEWeb-Ertrag-Tag"})

Nimmt da mal ein Wert ohne Bindestriche.

bitwicht

das ist ein Problem.
So heißt mein AliasID in der Influx.

Kann ich auch das nehmen 0_userdata.0.Systemdaten.Solaranlage.Anlagen.1565936.Erzeugung.Heute ?

Oder kennt die DB den Wert nicht?

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

das ist ein Problem.

Nein, ist es nicht.

Der Wert wird doch nur als Alias im Skript verwendet. Da kannst du auch "xyz" nehmen und hier natürlich auch:

stream.write(`da[dx++]="${formattedDate}|${fluxRow.xyz};0|"\n`)

bitwicht

Perfekt. Geht.

In der Datei steht:
da[dx++]="04.01.24|15.62;0|"
da[dx++]="05.01.24|9.52;0|"
da[dx++]="06.01.24|3.13;0|"
da[dx++]="07.01.24|0;0|"

Wie kann ich das umdrehen das der aktuelle Tag immer oben steht?

Dein Script geht jetzt bis "unendlich" zurück?

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Wie kann ich das umdrehen das der aktuelle Tag immer oben steht?

Einfach als letzte Zeile an die Query anhängen:

 |> sort(columns: ["_time"], desc: true)

Dein Script geht jetzt bis "unendlich" zurück?

Ne, im Moment ab dem 1. des Vormonats

|> range(start:date.truncate(t:-1mo, unit:1mo))

Wenn es weiter zurück gehen soll, dann musst du "-1mo" anpassen.

bitwicht

@Marc-Berg

wie ist der Syntax für 20 Jahre zurück = "-20y" ?

Ich habe ein anderes Script (Shelly) das sich automatisch alle 15 Minuten aktualisiert.

Im Script steht:

// Alle 15 Minuten das Skript für den Tagesverbrauch ausführen
schedule('*/15 * * * *', shelly_verbrauch_update);

function shelly_verbrauch_update() {

Ich kenne mich ja leider nicht aus aber kann es sein, dass das Script in einer Funktion ist und der Scaduler einfach die Funktion startet ?!

Wenn wir dein Script so bauen:

function SE-Web-Update() {
##### hier dein Script rein ######
schedule('*/15 * * * *', SE-Web-Update);

Doch ich habe es hinbekommen.
Es ging nicht wegen der "-"

so geht es:

function SEWebUpdate() {
//// hier dein Script rein /////
schedule('*/15 * * * *', SEWebUpdate);

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

wie ist der Syntax für 20 Jahre zurück = "-20y" ?

ja, genau.

1s für Sekunde
1m für Minute
1h für Stunde
1d für Tag
1w für Woche
1mo für Monat
1y für Jahr

bitwicht

@Marc-Berg

Super, vielen Dank!

Jetzt versuche ich dein Script noch für Monat und Jahr anzupassen (brauch ich aber noch den Datenpunkt).
Und dann noch der FTP Upload.

Das mit der Funktion geht auch:
function SEWebUpdate() {
//// hier dein Script rein /////
schedule('*/1 * * * *', SEWebUpdate);

Er Erstellt jetzt alle Minute die Datei neu.

bitwicht

@Marc-Berg

Die Daten werden doch in der Influx in measurement = "PV-SEWeb-Ertrag-Tag" gespeichert.
In meiner App hätte ich die historischen Daten.
Wie könnte ich diese denn in die Datenbank manuell eintragen?
Gibt es da eine Art Web-Explorer, Manuelle Eingabe oder ev. CSV Import ?

Den FTP Upload habe ich auch hinbekommen, sogar direkt im Script.

const  Client = require('ftp');
    const  c = new Client();
    c.on('ready', function() {
      c.put('/opt/iobroker/exports/daily_previous_month.txt', 'daily_previous_month.txt', function(err) {
        if (err) throw err;
        c.end();
      });
    });
    c.connect({
        host:"xxxxxx",
        user:"xxxxxx",
        password:"xxxxx"
    }
    );

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Gibt es da eine Art Web-Explorer, Manuelle Eingabe oder ev. CSV Import ?

Ich glaube, unter den Voraussetzungen wäre es am einfachsten, die Daten ins Line Protocol zu überführen, das ist ganz simpel aufgebaut. Einziger Haken ist dabei, dass du die Zeit in einen Unix Timestamp übersetzen musst.

measurementName fieldKey="field string value" <Zeitstempel>

Bei dir müsste es also so aussehen:

PV-SEWeb-Ertrag-Tag value="15.62" 1704326400
PV-SEWeb-Ertrag-Tag value="9.52" 1704412800
PV-SEWeb-Ertrag-Tag value="3.13" 1704499200

Diese Daten kannst du dann via InfluxDB Webgui (Sources-->File Upload-->Line Protocol) ganz einfach importieren. Wichtig ist dabei, dass du die passende Precision mit angibst. In meinem Beispiel wären das "Sekunden".

bitwicht

@Marc-Berg

Unable to write.

bevor ich da was "kaputt" mache.
in der Weboberfläche steht sogar ein Beispiel:

myMeasurement = PV-SEWeb-Ertrag-Tag
Tag1 = habe ich nicht ?
Tag2 = habe ich nicht ?
fieldKey = mein Wert
Timestamp = Zeit in Unix -Sekunden

Müsste es dann so aussehen?

PV-SEWeb-Ertrag-Tag, fieldKey="15.616" 1704376800

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Müsste es dann so aussehen?

Nein, das Komma ist zu viel. Kommata benutzt man nur, wenn man mit Tags arbeitet. Mache es so, wie ich geschrieben habe, das ist getestet.

EDIT: und drauf achten, dass in der Datei keine leeren Zeilen am Ende stehen.

EDIT2: "fieldKey" MUSS "value" lauten!

bitwicht

@Marc-Berg
Da gibt es doch die Option: Upload oder Manuell

Ich wollt es mal manuell eingeben:

PV-SEWeb-Ertrag-Tag value="15.616" 1704376800

Dann kommt der Fehler:
unable to write data - unknown

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

unable to write data - unknown

Hm, das geht bei mir völlig problemlos.

Du kannst mal noch versuchen, die Daten aus einer Textdatei herauszukopieren, nicht dass da unsichtbare Steuerzeichen drin stecken.

bitwicht

@Marc-Berg

Ich habe mich jetzt mal neu angemeldet.
Daten aus dem Notepad kopiert:

PV-SEWeb-Ertrag-Tag value="15.616" 1704376800

Bei mir kommt dieser Fehler:

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Bei mir kommt dieser Fehler:

Ich kann den Fehler nur nachstellen, wenn ich die Precision falsch angebe. Die stellt sich immer wieder auf "Nanosekunden" zurück.

bitwicht

@Marc-Berg

So stelle ich es ein:

Wenn ich eine Datei Uploade kommt der gleiche Fehler.

Wenn ich das richtig sehe läuft bei mir:

X-Influxdb-Build: OSS
X-Influxdb-Version: v2.5.1

Bei mir stellt sich das aber nicht zurück wenn der Fehler kommt und ich auch edit oder clear gehe

bitwicht

Es hat eben funktioniert als ich aus versehen auf nonosecounds war.

Was habe ich denn nun geschrieben ?!?

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

X-Influxdb-Version: v2.5.1

Das kann doch nur ein Bug in deiner Version sein, aktuell ist die InfluxDB v2.7.5

Community Forum

NEWS

Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern

Support us

682

32.4k

81.5k

1.3m