[Linux Shell-Skript] WLAN-Wetterstation

[Boronsbruder]

@sborg

1.2.2023, 18:37:33.611	[info ]: javascript.0 (12957) Start javascript script.js.common.wetter.fix
1.2.2023, 18:37:33.628	[info ]: javascript.0 (12957) script.js.common.wetter.fix: registered 0 subscriptions, 0 schedules, 0 messages, 0 logs and 0 file subscriptions
1.2.2023, 18:37:33.634	[error]: javascript.0 (12957) script.js.common.wetter.fix: TypeError: VorJahr.substring is not a function
1.2.2023, 18:37:33.634	[error]: javascript.0 (12957)     at script.js.common.wetter.fix:11:38
1.2.2023, 18:37:33.635	[error]: javascript.0 (12957)     at script.js.common.wetter.fix:47:3
1.2.2023, 18:39:44.297	[info ]: javascript.0 (12957) Stop script script.js.common.wetter.fix

    const PRE_DP='0_userdata.0.Statistik.Wetter';  //Speicherort der Statistikdaten
        const monatsdatenpunkt='.Data.2022.02';        //.Data.Jahr.Monat
    
            let VorJahr = getState(PRE_DP+monatsdatenpunkt).val;
            console.log (VorJahr);
            
      // Daten vom Vorjahr durchiterieren und Datenpunkte befüllen
        VorJahr.forEach(obj => {
                    Object.keys(obj).forEach(key => {
                        
                        // fix für Datenpunktname
                        let setkey = key;                                       
                        if (key == 'Temp_Durchschnitt') setkey = "Temperatur_Durchschnitt";
        
                        setState(PRE_DP+'.Vorjahres_Monat.' +setkey, obj[key], true);
                    });
                });

So übernimmt er alle im Vorjahr vorhandenen Daten (also keine Tropentage usw. wenn diese noch nicht gesetzt waren).

Falls dir das hilft, darfst du es gerne verwenden

Edit: Sorry, für die vielen Edits bin zu blöd für Copy und Paste

[SBorg]

@boronsbruder sagte in [Linux Shell-Skript] WLAN-Wetterstation:

Falls dir das hilft, darfst du es gerne verwenden
Edit: Sorry, für die vielen Edits bin zu blöd für Copy und Paste

Im Grunde schon, aber mittlerweile bin ich der Meinung, dass es nicht die beste Idee ist/war mit unterschiedlichen JSONs "rumzuhampeln". Jetzt fällt es uns schon auf die Füße, beim nächsten mal wieder...
Wenn du kannst/magst, mach doch bitte einen Patch der über die "Data"-JSONs iteriert und ggf. die fehlenden GradTage dem JSON hinzufügt. Dann braucht es bei der nächsten Änderung auch keinen Patch mehr, bzw. wenn/falls ein neuer Wert hinzukommt kann man dann alle auf eine gleiche Syntax bringen. Ev. den Wert als User-Parameter, dann kann sich jeder das eintragen was er will, um zu sehen was keinen echten Wert darstellt. Oder wir nehmen pauschal einfach -1, denn bspw. -1 Wüstentage gibt es wohl nicht...

...und mir haut die Board-Software auch so gelegentlich Zeichen hin wo sie nicht sein sollten

[SBorg]

Dann mal was an alle (oder den harten Kern ) :

Seid ihr mit InfluxDB V1 "fest verheiratet"? Es gelingt mir nicht ohne größeres hängen und würgen alles auf V1 + V2 lauffähig zu bekommen. Irgendetwas geht immer nicht
...und offen gestanden habe ich so nun auch keinen Bock mehr dazu...
Die Konsequenz wäre eine neue V3.x des Skriptes, die nicht mehr mit Influx V1 kompatibel wäre (+ich für V2.x des Skriptes nichts mehr weiter entwickeln würde. Neuerungen gebe es dann nur noch in der 3er). Im Grunde müsste ich sogar direkt in die InfluxDB schreiben, da der Influx-Adapter es leider so macht, wie man es seitens Influx eigentlich nicht machen soll.
Der Datenpunkt heißt so wie der gesamte Pfad, also bspw. javascript.0.Wetterstation.Aussentemperatur
lt. Influx sollte er aber getagged sein, also zB. in der Art: "Temperatur Ort=Aussen (oder Wetterstation oä.) usw." Dann kann man relativ einfach alles per Tags zusammenfassen ("alle Gradtage vom März 2022" oder "alle Wüstentage seit 2019"). Das ist so aktuell nicht möglich da keine Tags verwendet werden und jeder GradTag eine eigene Messwertereihe ist.

[MartyBr]

@sborg
Ich würde den Schritt begrüßen. Ich setze seit mehr als einem Jahr Influxdb V2 ein und muss beispielsweise die Statistik-Scripte umändern.

[ilovegym]

@sborg
Ich würde ab Version 3.x nur noch influx v2 unterstützen, das ist die Zukunft und solange das script v2.x noch läuft ist ja für alle noch okay.

Bin auch gerade dabei meine ganzen grafana views auf influx v2 ( Flux) umzustellen..

Hab sonst nur noch den unipoller der die v1 nutzt und dein Script..

[Rene55]

@sborg Ich wäre auch für eine Version V3.x mit direktem Schreiben incl. Tagging. in die Influx 2.x. Ich müsste dann nur mal schauen, wie ich die alten Daten mit rüberbekäme. Hat dazu jemand einen Tip oder Vorgehensweise?

[Latzi]

@sborg
lebe schon seit längerer Zeit mit influx V2 zusammen, nachdem ich mich von influx V1 getrennt habe

[Boronsbruder]

@sborg
Da er Skriptteil nur die passenden DP's befüllt, ist das, denke ich, unproblematisch.
Du mussst nur nicht mehr in deinem Skript die Vorjahresroutine jedesmal erweitern, weil er den JSON selbst durch geht.

Ich habe gestern vor dem Fixen festgestellt, dass bei mir noch eine der 1.1er Version des Statistik-Skripts lief...

Deswegen konnte ich aber einfach nachprüfen, wie das Skript auf einen zusätzlichen JSON-Eintrag reagiert:

• In den JSON von 02.2022 "Wuestentage":-1 eingefügt
• Resultat: der Datenpunkt Vorjahres_Monat.Wuestentage wurde ordnungsgemäß mit -1 befüllt:
  

Also kannst du noch VIIIIEEEEEL in deinen JSON reinpacken, wenn der passende DP angelegt ist, wird er brav befüllt.

Wenn ich rausfinde, wie ich nen Patch anlege, dann werde ich das machen Aber wahrscheinlich erst am Wochenende

Zum Thema InfluxV2 schließe ich mich Rene55 an:
Wenn ich die Daten irgendwie rüberbekomme...

Öftermal was Neues

[tritor]

@sborg

Ich bin seit geraumer Zeit auf influxDB2 und logge halt jeden einzelnen für mich wichtigen DP.
Wenn das Script das dann kann, wäre natürlich besser. Also meine Stimme für V3.x mit InfluxDB2 hast du.

[amiethaner]

@SBorg Mit der von dir gewohnten guten Doku sollte V2 schon gehen denk ich.

Aber ne andere Frage noch. Seit ich mit allem wieder aktuell bin, bekomm ich bei den Regenmengen immer Werte bis 3 oder gar 4 stellen hinterm Komma. So genau will ich des ja garned. Wie bekomm ich denn da wieder ne Rundung rein?

[SBorg]

@boronsbruder sagte in [Linux Shell-Skript] WLAN-Wetterstation:

Wenn ich rausfinde, wie ich nen Patch anlege, dann werde ich das machen

Danke, brauchst du nicht mehr --> ist jetzt in der V1.3.2 drin

[SBorg]

@amiethaner sagte in [Linux Shell-Skript] WLAN-Wetterstation:

Aber ne andere Frage noch. Seit ich mit allem wieder aktuell bin, bekomm ich bei den Regenmengen immer Werte bis 3 oder gar 4 stellen hinterm Komma. So genau will ich des ja garned. Wie bekomm ich denn da wieder ne Rundung rein?

Das ist eigentlich schon seit Anfang an auf 3 Nachkommastellen "gerundet". Gerundet deswegen, weil die Umrechnung von Inch der Station auf "mm" eben krumme Werte ergibt. Schneidet man da aber zu viel ab, stimmt mit fortschreitendem Jahr die "kumulierte Regenmenge" nicht mehr, da sich die fehlenden Nachkommastellen dann zu einer sichtbaren Differenz aufsummieren.
Aber wo stört es denn (nicht ironisch gefragt)? In der VIS kannst du die Stellen begrenzen (+ er rundet dann auch automatisch), in Grafana ebenfalls und bei ECharts & Co geht es IMO ebenfalls.

[SBorg]

@Rene55

zB.: eine Zeile, Breakets [] weglassen
influx -database [name] -username [nutzername] -password [geheim] -execute 'SELECT * FROM "javascript.0.Wetterstation.Aussentemperatur"' -format csv > Aussentemperatur.csv

[Rene55]

@sborg Danke für die Hilfestellung. Daran arbeite ich (in verschiedenen Abwandlungen) schon den halben Vormittag. Ich bekomme immer den gleichen Fehler :error parsing query: found influx, expected SELECT, DELETE, SHOW, CREATE, DROP, EXPLAIN, GRANT, REVOKE, ALTER, SET, KILL at line 1, char 1.
Aber vielleicht gehe ich auch falsch vor. Meine InfluxDB läuft in einem Container. Via Portainer komme ich auf die bash. Hier kann ich mich anmelden und mir am Bildschirm die Inhalte der einzelnen Tabellen anschauen. Weiter komm ich nicht.

[SBorg]

Es braucht keiner Panik schieben das er abgehängt wird oder etwas nicht funktioniert.

Der Master-Plan sieht eine V3.0.0 vor, die keine neuen Funktionen hat sondern lediglich InfluxDB V2 supported. Da aktuell auch nix auf meiner Agenda steht wird es auch noch eine gewisse Zeit dauern bis zu einer weiteren Version.

Die Migration von Influx V1 --> V2 ist nicht soo schwer (schaut mal bei YT nach EddyD Smarthome; er hat dazu ein gutes Tut gemacht).
Lasst euch vor allen Dingen Zeit und überstürzt nichts. Der Aufbau der V2 will wohl überlegt sein (Stichwort buckets + retention policy).

Bei mir läuft aktuell beides parallel:

Ob ich ohne Influx-Adapter in die DB schreibe weiß ich noch nicht. Einteils weiß ich nicht ob ich mir das antun will, andern teils ist es so aber einfach nicht richtig:

Gerade wo man schon im Vorfeld schön mittels der Tags filtern kann...

---

Ich habe jetzt mal auf meine Synology ausgelagert, die hat eh nichts zu tun:

Dabei werde ich nicht portieren, sondern nur das maßgebliche exportieren und in verschiedene Buckets importieren. Da hat sich in den letzten Jahren einfach zu viel "Müll" angesammelt.

[SBorg]

@rene55 sagte in [Linux Shell-Skript] WLAN-Wetterstation:

expected SELECT,...

Sieht mir so aus als hättest du nur "" benutzt? Da haben wir nämlich schon den "Mist", dass Punkte im Measurement eigentlich nicht erlaubt sind: Adaptername.Instanz.bla.blupp.hastenichgesehen
Deswegen das Konstrukt mittels Ticks und Anführungszeichen 'SELECT * FROM "javascript.0.Wetterstation.Aussentemperatur"'

[Rene55]

@sborg Nee leider nicht. Ich hab mich ziemlich an das Beispiel gehalten. Ich hab auch ein Measurement ohne Punkte (Alias) - gleiches Ergebnis.
Dann habe ich nochmal select * from "0_userdata.0.Wetterstation.Aussentemperatur" versucht. Sobald ich aber die Bildschirmausgabe in eine Datei umleiten will, gibt es den Fehler "ERR: error parsing query: found >, expected ; at line 1, char 61".

[wendy2702]

Habe das Proxmox / Influx geschwätz mal abgetrennt und nach hier gepackt:

https://forum.iobroker.net/topic/62656/proxmox-influxdb-v1-zu-v2-wie

[Beowolf]

Ich muß mal einfach fragen. Gibt es "die" Wetterstation die empfehlenswert ist?

Grüße
Manfred

[amiethaner]

@sborg sorry, ich bin selber blöd. Klar ich kanns in der Vis ja kürzen wie ichs brauch