[Gelöst] Helios KWL - Zugriff auf xml

[acidsubway]

Hab den Fehler gefunden, der war nicht vom Script!

MfG

[KLVN]

@acidsubway said in [Gelöst] Helios KWL - Zugriff auf xml:

Hab den Fehler gefunden, der war nicht vom Script!

MfG

Danke für die Rückmeldung

[elmocito]

@klvn
Richtig starkes Script.
Ich hab auch eine Helios und habe aktuell nur Homebridge und Loxone bei mir im Einsatz.
Da die Loxone Lösung, die es zur Helios gibt nicht zufriedenstellend war, überlege ich eine ioBroker Instanz hochzuziehen.
Frage: Hast du zufällig den Handshake zwischen ioBroker und Homebridge gemacht? Das wäre mega.

[KLVN]

@elmocito sagte in [Gelöst] Helios KWL - Zugriff auf xml:

Frage: Hast du zufällig den Handshake zwischen ioBroker und Homebridge gemacht? Das wäre mega.

Moin, mit Homebridge hatte und habe ich überhaupt keinen Kontakt, sorry.

Und danke für den Stern bei GitHub

[moehre]

@klvn

Ich hatte das Projekt jetzt laaange liegen lassen, hauptsächlich, da meine Helios den Geist aufgegeben hat. Jetzt schaue ich mal wieder rein und bin beeindruckt, wie du das umgesetzt hast! Vielen Dank, auch, dass du so umfangreich dokumentierst und Hilfestellung lieferst!

[KLVN]

@moehre sagte in [Gelöst] Helios KWL - Zugriff auf xml:

@klvn

Ich hatte das Projekt jetzt laaange liegen lassen, hauptsächlich, da meine Helios den Geist aufgegeben hat. Jetzt schaue ich mal wieder rein und bin beeindruckt, wie du das umgesetzt hast! Vielen Dank, auch, dass du so umfangreich dokumentierst und Hilfestellung lieferst!

Ich muss mich aber auch bei dir bedanken, für deine Pionierarbeit, schließlich hast du den Stein ins Rollen gebracht

[moehre]

Ich bastele gerade daran, weitere xmls auszulesen. Sieht so aus. Es sind 2 console.logs mit reingekommen, damit ich folgendem Problem irgendwie auf die Schliche komme...

// Refresh values
setInterval(function () {
  // Load and refresh values from different XML-files (default: page 4 and page 8. Can be extended from 1 to 17 to obtain everything)
  const xmlPages = [1, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14, 15, 16, 17];
  xmlPages.forEach(function (page, index) {
    request(createHeader(helios_ip, "data/werte" + page + ".xml", "xml=/data/werte" + page + ".xml"), function (error, response, result) {
      console.log(createHeader(helios_ip, "data/werte" + page + ".xml", "xml=/data/werte" + page + ".xml"))
      refreshValues(result);
      console.log(result);
      });
  });
}, refresh_interval * 1000);

Das klappt bis zu 12 xmls auch super, alle weiteren werfen Fehler. Folglich bekomme ich diesen Fehler 4x:

javascript.0	2021-04-13 01:01:57.423	error	(549) Request error: Error: connect ECONNRESET [hier steht die IP der Helios samt Port]
javascript.0	2021-04-13 01:01:57.423	error	(549) Error in request callback: TypeError: Cannot read property 'matchAll' of undefined

Laut log sieht der request gut aus, die URLs werden korrekt erstellt, die xmls existieren.
Es ist egal, welche page rausgenommen wird, jede Änderung der pages wird die Fehleranzahl verändern.

Verdacht: refreshValues wird ausgeführt, bevor eine Rückmeldung vom Webserver kommt.
Ich habe daher versucht, den request asynchron auszuführen - ohne Erfolg. Auch eine Verzögerung um x ms hat nichts gebracht.

Woran könnte der Fehler liegen?

P.S. Lösungsansatz, ohne das Problem wirklich zu verstehen: Man könnte request und refreshValues trennen. Sodass der request die übertragenen Werte als JSON wegschreibt. Der refreshValues würde dann nur noch bereits vorhandene Variablen hübsch machen. Damit wären Rückmeldung und Verarbeitung unabhängig voneinander. Und Fehler in der Aktualisierung der Daten ließen sich vorzeitig erkennen.

P.P.S. Über Sinn und Unsinn, wirklich ALLE Pages auszulesen, kann man sicher streiten

VG

[KLVN]

@moehre sagte in [Gelöst] Helios KWL - Zugriff auf xml:

refreshValues wird ausgeführt, bevor eine Rückmeldung vom Webserver kommt.

Das kann eigentlich nicht sein, weil request() diejenige Funktion ist, die nach eigener Beendigung refreshValues() aufruft und result überliefert.

Ich habe bei mir auch gerade alle XML-Seiten von 1 bis 17 durchprobiert, anfangs immer nur in Gruppen von ca. 6 Seiten, damit mein Log nicht zugemüllt wird und da gab es keine Fehler. Dann habe ich mir nochmal deine Fehlermeldung angesehen und "ECONNRESET" bedeutet, dass die Helios-Anlage die Verbindung getrennt hat. Dann habe ich nochmal dein Array an XML-Seiten genommen (also alle 16 auf einmal) und dann auch Fehlermeldungen bekommen. Meine Vermutung ist jetzt, dass die Helios-Anlage nicht zu viele Anfragen in sehr kurzer Zeit beantworten will und deshalb teilweise abbricht. Bei mir waren es auch nicht immer dieselben Seiten, bei denen abgebrochen wurde, sondern jedes Mal komplett unterschiedlich.

@moehre sagte in [Gelöst] Helios KWL - Zugriff auf xml:

Auch eine Verzögerung um x ms hat nichts gebracht.

Wo und wie hast du diese Verzögerung eingebaut? Wenn man xmlPages.forEach() langsamer laufen lässt, sollte es eigentlich gehen, habe es jetzt aber auch nicht getestet. Leider gibt es auch keine einzelne XML-Seite, auf der alle Werte auf einmal sind.

[moehre]

@klvn sagte in [Gelöst] Helios KWL - Zugriff auf xml:

Wo und wie hast du diese Verzögerung eingebaut? Wenn man xmlPages.forEach() langsamer laufen lässt, sollte es eigentlich gehen, habe es jetzt aber auch nicht getestet. Leider gibt es auch keine einzelne XML-Seite, auf der alle Werte auf einmal sind.

Da ich mit dem async keinen Erfolg hatte, habe ich es auf die schmutzige Tour versucht:

// Sleep function to delay requests
function sleep(milliseconds) {
    const date = Date.now();
    let currentDate = null;
    do {
        currentDate = Date.now();
    }   while (currentDate - date < milliseconds);
}

sleep() dann an verschiedenen Stellen innerhalb des request eingefügt. Habs mit Zeiten zwischen 50ms und 1000ms probiert. Allerdings bricht auch hier ab Werten von 500ms die Verbindung zur Helios ab. Nicht mit dem ECONNRESET. Hab den Fehler gerade nicht parat...
Ein sleep ist nicht besonders elegant, hätte aber den Zweck erfüllen müssen. Im Log sehe ich auch, dass die Anfragen mit der entsprechenden Verzögerung rausgehen - aber trotzdem die ersten 4 requests mit ECONNRESET abbrechen.

[hartwigm]

Vielen Dank für das Script.

Ich konnte so alle relevanten Daten auslesen.

Nun stellt sich aber die Frage nach der Regelung und wäre dankbar für eure Tipps und Erfahrungen.

Zum System.

Ich habe eine Helios 500 für 6 Räume einbauen lassen. In den Räume habe ich Steinel Multisensoren auf KNX, deren Werte ich für die Steuerung gerne nutzen würde.
Die Steinel liefern Temperatur, Feuchte, CO2 und VOC.

Dabei würde ich aus den Räumen jeweils den schlechtesten Co2 Wert an die Helios übergeben und damit der Helios die Steuerung überlasen.
Ebenso würde ich dies mit dem Temperaturen gerne machen.

Hier fehlt mir aber noch der Plan wie ich die Werte übergeben kann.

Geht das so? Bzw. wie macht ihr das?

[KLVN]

@hartwigm sagte in [Gelöst] Helios KWL - Zugriff auf xml:

Ich habe eine Helios 500 für 6 Räume einbauen lassen. In den Räume habe ich Steinel Multisensoren auf KNX, deren Werte ich für die Steuerung gerne nutzen würde.
Die Steinel liefern Temperatur, Feuchte, CO2 und VOC.

Weißt du bzw. hast du diese Werte schon im ioBroker?

Dabei würde ich aus den Räumen jeweils den schlechtesten Co2 Wert an die Helios übergeben und damit der Helios die Steuerung überlasen.
Ebenso würde ich dies mit dem Temperaturen gerne machen.

Hier fehlt mir aber noch der Plan wie ich die Werte übergeben kann.

Geht das so? Bzw. wie macht ihr das?

Ich würde die Werte der Sensoren der Reihe nach abfragen, in ein Array schreiben (z.B. sensorsTemps = [19.2, 21.1, 18.6, 22]) und mir daraus das Minimum nehmen.

Beispiel-/Pseudo-Code:

var sensorsTemps = [];

sensorsTemps[0] = getTemperature("Wohnzimmer"); // oder wie du sonst an die Werte kommst
sensorsTemps[1] = getTemperature("Zimmer 1");
// ...

sensorsTemps = [19.2, 21.1, 18.6, 22]; // Beispiel-Daten
var lowestTemp = Math.min.apply(Math, sensorsTemps);

if (lowestTemp < x) {
  setState(datapoint_prefix + "." + datapoint_names["w00102"], 2); // aus dem Helios Skript, um "Luefterstufe_SOLL" auf Stufe 2 zu setzen
}

und das alles in ein Schedule/setInterval, was dann alle x Minuten die Werte abfragt und die Bedingung prüft. Für meine Badezimmer-Lüftung prüfe ich alle 3 Minuten: https://github.com/KLVN/ioBroker_Helios-KWL/blob/e844b070ebc09a1d7ebe41d01cf53c5efa11ca15/additionalScripts/bathroomVentilation.js#L21

[hartwigm]

@klvn Danke

Ich hatte hier auch schon ein am Freitag ein Telefonat mit dem Helios Support.

Es geht nicht, dass die Werte von externen Sensoren an die Helios übergeben werden kann.
Daher habe ich es, wie von dir beschrieben nun realisiert.

Meine Logik habe ich dabei aber nicht im iobroker, sondern in Edomi. Die Systeme kommunizieren über mqtt.

Dabei ist mir noch ein kleiner Fehler beim schreiben auf die Betriebsart oder Stufe aufgefallen.

Wenn ich die Zielwerte per mqtt gesendet hab, sind diese auch unter Objekte eingetragen worden, allerdings nur sehr sporadisch ausgeführt worden. Stabil hat dies sofort funktioniert nachdem ich die Variabenart von gemischt auf Zahl umgestellt habe.

Dies scheint aber nur relevant zu sein, wenn der Wert per mqtt gesetzt wird.

Vielen Dank für das sehr hilfreiche Script

Hartwig

[Reliktdragon 0]

Hallo.

Danke für dieses tolle Script.
Ich hätte da aber noch eine frage.

Das Skript funktioniert bei mir, ich kan die Helios auch steuern.

Nur im Log kommen diese ganzen fehler wenn das Skript läuft:

Ist das normal oder habe ich was vergessen zu ändern?

Edit: Hab das Script auf einer neuen Javascript Instanz laufen lassen, jetzt funktioniert es plötzlich.

Grüße

[knudos]

@klvn Gibt es eine Möglichkeit die Helios KWL in Hoobs einzubinden?

[Ritschy2000]

@klvn kannst du mir noch einen Tip geben, wie ich:

Bypass Raum/Temp. = v01035 (aus der gaer.htm) beschreiben und auslesen kann?

Darüber lässt sich relativ simple der Bypass "steuern".

Habe bei deinem Script schon verschiede Dinge hinzugefügt, aber irgendwie
funktioniert es bei der Funktion nicht, ich bekomme den Wert nicht mal ausgelesen.
Liegt es eventuell daran, dass der Wert in einem Untermenü steckt?
Aber du setzt ja über dein Script auch den Filterwechsel zurück, welcher sich auf der gleichen
Seite befindet.

Bin für jede Hilfe dankbar.

[KLVN]

@ritschy2000 Moin, weil das Register v01035 aus der Datei werte12.xml ausgelesen wird (siehe Bild), musst du in dieser Zeile noch eine 12 ins Array hinzufügen, damit auch diese Seite abgefragt wird.

Und oben bei const datapoint_names brauchst du dann noch ein "v01035": "Temperatur_Bypass". So konnte ich schon den Wert auslesen; eine neue Temperatur setzen habe ich nicht ausprobiert, sollte aber mit setValues("gaer", "v01035=xx); funktionieren.

[Timmerx]

Hallo Leute,

das Skript ist wirklich super, damit kann ich meine Siemens S7 extrem entlasten.

Kleines Manko ist, dass ich es nicht schaffe den Filterwechsel zurück zustellen.
Ich hätte in meiner VIS gerne einen Button, um die Resttage zurück zusetzten.

Hier das Skript inkl. Resttageabfrage, Bypass öffnen/Schließen, Interne Feuchte.

/*
ioBroker-Helios-KWL
IMPORTANT: This script requires at least Node.js v12.x!
https://github.com/KLVN/ioBroker_Helios-KWL
*/

// SETTINGS ////////////////////////////////////////////////////////////////

const helios_ip = "192.168.178.20";    // IP of Helios KWL
const helios_password = "12345678";     // Password of Helios KWL (default)
const datapoint_prefix = "HeliosKWL";   // Prefix for datapoints, e.g. HeliosKWL.Temperatur_Zuluft
const refresh_interval = 10;            // Refresh every x seconds

const datapoint_names = {
  "w00090": "Partybetrieb_SOLL",        // on/off;duration;speed
  "v00101": "Betriebsart_IST",          // Operating mode (manual = 1, automatic = 0)
  "w00101": "Betriebsart_SOLL",         // Custom variable for operating mode (manual = 1, automatic = 0)
  "v00102": "Luefterstufe_IST",         // Fan speed
  "w00102": "Luefterstufe_SOLL",        // Custom variable for fan speed
  "v00104": "Temperatur_Aussenluft",    // Temperature outdoor air sensor
  "v00105": "Temperatur_Zuluft",        // Temperature supply air sensor
  "v00106": "Temperatur_Fortluft",      // Temperature exhaust air sensor
  "v00107": "Temperatur_Abluft",         // Temperature extract air sensor
  "v01033": "Restlaufzeit in Tagen",             // FILTERWECHSEL
  "v01035": "Temperatur_Bypass_Raum-Ablufttemperatur",
  "v01036": "Temperatur_Bypass_Min_Außenlufttemperatur",
  "v00348": "Drehzahl Zuluft (rpm)",
  "v00349": "Abluftzahl Zuluft (rpm)",
  "v01103": "ZuluftVENTI_Gesamt_h",
  "v01104": "AbluftVENTI_Gesamt_h",
  "v02136": "Feuchte",
  "v02119": "Bypass_AUF/ZU"            // 0= ZU    1= AUF
  // "Register": "Name for the datapoint" (I'm using "vxxxxx" for actual registers and "wxxxxx" for custom datapoints)
}

////////////////////////////////////////////////////////////////////////////

// Not necessary; already defined in ioBroker
// var request= require('request');

// Returns a matching header for login and XML-files
function createHeader(ip, url, body) {
  var header = {
    headers: {
      "Accept": "*/*",
      "Accept-Encoding": "gzip, deflate",
      "Accept-Language": "de,en-US;q=0.7,en;q=0.3",
      "Connection": "keep-alive",
      "Content-Length": "15",
      "Content-Type": "text/plain;charset=UTF-8",
      "DNT": "1",
      "Referer": "http://" + ip + "/",
      "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.193 Safari/537.36",
      "Host": ip
    },
    url: "http://" + ip + "/" + url,
    body: body,
    method: "POST"
  }
  return header
}

// Create states from parameter names
for (let param in datapoint_names) {
  // Different defaults for different datapoints
  if (param == "w00090") {
    createState(datapoint_prefix + "." + datapoint_names[param], "0;10;4");
  } else if (param == "w00101") {
    createState(datapoint_prefix + "." + datapoint_names[param], 0);
  } else {
    // No default given
    createState(datapoint_prefix + "." + datapoint_names[param]);
  }
}

// Login every 5 minutes
setInterval(function () {
  request(createHeader(helios_ip, "info.htm", "v00402=" + helios_password));
}, 300000);

// Refresh values
setInterval(function () {
  // Load and refresh values from different XML-files (default: page 4 and page 8. Can be extended from 1 to 17 to obtain everything)
  const xmlPages = [4, 8, 11, 12];
  xmlPages.forEach(function (page, index) {
    request(createHeader(helios_ip, "data/werte" + page + ".xml", "xml=/data/werte" + page + ".xml"), function (error, response, result) {
      refreshValues(result);
    });
  });
}, refresh_interval * 1000);

// Read XML response, extract IDs and values, refresh states with new values
function refreshValues(xml) {
  const regex = /<ID>(?<ID>v\d{5})<\/ID>\s*?<VA>(?<VALUE>.*?)<\/VA>/gm;
  var elements = xml.matchAll(regex);

  for (let element of elements) {
    let { ID, VALUE } = element.groups;
    let NAME = datapoint_names[ID];

    // Only refresh values that we have names for
    if (NAME != undefined) {
      setState(datapoint_prefix + "." + NAME, VALUE);
    }
  }
}

// Takes an URL-path and multiple registers with values to set values and change settings
function setValues(path, values) {
  var args = arguments;
  var arrayValues = [];
  for (var i = 1; i < args.length; i++) {
    arrayValues.push(args[i]);
  }
  request(createHeader(helios_ip, path + ".htm", arrayValues.join("&")));
}

// Set fan speed
function setFanSpeed(speed) {
  // Check if wanted fan speed is a reasonable value
  if ([0, 1, 2, 3, 4].indexOf(speed) >= 0) {
    setValues("info", "v00102=" + speed);
  } else {
    setFanSpeed(0);
  }
}
// If specified fan speed was changed, then set fan speed accordingly
on({ id: "javascript.0." + datapoint_prefix + "." + datapoint_names["w00102"], change: "any" }, async function (obj) {
  var value = obj.state.val;
  setFanSpeed(value);
});

// Set party mode using following scheme:
// onOff;duration;speed, e.g.
// "1;10;4" = turn on party mode for 10 minutes and set fan speed to 4
// "2;10;4" = invalid
// "0;10;4" = turn off party mode
function setPartyMode(onOff, duration, speed) {
  // Only allow reasonable values
  if (([0, 1].indexOf(onOff) >= 0) && (duration > 0) && (duration <= 180) && ([0, 1, 2, 3, 4].indexOf(speed) >= 0)) {
    setValues("party", "v00094=" + onOff, "v00091=" + duration, "v00092=" + speed);
  }
}
// If specified party mode was changed, then mode accordingly
on({ id: "javascript.0." + datapoint_prefix + "." + datapoint_names["w00090"], change: "any" }, async function (obj) {
  var value = obj.state.val;
  var values = value.split(";");
  setPartyMode(parseInt(values[0], 10), parseInt(values[1], 10), parseInt(values[2], 10));
});

// Set operating mode
function setOperatingMode(onOff) {
  // Only allow reasonable values
  if ([0, 1].indexOf(onOff) >= 0) {
    setValues("info", "v00101=" + onOff);
  }
}
// If specified party mode was changed, then mode accordingly
on({ id: "javascript.0." + datapoint_prefix + "." + datapoint_names["w00101"], change: "any" }, async function (obj) {
  var value = obj.state.val;
  setOperatingMode(value);
});




createState("setBypass_AUF", function () {
});
on({id: 's7.0.Markers.1014.Helios_Sommerbypass', val: true}, function (obj) {
  var value = obj.state.val;
  var oldValue = obj.oldState.val;
  setValues("gear", "v01036=20");

});

createState("setBypass_ZU", function () {
});
on({id: 's7.0.Markers.1014.Helios_Sommerbypass', val: false}, function (obj) {
  var value = obj.state.val;
  var oldValue = obj.oldState.val;
  setValues("gear", "v01036=30");

});



// ADDITIONAL SCRIPTS (see github.com/KLVN/ioBroker_Helios-KWL) ////////////

// ...insert additional scripts here

[KLVN]

@timmerx sagte in [Gelöst] Helios KWL - Zugriff auf xml:

Hallo Leute,

das Skript ist wirklich super, damit kann ich meine Siemens S7 extrem entlasten.

Freut mich, dass es funktioniert und du es auch gleich noch erweitert hast

Kleines Manko ist, dass ich es nicht schaffe den Filterwechsel zurück zustellen.
Ich hätte in meiner VIS gerne einen Button, um die Resttage zurück zusetzten.

Funktioniert das Code-Stück von GitHub nicht? Da brauchst du nicht mal einen Button, sondern es wird automatisch immer zurückgesetzt. Ich habe jetzt seit fast einem Jahr meine Helios nicht mehr angefasst (den Filter sollte ich aber wohl wirklich mal wechseln )

// Reset change interval of filter every month
schedule("0 5 1 * *", function () {
  setValues("gear", "v01034=1");
});

Das Register zum Zurücksetzen findest du im Quellcode vom "Restlaufzeit neu starten"-Button. Vielleicht ist das bei dir anders (?)

VIS benutze ich nicht allzu sehr, deshalb fällt mir da jetzt nur diese dreckige Lösung ein:

• neuer Datenpunkt (Bool, false), z.B. resetHelios
• In VIS dann einen Button, der diesen Datenpunkt auf true setzen kann
• In deinem Skript dann auf eine Veränderungen von resetHelios warten, dann den Code zum resetten ausführen und danach den Datenpunkt wieder auf false setzen

[tombox]

@klvn Würde es nicht sinn machen ein Adapter aus dem Script zu machen?

[Timmerx]

Hi,

das Github Codestück // Reset change interval of filter every month schedule("0 5 1 * *", function () { setValues("gear", "v01034=1"); });

habe ich so nicht getestet, sonderen
schedule("0 5 1 * *", ..... direkt versucht mit einem Butten zu ersetzen.

Eine monatliche zurücksetzen halte ich nicht für sinnvoll, da ich die Filter wechseln will (schon weil die Anlage mit der Zeit immer lauter wird mit alten / vollen Filtern)

Und weil ich auch nicht mehr auf die Helios Weboberfläche will, wäre ein solcher Button wirklich toll

Ich werde mich heute vormittag nochmal hinsetzen und bissel rum probieren.

Grüße