NEWS
[Vorlage] Heizölpreisabfrage über esyoil.com
-
Hallo zusammen,
anbei meine Visualisierung und Scripts zur Heizölpreisabfrage über esyoil.com
Bild meiner Vis:
Vis zum importieren:
Heizölview.txtHier die nötigen Scripts:
Script 1: Erstellt alle nötigen States, sowie die Grunddaten für die Bestellung, bitte einmal Grunddaten wie PLZ, Liefermenge usw. anpassen und manuell ausführen.
Script 2: Wird ausgeführt, sobald in der Vis sich in den Bestelldaten etwas ändert und der Abfragebutton betätigt wird. Es wird ein angepasster Link für die Preisabfrage erstellt.
Script 3: Wird jede Stunde ausgeführt, oder wenn sich etwas an den Bestelldaten ändert. Hier findet die eigentliche Preisabfrage für den Wohnort statt.Script 4: Wird ausgeführt, sobald sich nach einer Preisabfrage der günstigste Anbieter ändert. Hier werden die Daten des Anbieters abgefragt.
Script 5: Wird jede Stunde ausgeführt. Hier wird der allgemeine Ölpreis und die Differenz zum Vortag abgefragt.
Verbesserungen der Scripte, Fehlermeldungen und Anregungen nehme ich gerne entgegen.
Edit:
26.08.2019 - Scripte wurden angepasst.
16.09.2019 - Änderungen auf der Webseite, Script 3 wurde angepasst, Script 4 liefert zur Zeit nur den Namen des günstigsten Anbieters.
01.11.2019 - Script 3 wurde die Webseite des Lieferanten angepasst, somit funktioniert Script 4 auch wieder.
24.11.2019 - Script 3 wurde geändert, da es einen Fehler gab, wenn kein Lieferzuschlag bezahlt werden muss.
24.11.2019 - Änderungen auf der Webseite, Script 5 wurde angepasst.
19.12.2019 - Alle Scripte neu eingestellt, Abfrage über Button sollte funktionieren.11.08.2021 - @tombox entwickelte freundlicherweise einen Adapter für die Heizölpreisabfrage, deshalb wird dieses Projekt eingestellt.
Vielen Dank dafür!!!!
Link zum Adapter: https://forum.iobroker.net/topic/46855/test-adapter-heizöl-v1-0-0 -
Hallo
habe die 5 Scripte am laufen. In Objekte sehe ich die erstellten Ordner.
Ich bekomme keine Preise für meinen Wohnort, Allgemeine Preise mit Tendenz schon.Habe keinerlei Fehlermeldungen im Log, alle Scripte laufen.
Script 2 wird auch ausgeführt, wenn ich eine Abfrage starte.
Woran kann es liegen, muss ja nichts ändern in den Scripten, ausser Wohnort ect.
-
@Hosifox bin zur Zeit im Urlaub, komme erst am Montag dazu mir das genauer anzusehen
-
Alles klar, schönen Urlaub noch.
-
der Anbieter hat den Aufbau der Webseite geändert, Script 3 wurde angepasst, bei Script 4 wird momentan nur der Name des günstigsten Anbieters angezeigt, ändere ich, sobald ich Zeit finde.
Gruß Oliver
-
Läuft wieder, vielen Dank.
-
Hallo,
ich bin gerade über die Heizöl Scripte gestolpert und habe sie direkt ausprobiert.Ich erhalte im Script 3 folgende Fehlermeldung beim Speichern:
13:55:47.236 error javascript.0 (1392) script.js.common.test_oelpreis3: TypeError: Cannot read property 'split' of undefined 13:55:47.236 error javascript.0 (1392) at findZuschlagG (script.js.common.test_oelpreis3:160:35) 13:55:47.236 error javascript.0 (1392) at Request._callback (script.js.common.test_oelpreis3:189:15)
Im Script 5 habe ich den "Fehler beim Ausschneiden im Log" und noch eine Anmerkung: der Ausgelesene Wert für den allgemeinen Preis ist nicht für das Heizöl sondern für das Rohöl "Brent". Das wird auch wiederrum in $ und nicht in € angegeben. Hat sich hier die Webseite verändert oder ist das ein generelles Problem mit dem aktuellen Preis?
javascript.0 2019-11-07 13:47:01.269 info (1392) script.js.common.test_oelpreis5: Heizöl-Preis von esyoil.com eingelesen javascript.0 2019-11-07 13:47:01.269 info (1392) script.js.common.test_oelpreis5: Heizöl Prozent: 0.37% javascript.0 2019-11-07 13:47:01.269 info (1392) script.js.common.test_oelpreis5: -0,37 javascript.0 2019-11-07 13:47:01.269 info (1392) script.js.common.test_oelpreis5: Endposition: 77777 javascript.0 2019-11-07 13:47:01.268 info (1392) script.js.common.test_oelpreis5: Startposition: 77771 javascript.0 2019-11-07 13:47:01.268 info (1392) script.js.common.test_oelpreis5: Heizöl Preis: 62.48 EUR javascript.0 2019-11-07 13:47:01.267 info (1392) script.js.common.test_oelpreis5: 62,48 $ </td> <td class=""> 61,74 $ </td> <td class=""> <span class=" text-danger">+1,20 %</span> </td> </tr> <tr> <td class="pl-n"> <a hre javascript.0 2019-11-07 13:47:01.267 info (1392) script.js.common.test_oelpreis5: Endposition: 76500 javascript.0 2019-11-07 13:47:01.265 info (1392) script.js.common.test_oelpreis5: Startposition: 75923 javascript.0 2019-11-07 13:47:01.265 error (1392) script.js.common.test_oelpreis5: Fehler beim Ausschneiden javascript.0 2019-11-07 13:47:01.265 info (1392) script.js.common.test_oelpreis5: Endposition: -1 javascript.0 2019-11-07 13:47:01.265 info (1392) script.js.common.test_oelpreis5: Startposition: 77651 javascript.0 2019-11-07 13:47:01.058 info (1392) script.js.common.test_oelpreis5: registered 0 subscriptions and 1 schedule
Ansonsten finde ich das super, vorallem mit der dazugehörigen VIS!
Top! -
muss ich schauen, bin aber zur Zeit nicht zu Hause am Rechner, wird wahrscheinlich frühestens nächste Woche was.
-
@Oli keine Eile, ist mir nur so aufgefallen als neuer Skriptuser
-
schau mal bitte, wenn du Zeit hast, ob du einen Lieferzuschlag bezahlen müsstest bei einer Bestellung.
-
das mit dem falschen Preis kann ich nicht nachvollziehen.
-
@Oli
Guten Morgen, vielleicht hängt es mit den erwähnten Scriptfehlern von oben zusammen. Ich habe gerade nochmal geschaut, der Allgemeine Preis ist der falsche (Sorte Brent und aus $ wurde €): -
sorry, ich kann beide Fehler nicht nachstellen, bei mir läuft das Script ohne Probleme.
Du kannst mir ja mal deine PLZ mitteilen, gerne auch per PN, vielleicht, kann ich den Fehler nachstellen.
-
@Oli unter den Datenpunkten "Wohnort" stimmen alle Angaben mit der Webseite überein. Aber es gibt ja noch die Datenpunkte unter "Allgemein" und die dortige Angabe stimmt nicht, egal was ich für eine PLZ verwende. Der allgemeine Heizölpreis sollte sich ja nicht
ändern wenn ich die PLZ ändere. -
@micklafisch
Die PLZ wollte ich eigentlich für deinen ersten Fehler, hast du am Script etwas geändert? -
@Oli
Nein, die Scripte sind unverändert per C&P eingefügt. Die PLZ lautet 97845. -
@micklafisch said in [Vorlage] Heizölpreisabfrage über esyoil.com:
97845
also, den ersten Fehler hab ich schon gefunden, du zahlst keinen Lieferzuschlag, deshalb der Fehler, muss ich mir anschauen, wie ich den Fehler abfangen kann.
-
teste mal das Script, ob es funktioniert und gib mir Rückmeldung
/* Ölpreis abfragen Auf diese Anfrage hin: http://forum.iobroker.net/viewtopic.php?f=8&t=3455 am 4.11.2016 getestet, nach Änderung der Webseite nun Fehler Quelle: heizoel24.de Basis: solar-wetter Skript {1} erstellt: 03.08.2016 von pix 12.11.2016 Webseite liefert nicht mehr Prognose, sondern Ist-Preis. Skript angepasst 29.08.2017 SKRIPT AUSGESCHALTET, DA NICHT IN GEBRAUCH {2} Angepasst am 14.07.2019 von Oliver Böhm, verwendet für "Heizölpreis für Wohnort abfragen" Dieses Script wird automatisch ausgeführt, sobald sich etwas in den Bestelldaten ändert, und alle 59 Minuten. Quelle: www.esyoil.com */ var logging = false; // ab hier nix mehr ändern, solange die Webseite die Daten nicht ändert var request = require('request'); var price; var priceLB; var MwStG; var MwStL; var zuschlag; var zuschlagLN; var Liefermenge = getState('javascript.0.Heizoel.Bestelldaten.Liefermenge').val; var link = getState('javascript.0.Heizoel.Bestelldaten.Weblink').val; var idPriceGB = 'Heizoel.Heizölpreis.Wohnort.Gesamt.Bruttopreis Gesamt', idPriceLB = 'Heizoel.Heizölpreis.Wohnort.Je 100L.Bruttopreis 100l', idMwStL = 'Heizoel.Heizölpreis.Wohnort.Je 100L.MwSt 100l', idMwStG = 'Heizoel.Heizölpreis.Wohnort.Gesamt.MwSt Gesamt', idZuschlagN = 'Heizoel.Heizölpreis.Wohnort.Je 100L.Nettozuschlag 100l', idZuschlagGN = 'Heizoel.Heizölpreis.Wohnort.Gesamt.Nettozuschlag Gesamt', idPriceLN = 'Heizoel.Heizölpreis.Wohnort.Je 100L.Nettopreis 100l', idPriceGN = 'Heizoel.Heizölpreis.Wohnort.Gesamt.Nettopreis Gesamt', idLieferant = 'Heizoel.Lieferant.Name', idWebseite = 'Heizoel.Lieferant.Webseite', idDate = 'Heizoel.Datum'; function extractText(body,text1,text2) { var start = body.indexOf(text1) + text1.length; var ende = body.indexOf(text2,start); if (logging) log('Startposition: ' + start); if (logging) log('Endposition: ' + ende); var zwischenspeicher; if (((start != -1) && (ende != -1)) && (start<ende)) { // Fehler abfangen zwischenspeicher = body.slice(start,ende); zwischenspeicher = zwischenspeicher.trim(); if (logging) log(zwischenspeicher); return(zwischenspeicher); } else { zwischenspeicher = 'Fehler beim Ausschneiden'; log(zwischenspeicher, 'error'); return(0); } } function findPrice (body) { var text1 = 'Gesamtbetrag (brutto)', text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; price = extractText(body,text1,text2); let arrayFruits = price; var price_array = price.split('€'); price = price_array[0]; var price_array = price.split('<div class="col-4 order-1 ta_r lh_n " >'); price = price_array[1] price = price.replace(/"/g,""); price = price.replace(/\n|\r/g, ""); price = price.replace(/\n/g, ""); var price_array = price.split('.'); price = price_array[0] + price_array[1]; price_array = price.split(','); price = price_array[0] + '.' + price_array[1]; price = parseFloat(price); priceLB = price / Liefermenge * 100; priceLB = priceLB.toFixed(2); priceLB = parseFloat(priceLB); MwStG = price / 119 * 19; MwStG = MwStG.toFixed(2); MwStG = parseFloat(MwStG); MwStL = priceLB / 119 * 19; MwStL = MwStL.toFixed(2); MwStL = parseFloat(MwStL); if (logging) log('Heizöl Preis: ' + price + ' EUR'); setState(idPriceLB, parseFloat(priceLB,10)); setState(idPriceGB, parseFloat(price,10)); setState(idMwStG, parseFloat(MwStG,10)); setState(idMwStL, parseFloat(MwStL,10)); } function findLieferant (body) { var text1 = ' <strong class="d_b">Informationen zum Anbieter:</strong>', text2 = '<div class="card-deck">'; var lieferant = extractText(body,text1,text2); var lieferant_array = lieferant.split('</div>'); lieferant = lieferant_array[0] lieferant = lieferant.replace(/<div class="hy_a">/g," "); lieferant = lieferant.replace(/ /g," "); lieferant = lieferant.replace(/"/g,""); lieferant = lieferant.replace(/\n|\r/g, ""); lieferant = lieferant.replace(/\n/g, ""); setState(idLieferant, lieferant); } function findWebseite (body) { var text1 = '<a href="https://www.esyoil.com/heizoel-haendler/', text2 = '" title="Zum Händler-Profil" class="d_b">'; var web = extractText(body,text1,text2); web = web.replace(/" "/g,""); web = web.replace(/">/g,""); web = web.replace(/<img/g,""); web = web.replace('"><imgclass="lazyprovider-logo"',""); web = 'https://www.esyoil.com/heizoel-haendler/' + web; setState(idWebseite, web); // Wert in Objekt schreiben } function findDate (body) { var text1 = '<span class="mr_s">Aktuelle Heizölpreise</span><small class="d_ib c_dark_30 fw_n"> ', text2 = ' Uhr</small>'; var time = extractText(body,text1,text2); var time_array = time.split('von'); time = time_array[1]; var datum = new Date(); var heute = datum.getDate() + "." + (datum.getMonth()+1) + "." + datum.getFullYear() + ", " + time ; if (logging) log('Heizöl Datum: ' + heute); setState(idDate, heute); // Wert in Objekt schreiben } function findZuschlagLN (body) { var text1 = '<p class="text-success fw_b fs_l ph_n">Günstigster Preis</p>', text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; var zuschlag = extractText(body,text1,text2); let arrayZuschlag = zuschlag; let suche = 'Lieferaufschlag'; // indexOf() return the index of an element in the array, or -1 if it's not in the array. if (arrayZuschlag.indexOf(suche) > -1) { var text1 = 'zzgl. Lieferaufschlag (GGVS, ADR u.a.)', text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; var zuschlag = extractText(body,text1,text2); var zuschlag_array = zuschlag.split('€'); zuschlag = zuschlag_array[0] var zuschlag_array = zuschlag.split('<div class="col-4 order-1 ta_r lh_n " >'); zuschlag = zuschlag_array[1] zuschlag = zuschlag.replace(/"/g,""); zuschlag = zuschlag.replace(/\n|\r/g, ""); zuschlag = zuschlag.replace(/\n/g, ""); zuschlag = zuschlag.replace("+", ""); var zuschlag_array = zuschlag.split(','); var zuschlagLN = zuschlag_array[0] + '.' + zuschlag_array[1]; zuschlagLN = parseFloat(zuschlagLN); setState(idZuschlagN, parseFloat(zuschlagLN,10)); var priceLN = priceLB - MwStL - zuschlagLN; priceLN = parseFloat(priceLN); priceLN = priceLN.toFixed(2); setState(idPriceLN, parseFloat(priceLN,10)); } else { setState(idZuschlagN, 0); var priceLN = priceLB - MwStL; priceLN = parseFloat(priceLN); priceLN = priceLN.toFixed(2); setState(idPriceLN, parseFloat(priceLN,10)); } } function findZuschlagG (body) { var text1 = '<p class="text-success fw_b fs_l ph_n">Günstigster Preis</p>', text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; var zuschlag = extractText(body,text1,text2); let arrayZuschlag = zuschlag; let suche = 'Lieferaufschlag'; // indexOf() return the index of an element in the array, or -1 if it's not in the array. if (arrayZuschlag.indexOf(suche) > -1) { var text1 = 'Gesamtbetrag (netto)', text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; var zuschlagG = extractText(body,text1,text2); var zuschlagG_array = zuschlagG.split('zzgl. Lieferaufschlag (GGVS, ADR u.a.)'); zuschlagG = zuschlagG_array[1] var zuschlagG_array = zuschlagG.split('€'); zuschlagG = zuschlagG_array[0] var zuschlagG_array = zuschlagG.split('<div class="col-4 order-1 ta_r lh_n " >'); zuschlagG = zuschlagG_array[1] zuschlagG = zuschlagG.replace(/"/g,""); zuschlagG = zuschlagG.replace(/\n|\r/g, ""); zuschlagG = zuschlagG.replace(/\n/g, ""); zuschlagG = zuschlagG.replace("+", ""); var zuschlag_array = zuschlagG.split(','); zuschlagG = zuschlag_array[0] + '.' + zuschlag_array[1]; zuschlagG = parseFloat(zuschlagG); var priceGN = price - MwStG - zuschlagG; priceGN = parseFloat(priceGN); priceGN = priceGN.toFixed(2); setState(idZuschlagGN, parseFloat(zuschlagG,10)); setState(idPriceGN, parseFloat(priceGN,10)); } else { var priceGN = price - MwStG; priceGN = parseFloat(priceGN); priceGN = priceGN.toFixed(2); setState(idZuschlagGN, 0); setState(idPriceGN, parseFloat(priceGN,10)); } } function leseWebseite () { try { request(link, function (error, response, body) { if (!error && response.statusCode == 200) { // kein Fehler, Inhalt in body findPrice (body); findLieferant (body); findWebseite (body); findDate (body); findZuschlagLN (body); findZuschlagG (body); log('Heizöl-Preis von esyoil.com eingelesen'); } else log(error,'error'); // Error beim Einlesen }); } catch (e) { log('Fehler (try) leseWebseite: ' + e, 'error'); } } // bei Skriptstart leseWebseite(); // Schedule schedule("59 * * * *", leseWebseite); on({id:"javascript.0.Heizoel.Bestelldaten.Weblink", change: 'any'}, function (obj) { leseWebseite(); }); on({id:"javascript.0.Heizoel.Skriptstart", change: 'any'}, function (obj) { if (getState("javascript.0.Heizoel.Skriptstart").val == true){ leseWebseite(); } }); on({id:"javascript.0.Heizoel.Bestelldaten.Lieferort", change: 'any'}, function (obj) { leseWebseite(); });
-
@Oli Guten Abend, das Script läuft nun ohne Fehler durch. Bleibt nur noch der fehlerhafte Allgemeine Heizölpreis. Der stimmt leider weiterhin nicht.
-
das freut mich, den Fehler mit dem allgemeinen Ölpreis kann ich leider bei mir nicht nachstellen, daher kann ich dir leider auch nicht sagen, woran das liegen könnte.
Lade doch das Script mach hoch, vielleicht hat es da irgendwas zerschossen.