[Vorlage] Heizölpreisabfrage über esyoil.com

Atifan

Hi,
also ich scheine irgendwas falsch zu machen.
Ich habe die 5 Scripte aus dem ersten Thread bei mir im IoBroker laufen.
Beim ersten Starten werden auch die ganzen Datenpunkte angelegt und Werte eingelesen.
Aber irgendwie aktualisiert sich der Wert nicht mehr.
Ich logge im IoBroker den folgenden Wert in eine InfluxDB und lasse ihn mir über Grafana anzeigen:
javascript.0.Heizoel.Heizölpreis.Wohnort.Je 100L.Bruttopreis 100l
Aber der Wert ändert sich nicht mehr nachdem er erstellt wurde.
Mache ich was falsch?

Atifan

Ah habe glaub die Lösung gefunden.
Habe mir ein Script erstellt welches jede Stunde den Weblink unter "javascript.0.Heizoel.Bestelldaten.Weblink" liest, in eine Variable schreibt und nochmal in den Datenpunkt schreibt. Somit werden die anderen Scripte gestartet und der Preis aktualisiert.
Ich denke mal so sollte es funktionieren

Oli

@Hallo zusammen,

sorry war lange nicht mehr hier. Ich hoffe es funktioniert bei euch noch alles?

@maloross
benötigst du noch Hilfe, oder hat sich dein Anliegen erledigt?

@Glasfaser, @Beowolf ,
easyoil ändert leider ständig die Darstellung der Grafiken, für andere Lösungsansätze wäre ich sehr dankbar.

@Atifan
eigentlich sollten sich die Preise für den Wohnort ebenfalls jede Stunde aktualisieren. Muss ich mal testen, danke für den Hinweis.

Wer sonst noch Anregungen, oder Verbesserungen hat, immer her damit

Atifan

@Oli Also bei mir updatet sich da der Preis vom Wohnort nicht automatisch, erst nachdem ich den Datenpunkt mit dem Link aktualisiere, dann klappt es.

Atifan

Hi, ich bekomme im Log eine Fehlermeldung die wegen Script3 passiert. Weiß einer warum und wie man das fixen kann?

Skript3 Code

/* Ölpreis abfragen
Auf diese Anfrage hin: http://forum.iobroker.net/viewtopic.php?f=8&t=3455
am 4.11.2016 getestet, nach Änderung der Webseite nun Fehler
Quelle: heizoel24.de
Basis: solar-wetter Skript
{1}
erstellt: 03.08.2016 von pix
12.11.2016 Webseite liefert nicht mehr Prognose, sondern Ist-Preis. Skript angepasst
29.08.2017 SKRIPT AUSGESCHALTET, DA NICHT IN GEBRAUCH
{2}
Angepasst am 14.07.2019 von Oliver Böhm, verwendet für "Heizölpreis für Wohnort abfragen"
Dieses Script wird automatisch ausgeführt, sobald sich etwas in den Bestelldaten ändert, und alle 59 Minuten.
Quelle:  www.esyoil.com
*/
 
var logging = false;
 
// ab hier nix mehr ändern, solange die Webseite die Daten nicht ändert
on({id:"javascript.0.Heizoel.Bestelldaten.Weblink", change: 'any'}, function (obj) {
   var request = require('request');
   var price;
   var priceLB;
   var MwStG;
   var MwStL;
   var zuschlag;
   var zuschlagLN;
   var Liefermenge = getState('javascript.0.Heizoel.Bestelldaten.Liefermenge').val;
   var link = getState('javascript.0.Heizoel.Bestelldaten.Weblink').val;
   var idPriceGB     =   'Heizoel.Heizölpreis.Wohnort.Gesamt.Bruttopreis Gesamt',
       idPriceLB     =   'Heizoel.Heizölpreis.Wohnort.Je 100L.Bruttopreis 100l',
       idMwStL       =   'Heizoel.Heizölpreis.Wohnort.Je 100L.MwSt 100l',
       idMwStG       =   'Heizoel.Heizölpreis.Wohnort.Gesamt.MwSt Gesamt',
       idZuschlagN   =   'Heizoel.Heizölpreis.Wohnort.Je 100L.Nettozuschlag 100l',
       idZuschlagGN  =   'Heizoel.Heizölpreis.Wohnort.Gesamt.Nettozuschlag Gesamt',
       idPriceLN     =   'Heizoel.Heizölpreis.Wohnort.Je 100L.Nettopreis 100l',
       idPriceGN     =   'Heizoel.Heizölpreis.Wohnort.Gesamt.Nettopreis Gesamt',
       idLieferant   =   'Heizoel.Lieferant.Name',
       idWebseite    =   'Heizoel.Lieferant.Webseite',      
       idDate        =   'Heizoel.Datum';
  
   function extractText(body,text1,text2) {
       var start = body.indexOf(text1) + text1.length;
       var ende = body.indexOf(text2,start);
       if (logging) log('Startposition: ' + start);
       if (logging) log('Endposition: ' + ende);
       var zwischenspeicher;
       if (((start != -1) && (ende != -1)) && (start<ende)) {                                                       // Fehler abfangen
           zwischenspeicher = body.slice(start,ende);
           zwischenspeicher = zwischenspeicher.trim();
           if (logging) log(zwischenspeicher);
               return(zwischenspeicher);
       } else {
           zwischenspeicher = 'Fehler beim Ausschneiden';
           log(zwischenspeicher, 'error');
           return(0);
       }
   }
   
   function findPrice (body) {
       var text1 = 'Gesamtbetrag (brutto)',                                                               
       text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>';                                                                          
       price = extractText(body,text1,text2);
       let arrayFruits = price;
       var price_array = price.split('€');
       price = price_array[0];
       var price_array = price.split('<div class="col-4 order-1 ta_r  lh_n "  >');
       price = price_array[1]
       price = price.replace(/"/g,"");   
       price = price.replace(/\n|\r/g, "");
       price = price.replace(/\n/g, ""); 
       var price_array = price.split('.');
       price = price_array[0] + price_array[1];     
       price_array = price.split(',');
       price = price_array[0] + '.' + price_array[1];  
       price = parseFloat(price);
       priceLB = price / Liefermenge * 100;
       priceLB = priceLB.toFixed(2);   
       priceLB = parseFloat(priceLB);      
       MwStG = price / 119 * 19;
       MwStG = MwStG.toFixed(2);
       MwStG = parseFloat(MwStG);
       MwStL = priceLB / 119 * 19;
       MwStL = MwStL.toFixed(2);
       MwStL = parseFloat(MwStL);
       if (logging) log('Heizöl Preis: ' + price + ' EUR');   
       setState(idPriceLB, parseFloat(priceLB,10));
       setState(idPriceGB, parseFloat(price,10));
       setState(idMwStG, parseFloat(MwStG,10));                                                                                    
       setState(idMwStL, parseFloat(MwStL,10));                                                                                 
   }
 
   function findLieferant (body) {
       var text1 = ' <strong class="d_b">Informationen zum Anbieter:</strong>',		                    
           text2 = '<div class="card-deck">';                                                                     
       var lieferant = extractText(body,text1,text2);   
       var lieferant_array = lieferant.split('</div>');
       lieferant = lieferant_array[0]   
       lieferant = lieferant.replace(/<div class="hy_a">/g," ");
       lieferant = lieferant.replace(/&nbsp;/g," ");
       lieferant = lieferant.replace(/"/g,"");   
       lieferant = lieferant.replace(/\n|\r/g, "");
       lieferant = lieferant.replace(/\n/g, "");   
       setState(idLieferant, lieferant);                                                                            
   }
 
   function findWebseite (body) {
       var text1 = '<a href="https://www.esyoil.com/heizoel-haendler/',		                            
           text2 = '" title="Zum Händler-Profil" class="d_b">';                                                                     
       var web = extractText(body,text1,text2);
       web = web.replace(/" "/g,"");
       web = web.replace(/">/g,"");
       web = web.replace(/<img/g,"");   
       web = web.replace('"><imgclass="lazyprovider-logo"',"");
       web = 'https://www.esyoil.com/heizoel-haendler/' + web;    
 
       setState(idWebseite, web);                                                                                   // Wert in Objekt schreiben
   }  
 
   function findDate (body) {   
       var text1 = '<span class="mr_s">Aktuelle Heizölpreise</span><small class="d_ib c_dark_30 fw_n"> ',                            
           text2 = ' Uhr</small>';                                                                          
       var time = extractText(body,text1,text2);
       var time_array = time.split('von');
       time = time_array[1]; 
       var datum = new Date();
       var heute = datum.getDate() + "." + (datum.getMonth()+1) + "." + datum.getFullYear() + ", " + time ;
       if (logging) log('Heizöl Datum: ' + heute);   
       setState(idDate, heute);                                                                                     // Wert in Objekt schreiben
   }
 
   function findZuschlagLN (body) {
       var text1 = '<p class="text-success fw_b fs_l ph_n">Günstigster Preis</p>',                               
           text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; 
       var zuschlag = extractText(body,text1,text2);
       let arrayZuschlag = zuschlag;
       let suche = 'Lieferaufschlag';
       // indexOf() return the index of an element in the array, or -1 if it's not in the array.
       if (arrayZuschlag.indexOf(suche) > -1) {
           var text1 = 'zzgl. Lieferaufschlag (GGVS, ADR u.a.)',                            
           text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; 
           var zuschlag = extractText(body,text1,text2);             
           var zuschlag_array = zuschlag.split('€');
           zuschlag = zuschlag_array[0]
           var zuschlag_array = zuschlag.split('<div class="col-4 order-1 ta_r  lh_n "  >');
           zuschlag = zuschlag_array[1]
           zuschlag = zuschlag.replace(/"/g,"");   
           zuschlag = zuschlag.replace(/\n|\r/g, "");
           zuschlag = zuschlag.replace(/\n/g, "");  
           zuschlag = zuschlag.replace("+", "");
           var zuschlag_array = zuschlag.split(',');
           var zuschlagLN = zuschlag_array[0] + '.' + zuschlag_array[1];   
           zuschlagLN = parseFloat(zuschlagLN);   
           setState(idZuschlagN, parseFloat(zuschlagLN,10));
           var priceLN = priceLB - MwStL - zuschlagLN;
           priceLN = parseFloat(priceLN);
           priceLN = priceLN.toFixed(2);   
           setState(idPriceLN, parseFloat(priceLN,10));      
       } else {
           setState(idZuschlagN, 0);
           var priceLN = priceLB - MwStL;
           priceLN = parseFloat(priceLN);
           priceLN = priceLN.toFixed(2);   
           setState(idPriceLN, parseFloat(priceLN,10));  
       }
   }   
 
   function findZuschlagG (body) {
       var text1 = '<p class="text-success fw_b fs_l ph_n">Günstigster Preis</p>',                               
           text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; 
       var zuschlag = extractText(body,text1,text2);
       let arrayZuschlag = zuschlag;
       let suche = 'Lieferaufschlag';
       // indexOf() return the index of an element in the array, or -1 if it's not in the array.
       if (arrayZuschlag.indexOf(suche) > -1) {
           var text1 = 'Gesamtbetrag (netto)',                            
               text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>';          
           var zuschlagG = extractText(body,text1,text2);
           var zuschlagG_array = zuschlagG.split('zzgl. Lieferaufschlag (GGVS, ADR u.a.)');
           zuschlagG = zuschlagG_array[1] 
           var zuschlagG_array = zuschlagG.split('€');
           zuschlagG = zuschlagG_array[0]
           var zuschlagG_array = zuschlagG.split('<div class="col-4 order-1 ta_r  lh_n "  >');
           zuschlagG = zuschlagG_array[1]
           zuschlagG = zuschlagG.replace(/"/g,"");   
           zuschlagG = zuschlagG.replace(/\n|\r/g, "");
           zuschlagG = zuschlagG.replace(/\n/g, "");  
           zuschlagG = zuschlagG.replace("+", "");
           var zuschlag_array = zuschlagG.split(',');
           zuschlagG = zuschlag_array[0] + '.' + zuschlag_array[1];
           zuschlagG = parseFloat(zuschlagG);   
           var priceGN = price - MwStG - zuschlagG;   
           priceGN = parseFloat(priceGN);
           priceGN = priceGN.toFixed(2);          
           setState(idZuschlagGN, parseFloat(zuschlagG,10));                                                                                   
           setState(idPriceGN, parseFloat(priceGN,10));        
       } else {
           var priceGN = price - MwStG;   
           priceGN = parseFloat(priceGN);
           priceGN = priceGN.toFixed(2);          
           setState(idZuschlagGN, 0);                                                                                   
           setState(idPriceGN, parseFloat(priceGN,10));   
       }                                                                                        
   }
 
   function leseWebseite () {
       try {
           request(link, function (error, response, body) {
               if (!error && response.statusCode == 200) {                                                          // kein Fehler, Inhalt in body
                   findPrice (body);               
                   findLieferant (body);
                   findWebseite (body);
                   findDate (body);
                   findZuschlagLN (body);               
                   findZuschlagG (body);               
                   log('Heizöl-Preis von esyoil.com eingelesen');
               } else log(error,'error');                                                                           // Error beim Einlesen
           });
       } catch (e) {
           log('Fehler (try) leseWebseite: ' + e, 'error');
       }   
   }
 
   // bei Skriptstart
   leseWebseite();
 
   // Schedule
   schedule("59 * * * *", leseWebseite);    
});

Laureyel

Hallo.

Ich wollte die Vorlage heute ebenfalls einbinden.
Leider werden in den Objekten lediglich die Allgemeinen Informationen übernommen.

Wohnort und Lieferant sind auf "null" bzw. ohne Werte.

Kann mir jemand eventuell dabei helfen?
Installiert ist 3.1.6.
Die Skripte laufen auch ohne Fehlermeldung. Wenn ich den erzeugten Link nehme lande ich auch bei den korrekten Informationen auf der Website.

Vielen Dank und Grüße

Patrick

Holger Etzel

Hallo,

habe gerade festgestellt das das Skript5 und das Skript 2 Fehler liefert.

script.js.Heizöl.Skript_5: null
und beim Betätigen des Abfrage-Buttons
script.js.Heizöl.Skript_2: null

Die Skripte liefen Wochenlang ohne Fehler

Hat jemand eine Idee?

Holger Etzel

Funktioniert komischerweise wieder

bug77

funktioniert die abfrage nicht mehr?

bug77

hab die scripte neu reingeladen, tut

bug77

ich bekomme seit neuestem diese fehler und das script läuft damit nicht mehr.
kann mir jemand helfen?

	(25493) Error in request callback: TypeError: body.split is not a function

25493) script.js.Heizung.Heizöl_Script5: Fehler beim Ausschneiden

25493) Error in request callback: TypeError: price.split is not a function

	(25493) script.js.Heizung.Heizöl_Script3: Fehler beim Ausschneiden

ilovegym

@bug77 @Oli Hi, den Fehler hab ich auch, schon ne Idee?

könnte das mit den Änderungen im js-controller oder javascript zu tun haben?
body.split warum gibts das nicht mehr..?

Oli

Hi @ilovegym , @bug77,

es liegt daran, dass die Webseite wieder mal geändert wurde. Aus Zeitmangel komme ich leider momentan nicht dazu mir das anzuschauen.

Da esyoil in regelmäßigen Abständen seine Webseite ändert, bin ich auf der Suche nach einer zuverlässigeren Lösung.
Vorschläge nehme ich gerne an.
Bis dahin werde ich aus Zeitgründen, dass Projekt erst mal auf Eis legen.

Sorry, aber es geht momentan leider nicht anders

ilovegym

@oli

Hi Oli,
ich habe gestern abend mal n bisschen getestet, und bin zum gleichen Ergebnis gekommen, nachdem ich mir die Webseite nach ein paar Wochen wieder angesehen habe.. schöner Mist..

Bei Heizöl24 ist das auch nicht besser.. hmm ich recherchiere mal weiter.. vielleicht kann ich ja was parsen...

Wenn ich was gefunden habe, das funktioniert, stelle ich es hier rein.

tombox

@oli
Ich denke ihr solltet direkt an die json url gehen um die daten zu kommen
Entweder ihr baut das in das skript oder nutzt den parser adapter

Ich kann aber auch schnell ein Adapter erstellen wenn jemand wirklich die ölpreise brauch

Für esyoil in die Adapter settings würde ich folgendes aufnehmen
amount: 3000
deliveryTimes: "normal"
hose: "fortyMetre"
payment_type: "ec"
prod: "normal"
short_vehicle: "withTrailer"
unloading_points: 1
zipcode: "91154"

im adapter würde dann folgendes angezeigt

  "pricing": {
        "common": {
          "isDeliveryChargeIncluded": true,
          "isDeliveryChargeActive": true,
          "deliveryChargeName": "GGVS",
          "deliveryChargePrice": 49.5
        },
        "_100L": {
          "netto": 57.24,
          "deliveryCharge": 1.65,
          "vatMonetary": 10.88,
          "brutto": 68.12
        },
        "total": {
          "netto": 1717.2,
          "deliveryCharge": 49.5,
          "vatMonetary": 326.27,
          "brutto": 2043.47
        },
        "bestPriceDiff": 0
      },
      "delivery": {
        "date": "2021-09-10T09:00:43.516Z",
        "durationDays": 25,
        "type": "normal"
      },
      "dealer": {
        "id": "6061c6b474d9a20016dcb1dd",
        "daId": "6061c6cb74d9a20016dcb1de",
        "legacyId": -1,
        "name": "COM-OIL Energie + Service GmbH",
        "shortName": "COM-OIL Energie",
        "logoPath": "/partner/609a7e7a92d9bf609c3adfb0/logo/logo-288.jpg",
        "slug": "com-oil-energie-service-gmbh-nuernberg-l3LHkxCIQ",
        "rating": {
          "averageRating": 3.8,
          "countRating": 5,
          "averageRatingLastYear": 3.8,
          "countRatingLastYear": 5
        },
        "isRal": false,
        "isTkwCheck": true,
        "isTestDealer": false
      }
    },

Atifan

@tombox ein Adapter dafür wäre ein Traum. Ich schaue regelmäßig den Ölpreis und hab den auch bei mir im Dashboard. Gerade jetzt ist wieder die Zeit wo es ans Auffüllen geht und wo der Preis interessant ist

ilovegym

@tombox Ein Adapter wäre wohl für alle einfach super!

Wichtig wäre Preis ( pro L, oder pro 100L ), Händler mit Adresse und Tel.
Einstellbar im Adapter dann die Liefermenge ( auch als Variable über Datenpunkt, so kann ich mir die Kosten für 1500, 2000 und 3000 L anzeigen lassen),
Die Zahlart, Zapfstelle , PLZ und Ölsorte ändert man selten..

Oli

@tombox
Ein Adapter wäre natürlich genial. Allerdings kenne ich mich mit der Entwicklung eines Adapters überhaupt nicht aus.

Vielen Dank für deine Unterstützung.

Beowolf

@tombox sagte in [Vorlage] Heizölpreisabfrage über esyoil.com:

Ich kann aber auch schnell ein Adapter erstellen wenn jemand wirklich die ölpreise brauch

Schnell einen Adapter erstellen - und ich sitzt an einem kleinen Blockly zwei Tage bis es läuft.

Das wäre wirklich sehr nett.

Grüße

tombox

@beowolf @ilovegym
Ich bin soweit fertig ist nur die frage heizoel24 mit rein oder sind das eh immer die gleichen preise.

NEWS

[Vorlage] Heizölpreisabfrage über esyoil.com

Support us

860
Online

30.2k
Users

76.3k
Topics

1.2m
Posts

NEWS

[Vorlage] Heizölpreisabfrage über esyoil.com

Support us

860Online

30.2kUsers

76.3kTopics

1.2mPosts

860
Online

30.2k
Users

76.3k
Topics

1.2m
Posts