[Vorlage] Heizölpreisabfrage über esyoil.com

Atifan

Hi, ich bekomme im Log eine Fehlermeldung die wegen Script3 passiert. Weiß einer warum und wie man das fixen kann?

Skript3 Code

/* Ölpreis abfragen
Auf diese Anfrage hin: http://forum.iobroker.net/viewtopic.php?f=8&t=3455
am 4.11.2016 getestet, nach Änderung der Webseite nun Fehler
Quelle: heizoel24.de
Basis: solar-wetter Skript
{1}
erstellt: 03.08.2016 von pix
12.11.2016 Webseite liefert nicht mehr Prognose, sondern Ist-Preis. Skript angepasst
29.08.2017 SKRIPT AUSGESCHALTET, DA NICHT IN GEBRAUCH
{2}
Angepasst am 14.07.2019 von Oliver Böhm, verwendet für "Heizölpreis für Wohnort abfragen"
Dieses Script wird automatisch ausgeführt, sobald sich etwas in den Bestelldaten ändert, und alle 59 Minuten.
Quelle:  www.esyoil.com
*/
 
var logging = false;
 
// ab hier nix mehr ändern, solange die Webseite die Daten nicht ändert
on({id:"javascript.0.Heizoel.Bestelldaten.Weblink", change: 'any'}, function (obj) {
   var request = require('request');
   var price;
   var priceLB;
   var MwStG;
   var MwStL;
   var zuschlag;
   var zuschlagLN;
   var Liefermenge = getState('javascript.0.Heizoel.Bestelldaten.Liefermenge').val;
   var link = getState('javascript.0.Heizoel.Bestelldaten.Weblink').val;
   var idPriceGB     =   'Heizoel.Heizölpreis.Wohnort.Gesamt.Bruttopreis Gesamt',
       idPriceLB     =   'Heizoel.Heizölpreis.Wohnort.Je 100L.Bruttopreis 100l',
       idMwStL       =   'Heizoel.Heizölpreis.Wohnort.Je 100L.MwSt 100l',
       idMwStG       =   'Heizoel.Heizölpreis.Wohnort.Gesamt.MwSt Gesamt',
       idZuschlagN   =   'Heizoel.Heizölpreis.Wohnort.Je 100L.Nettozuschlag 100l',
       idZuschlagGN  =   'Heizoel.Heizölpreis.Wohnort.Gesamt.Nettozuschlag Gesamt',
       idPriceLN     =   'Heizoel.Heizölpreis.Wohnort.Je 100L.Nettopreis 100l',
       idPriceGN     =   'Heizoel.Heizölpreis.Wohnort.Gesamt.Nettopreis Gesamt',
       idLieferant   =   'Heizoel.Lieferant.Name',
       idWebseite    =   'Heizoel.Lieferant.Webseite',      
       idDate        =   'Heizoel.Datum';
  
   function extractText(body,text1,text2) {
       var start = body.indexOf(text1) + text1.length;
       var ende = body.indexOf(text2,start);
       if (logging) log('Startposition: ' + start);
       if (logging) log('Endposition: ' + ende);
       var zwischenspeicher;
       if (((start != -1) && (ende != -1)) && (start<ende)) {                                                       // Fehler abfangen
           zwischenspeicher = body.slice(start,ende);
           zwischenspeicher = zwischenspeicher.trim();
           if (logging) log(zwischenspeicher);
               return(zwischenspeicher);
       } else {
           zwischenspeicher = 'Fehler beim Ausschneiden';
           log(zwischenspeicher, 'error');
           return(0);
       }
   }
   
   function findPrice (body) {
       var text1 = 'Gesamtbetrag (brutto)',                                                               
       text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>';                                                                          
       price = extractText(body,text1,text2);
       let arrayFruits = price;
       var price_array = price.split('€');
       price = price_array[0];
       var price_array = price.split('<div class="col-4 order-1 ta_r  lh_n "  >');
       price = price_array[1]
       price = price.replace(/"/g,"");   
       price = price.replace(/\n|\r/g, "");
       price = price.replace(/\n/g, ""); 
       var price_array = price.split('.');
       price = price_array[0] + price_array[1];     
       price_array = price.split(',');
       price = price_array[0] + '.' + price_array[1];  
       price = parseFloat(price);
       priceLB = price / Liefermenge * 100;
       priceLB = priceLB.toFixed(2);   
       priceLB = parseFloat(priceLB);      
       MwStG = price / 119 * 19;
       MwStG = MwStG.toFixed(2);
       MwStG = parseFloat(MwStG);
       MwStL = priceLB / 119 * 19;
       MwStL = MwStL.toFixed(2);
       MwStL = parseFloat(MwStL);
       if (logging) log('Heizöl Preis: ' + price + ' EUR');   
       setState(idPriceLB, parseFloat(priceLB,10));
       setState(idPriceGB, parseFloat(price,10));
       setState(idMwStG, parseFloat(MwStG,10));                                                                                    
       setState(idMwStL, parseFloat(MwStL,10));                                                                                 
   }
 
   function findLieferant (body) {
       var text1 = ' <strong class="d_b">Informationen zum Anbieter:</strong>',		                    
           text2 = '<div class="card-deck">';                                                                     
       var lieferant = extractText(body,text1,text2);   
       var lieferant_array = lieferant.split('</div>');
       lieferant = lieferant_array[0]   
       lieferant = lieferant.replace(/<div class="hy_a">/g," ");
       lieferant = lieferant.replace(/&nbsp;/g," ");
       lieferant = lieferant.replace(/"/g,"");   
       lieferant = lieferant.replace(/\n|\r/g, "");
       lieferant = lieferant.replace(/\n/g, "");   
       setState(idLieferant, lieferant);                                                                            
   }
 
   function findWebseite (body) {
       var text1 = '<a href="https://www.esyoil.com/heizoel-haendler/',		                            
           text2 = '" title="Zum Händler-Profil" class="d_b">';                                                                     
       var web = extractText(body,text1,text2);
       web = web.replace(/" "/g,"");
       web = web.replace(/">/g,"");
       web = web.replace(/<img/g,"");   
       web = web.replace('"><imgclass="lazyprovider-logo"',"");
       web = 'https://www.esyoil.com/heizoel-haendler/' + web;    
 
       setState(idWebseite, web);                                                                                   // Wert in Objekt schreiben
   }  
 
   function findDate (body) {   
       var text1 = '<span class="mr_s">Aktuelle Heizölpreise</span><small class="d_ib c_dark_30 fw_n"> ',                            
           text2 = ' Uhr</small>';                                                                          
       var time = extractText(body,text1,text2);
       var time_array = time.split('von');
       time = time_array[1]; 
       var datum = new Date();
       var heute = datum.getDate() + "." + (datum.getMonth()+1) + "." + datum.getFullYear() + ", " + time ;
       if (logging) log('Heizöl Datum: ' + heute);   
       setState(idDate, heute);                                                                                     // Wert in Objekt schreiben
   }
 
   function findZuschlagLN (body) {
       var text1 = '<p class="text-success fw_b fs_l ph_n">Günstigster Preis</p>',                               
           text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; 
       var zuschlag = extractText(body,text1,text2);
       let arrayZuschlag = zuschlag;
       let suche = 'Lieferaufschlag';
       // indexOf() return the index of an element in the array, or -1 if it's not in the array.
       if (arrayZuschlag.indexOf(suche) > -1) {
           var text1 = 'zzgl. Lieferaufschlag (GGVS, ADR u.a.)',                            
           text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; 
           var zuschlag = extractText(body,text1,text2);             
           var zuschlag_array = zuschlag.split('€');
           zuschlag = zuschlag_array[0]
           var zuschlag_array = zuschlag.split('<div class="col-4 order-1 ta_r  lh_n "  >');
           zuschlag = zuschlag_array[1]
           zuschlag = zuschlag.replace(/"/g,"");   
           zuschlag = zuschlag.replace(/\n|\r/g, "");
           zuschlag = zuschlag.replace(/\n/g, "");  
           zuschlag = zuschlag.replace("+", "");
           var zuschlag_array = zuschlag.split(',');
           var zuschlagLN = zuschlag_array[0] + '.' + zuschlag_array[1];   
           zuschlagLN = parseFloat(zuschlagLN);   
           setState(idZuschlagN, parseFloat(zuschlagLN,10));
           var priceLN = priceLB - MwStL - zuschlagLN;
           priceLN = parseFloat(priceLN);
           priceLN = priceLN.toFixed(2);   
           setState(idPriceLN, parseFloat(priceLN,10));      
       } else {
           setState(idZuschlagN, 0);
           var priceLN = priceLB - MwStL;
           priceLN = parseFloat(priceLN);
           priceLN = priceLN.toFixed(2);   
           setState(idPriceLN, parseFloat(priceLN,10));  
       }
   }   
 
   function findZuschlagG (body) {
       var text1 = '<p class="text-success fw_b fs_l ph_n">Günstigster Preis</p>',                               
           text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>'; 
       var zuschlag = extractText(body,text1,text2);
       let arrayZuschlag = zuschlag;
       let suche = 'Lieferaufschlag';
       // indexOf() return the index of an element in the array, or -1 if it's not in the array.
       if (arrayZuschlag.indexOf(suche) > -1) {
           var text1 = 'Gesamtbetrag (netto)',                            
               text2 = '<strong class="d_b">Informationen zum Anbieter:</strong>';          
           var zuschlagG = extractText(body,text1,text2);
           var zuschlagG_array = zuschlagG.split('zzgl. Lieferaufschlag (GGVS, ADR u.a.)');
           zuschlagG = zuschlagG_array[1] 
           var zuschlagG_array = zuschlagG.split('€');
           zuschlagG = zuschlagG_array[0]
           var zuschlagG_array = zuschlagG.split('<div class="col-4 order-1 ta_r  lh_n "  >');
           zuschlagG = zuschlagG_array[1]
           zuschlagG = zuschlagG.replace(/"/g,"");   
           zuschlagG = zuschlagG.replace(/\n|\r/g, "");
           zuschlagG = zuschlagG.replace(/\n/g, "");  
           zuschlagG = zuschlagG.replace("+", "");
           var zuschlag_array = zuschlagG.split(',');
           zuschlagG = zuschlag_array[0] + '.' + zuschlag_array[1];
           zuschlagG = parseFloat(zuschlagG);   
           var priceGN = price - MwStG - zuschlagG;   
           priceGN = parseFloat(priceGN);
           priceGN = priceGN.toFixed(2);          
           setState(idZuschlagGN, parseFloat(zuschlagG,10));                                                                                   
           setState(idPriceGN, parseFloat(priceGN,10));        
       } else {
           var priceGN = price - MwStG;   
           priceGN = parseFloat(priceGN);
           priceGN = priceGN.toFixed(2);          
           setState(idZuschlagGN, 0);                                                                                   
           setState(idPriceGN, parseFloat(priceGN,10));   
       }                                                                                        
   }
 
   function leseWebseite () {
       try {
           request(link, function (error, response, body) {
               if (!error && response.statusCode == 200) {                                                          // kein Fehler, Inhalt in body
                   findPrice (body);               
                   findLieferant (body);
                   findWebseite (body);
                   findDate (body);
                   findZuschlagLN (body);               
                   findZuschlagG (body);               
                   log('Heizöl-Preis von esyoil.com eingelesen');
               } else log(error,'error');                                                                           // Error beim Einlesen
           });
       } catch (e) {
           log('Fehler (try) leseWebseite: ' + e, 'error');
       }   
   }
 
   // bei Skriptstart
   leseWebseite();
 
   // Schedule
   schedule("59 * * * *", leseWebseite);    
});

Laureyel

Hallo.

Ich wollte die Vorlage heute ebenfalls einbinden.
Leider werden in den Objekten lediglich die Allgemeinen Informationen übernommen.

Wohnort und Lieferant sind auf "null" bzw. ohne Werte.

Kann mir jemand eventuell dabei helfen?
Installiert ist 3.1.6.
Die Skripte laufen auch ohne Fehlermeldung. Wenn ich den erzeugten Link nehme lande ich auch bei den korrekten Informationen auf der Website.

Vielen Dank und Grüße

Patrick

Holger Etzel

Hallo,

habe gerade festgestellt das das Skript5 und das Skript 2 Fehler liefert.

script.js.Heizöl.Skript_5: null
und beim Betätigen des Abfrage-Buttons
script.js.Heizöl.Skript_2: null

Die Skripte liefen Wochenlang ohne Fehler

Hat jemand eine Idee?

Holger Etzel

Funktioniert komischerweise wieder

bug77

funktioniert die abfrage nicht mehr?

bug77

hab die scripte neu reingeladen, tut

bug77

ich bekomme seit neuestem diese fehler und das script läuft damit nicht mehr.
kann mir jemand helfen?

	(25493) Error in request callback: TypeError: body.split is not a function

25493) script.js.Heizung.Heizöl_Script5: Fehler beim Ausschneiden

25493) Error in request callback: TypeError: price.split is not a function

	(25493) script.js.Heizung.Heizöl_Script3: Fehler beim Ausschneiden

@bug77 @Oli Hi, den Fehler hab ich auch, schon ne Idee?

könnte das mit den Änderungen im js-controller oder javascript zu tun haben?
body.split warum gibts das nicht mehr..?

Oli

Hi @ilovegym , @bug77,

es liegt daran, dass die Webseite wieder mal geändert wurde. Aus Zeitmangel komme ich leider momentan nicht dazu mir das anzuschauen.

Da esyoil in regelmäßigen Abständen seine Webseite ändert, bin ich auf der Suche nach einer zuverlässigeren Lösung.
Vorschläge nehme ich gerne an.
Bis dahin werde ich aus Zeitgründen, dass Projekt erst mal auf Eis legen.

Sorry, aber es geht momentan leider nicht anders

@oli

Hi Oli,
ich habe gestern abend mal n bisschen getestet, und bin zum gleichen Ergebnis gekommen, nachdem ich mir die Webseite nach ein paar Wochen wieder angesehen habe.. schöner Mist..

Bei Heizöl24 ist das auch nicht besser.. hmm ich recherchiere mal weiter.. vielleicht kann ich ja was parsen...

Wenn ich was gefunden habe, das funktioniert, stelle ich es hier rein.

tombox

@oli
Ich denke ihr solltet direkt an die json url gehen um die daten zu kommen
Entweder ihr baut das in das skript oder nutzt den parser adapter

Ich kann aber auch schnell ein Adapter erstellen wenn jemand wirklich die ölpreise brauch

Für esyoil in die Adapter settings würde ich folgendes aufnehmen
amount: 3000
deliveryTimes: "normal"
hose: "fortyMetre"
payment_type: "ec"
prod: "normal"
short_vehicle: "withTrailer"
unloading_points: 1
zipcode: "91154"

im adapter würde dann folgendes angezeigt

  "pricing": {
        "common": {
          "isDeliveryChargeIncluded": true,
          "isDeliveryChargeActive": true,
          "deliveryChargeName": "GGVS",
          "deliveryChargePrice": 49.5
        },
        "_100L": {
          "netto": 57.24,
          "deliveryCharge": 1.65,
          "vatMonetary": 10.88,
          "brutto": 68.12
        },
        "total": {
          "netto": 1717.2,
          "deliveryCharge": 49.5,
          "vatMonetary": 326.27,
          "brutto": 2043.47
        },
        "bestPriceDiff": 0
      },
      "delivery": {
        "date": "2021-09-10T09:00:43.516Z",
        "durationDays": 25,
        "type": "normal"
      },
      "dealer": {
        "id": "6061c6b474d9a20016dcb1dd",
        "daId": "6061c6cb74d9a20016dcb1de",
        "legacyId": -1,
        "name": "COM-OIL Energie + Service GmbH",
        "shortName": "COM-OIL Energie",
        "logoPath": "/partner/609a7e7a92d9bf609c3adfb0/logo/logo-288.jpg",
        "slug": "com-oil-energie-service-gmbh-nuernberg-l3LHkxCIQ",
        "rating": {
          "averageRating": 3.8,
          "countRating": 5,
          "averageRatingLastYear": 3.8,
          "countRatingLastYear": 5
        },
        "isRal": false,
        "isTkwCheck": true,
        "isTestDealer": false
      }
    },

Atifan

@tombox ein Adapter dafür wäre ein Traum. Ich schaue regelmäßig den Ölpreis und hab den auch bei mir im Dashboard. Gerade jetzt ist wieder die Zeit wo es ans Auffüllen geht und wo der Preis interessant ist

@tombox Ein Adapter wäre wohl für alle einfach super!

Wichtig wäre Preis ( pro L, oder pro 100L ), Händler mit Adresse und Tel.
Einstellbar im Adapter dann die Liefermenge ( auch als Variable über Datenpunkt, so kann ich mir die Kosten für 1500, 2000 und 3000 L anzeigen lassen),
Die Zahlart, Zapfstelle , PLZ und Ölsorte ändert man selten..

Oli

@tombox
Ein Adapter wäre natürlich genial. Allerdings kenne ich mich mit der Entwicklung eines Adapters überhaupt nicht aus.

Vielen Dank für deine Unterstützung.

Beowolf

@tombox sagte in [Vorlage] Heizölpreisabfrage über esyoil.com:

Ich kann aber auch schnell ein Adapter erstellen wenn jemand wirklich die ölpreise brauch

Schnell einen Adapter erstellen - und ich sitzt an einem kleinen Blockly zwei Tage bis es läuft.

Das wäre wirklich sehr nett.

Grüße

tombox

@beowolf @ilovegym
Ich bin soweit fertig ist nur die frage heizoel24 mit rein oder sind das eh immer die gleichen preise.

Atifan

@tombox Cool bin schon sehr gespannt Ich denke die Preise sollten eigentlich überall gleich sein. Die meisten Webseiten zeigen nach der Eingabe die gleichen Anbieter an. Möglicherweise gibt es leichte Abweichungen aber denke wenn das so wäre ist das auch irrelevant. Wichtig ist dass man die aktuelle Preisentwicklung immer im Blick hat.

tombox

@atifan
Ok dann war es einfach und er ist fertig bitte mal testen
https://forum.iobroker.net/topic/46855/test-adapter-heizöl-v1-0-0

Kusselin

Hallo Zusammen,

ich habe mir den Adapter auch mal installiert soweit...meine Frage...

Brauche ich dann noch die 5 Scripte dazu ? wobei der Script 5 eine Fehlermeldung rausgibt.

Gruss

Oli

@kusselin
Nein, die brauchst du nicht mehr.

NEWS

[Vorlage] Heizölpreisabfrage über esyoil.com

Support us

476
Online

31.9k
Users

80.1k
Topics

1.3m
Posts

NEWS

[Vorlage] Heizölpreisabfrage über esyoil.com

Support us

476Online

31.9kUsers

80.1kTopics

1.3mPosts

476
Online

31.9k
Users

80.1k
Topics

1.3m
Posts