Skip to content
  • Home
  • Aktuell
  • Tags
  • 0 Ungelesen 0
  • Kategorien
  • Unreplied
  • Beliebt
  • GitHub
  • Docu
  • Hilfe
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Standard: (Kein Skin)
  • Kein Skin
Einklappen
ioBroker Logo

Community Forum

donate donate
  1. ioBroker Community Home
  2. Deutsch
  3. Einsteigerfragen
  4. Parser / Regex

NEWS

  • UPDATE 31.10.: Amazon Alexa - ioBroker Skill läuft aus ?
    apollon77A
    apollon77
    48
    3
    8.5k

  • Monatsrückblick – September 2025
    BluefoxB
    Bluefox
    13
    1
    2.1k

  • Neues Video "KI im Smart Home" - ioBroker plus n8n
    BluefoxB
    Bluefox
    16
    1
    2.7k

Parser / Regex

Geplant Angeheftet Gesperrt Verschoben Einsteigerfragen
46 Beiträge 7 Kommentatoren 4.9k Aufrufe 5 Watching
  • Älteste zuerst
  • Neuste zuerst
  • Meiste Stimmen
Antworten
  • In einem neuen Thema antworten
Anmelden zum Antworten
Dieses Thema wurde gelöscht. Nur Nutzer mit entsprechenden Rechten können es sehen.
  • OliverIOO OliverIO

    @diamand2k22

    so, hier müsste es wieder funktionieren. das ist halt das risiko bei reverse engineerten Schnittstellen.
    Wenn der Anbieter irgendwas ändert, dann tut es nicht mehr.
    Hier hat er jetzt den Endpunkt geändert und verlangt noch, das der user-agent mit angegeben sein muss und wahrscheinlich, das das auch irgendein browser ist.
    d.h. der Anbieter hat bemerkt, das seine website von anderen tools als von browsern gelesen wird und hat mal dezente Gegenmaßnahmen ergriffen.

    Generell kann man jegliche Abfrage, die mit einem browser gemacht wird auch mit node nachbilden. allerdings gibt es auch gegenmaßnahmen, bei denen es dann so aufwändig wird, das man dann mit pupeteer oder einem ähnlichen browser simulationstool arbeitet (wobei bei pupeteer ja wirklich ein browser auch arbeitet), welches dann ordentlich ressourcen verbraucht.

    daher immer den Hinweis, die abfragerei bei solchen typen nicht überreitzen.
    alle 10 Minuten dürfte jetzt kein riesenproblem darstellen, der Anbieter kann aber durchaus pro nutzer herausfinden, wie oft pro tag abgerufen wird und wenn das gewisse limits überschreitet, er uU dann weitere Gegenmaßnahmen ergreift. dem anbieter kostet das nun auch reales geld, wenn er für seine kunden 1 server oder 10 server hinstellen muss, die die menge an abfragen bewältigt.
    So etwas gar minütlich abfragen und das dann einige leute machen, da kann man dann darauf warten, bis es nicht mehr tut (siehe finanz/börsen-kurse)

    // Definition Variablen
    const axios = require('axios').default;
    const url = "http://www.solarweb.com/PvSystems/GetWeatherWidgetDataForPublicDisplay?publicDisplayToken=";
    const displayToken = "xxxxx";
    const path = '0_userdata.0.Datenpunkte.PV_Anlage.Solarforecast.Solarweb.';
    const data_solarweb = path + 'JSON_Data_Solarweb';
    const datapoint_forecast_today = path + 'Forecast_Today';
    const datapoint_forecast_tomorrow = path + 'Forecast_Tomorrow';
    const datapoint_energy_remaining_today = path + 'Energy_remaining_today';
    const datapoint_current_energy_generated_today = path + 'Current_energy_generated_today';
     
     //Create Datenpunkte
    createState(path + 'JSON_Data_Solarweb', {type: 'json', name: 'JSON_Data', role: 'state'}); 
    createState(path + 'Forecast_Today', {name: 'Forecast_Today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
    createState(path + 'Forecast_Tomorrow', {name: 'Forecast_Tomorrow',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
    createState(path + 'Current_energy_generated_today', {name: 'Current_energy_generated_today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
    createState(path + 'Energy_remaining_today', {name: 'Energy_remaining_today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
     
    async function  getWebContent(url,displayToken) {
        try {
            log("Request solarweb data")
            const response = await axios.get(url+displayToken,{
                timeout:5000,
                headers:{
                    "User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Safari/537.36"
                }
            });           
            return response.data;
        } catch (error) {
            log(error,"error");
        }
    }
     
    async function main() {
        const content=await getWebContent(url,displayToken);
        const data=content.data;
        setState(data_solarweb, JSON.stringify(data), true);
    
        console.log(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Today").ExpectedEnergyYield.Value);
        setState(datapoint_forecast_today, parseFloat(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Today").ExpectedEnergyYield.Value), true);
        
        console.log(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Tomorrow").ExpectedEnergyYield.Value);
        setState(datapoint_forecast_tomorrow,parseFloat(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Tomorrow").ExpectedEnergyYield.Value), true);
        
        setState(datapoint_current_energy_generated_today, (getState("0_userdata.0.Datenpunkte.PV_Anlage.Solarweb.Current.01_Day.Energy.EnergyProductionTotal").val), true);
        setState(datapoint_energy_remaining_today, Math.min(Math.max(getState(datapoint_forecast_today).val - getState(datapoint_current_energy_generated_today).val, 0), 200), true); 
        
    }
    main();
     
    // jede Stunde 6 neu berechnen
    schedule("6,16,26,36,46,56 * * * *", async function () {
      await main();
    });
     
    
    

    da ich für meinen test die ganzen iobroker relevanten anweisungen kommentiert habe, habe ich das nicht getestet. nur den abruf der daten und herausfinden der forecasts.

    noch ein hinweis. der anbieter bietet explizit einen api zugang an, der bestellt werden muss
    https://www.fronius.com/de/solarweb-query-api/zugang-zur-api
    ob das was kostet kannst du ja mal fragen. evtl bekommt man da was offiziell geduldetes hin. weiß ja nicht wieviele leute das hier bei iobroker nutzen

    D Offline
    D Offline
    Diamand2k22
    schrieb am zuletzt editiert von Diamand2k22
    #41

    @oliverio

    vielen Dank Oliverio, jetzt funktioniert es wieder!
    ich habe bereist den kostenpflichtigen Pro Zugang im Einsatz, jedoch nutze ich dieses Script lieber wie den Fronius Solarweb Adapter! Der hat ca. 6000 Datenpunkte, nutze aber aktuell nur 3 Datenpunkte. Deswegen doch lieber das Skript, schont auch die Resourcen meinen Raspberry PI ;)

    Danke nochmal!

    OliverIOO 1 Antwort Letzte Antwort
    0
    • D Diamand2k22

      @oliverio

      vielen Dank Oliverio, jetzt funktioniert es wieder!
      ich habe bereist den kostenpflichtigen Pro Zugang im Einsatz, jedoch nutze ich dieses Script lieber wie den Fronius Solarweb Adapter! Der hat ca. 6000 Datenpunkte, nutze aber aktuell nur 3 Datenpunkte. Deswegen doch lieber das Skript, schont auch die Resourcen meinen Raspberry PI ;)

      Danke nochmal!

      OliverIOO Offline
      OliverIOO Offline
      OliverIO
      schrieb am zuletzt editiert von OliverIO
      #42

      @diamand2k22
      ja, aber gem. der beschreibung hast du dann offiziellen zugang zu einer api
      die dann wahrscheinlich auch stabil bleibt und nicht diese methode.

      ich denke die offizielle api wird nicht viel anders funktionieren. wahrscheinlich nur endpoint anpassen.
      frag mal nach wo man di dokumentation dazu findet, wenn du schon was mit premium nutzt

      Meine Adapter und Widgets
      TVProgram, SqueezeboxRPC, OpenLiga, RSSFeed, MyTime,, pi-hole2, vis-json-template, skiinfo, vis-mapwidgets, vis-2-widgets-rssfeed
      Links im Profil

      D 1 Antwort Letzte Antwort
      0
      • OliverIOO OliverIO

        @diamand2k22
        ja, aber gem. der beschreibung hast du dann offiziellen zugang zu einer api
        die dann wahrscheinlich auch stabil bleibt und nicht diese methode.

        ich denke die offizielle api wird nicht viel anders funktionieren. wahrscheinlich nur endpoint anpassen.
        frag mal nach wo man di dokumentation dazu findet, wenn du schon was mit premium nutzt

        D Offline
        D Offline
        Diamand2k22
        schrieb am zuletzt editiert von
        #43

        @oliverio

        ich mach mich mal schlau über die api und melde mich hier nochmal.
        soweit ich weiß schickt fronius die forecastwerte einzelwerte im 15 Min Takt über die Schnittstelle, aber das muss ich erst noch abklären.
        Evtl. könnte @Strobelix hier was dazu beitragen.

        Grüße

        OliverIOO 1 Antwort Letzte Antwort
        0
        • D Diamand2k22

          @oliverio

          ich mach mich mal schlau über die api und melde mich hier nochmal.
          soweit ich weiß schickt fronius die forecastwerte einzelwerte im 15 Min Takt über die Schnittstelle, aber das muss ich erst noch abklären.
          Evtl. könnte @Strobelix hier was dazu beitragen.

          Grüße

          OliverIOO Offline
          OliverIOO Offline
          OliverIO
          schrieb am zuletzt editiert von
          #44

          @diamand2k22

          frag nach der api dokumentation

          Meine Adapter und Widgets
          TVProgram, SqueezeboxRPC, OpenLiga, RSSFeed, MyTime,, pi-hole2, vis-json-template, skiinfo, vis-mapwidgets, vis-2-widgets-rssfeed
          Links im Profil

          D 1 Antwort Letzte Antwort
          0
          • OliverIOO OliverIO

            @diamand2k22

            frag nach der api dokumentation

            D Offline
            D Offline
            Diamand2k22
            schrieb am zuletzt editiert von Diamand2k22
            #45

            @oliverio

            Hallo Oliver, du hast mir doch damals bei der Erstellung des Skripts zur Abfrage der Solarweb Prognose Daten geholfen und mir dieses Skript zusammen gebaut.

            // Definition Variablen
            const axios = require('axios').default;
            const url = "http://www.solarweb.com/PvSystems/GetWeatherWidgetDataForPublicDisplay?publicDisplayToken=";
            const displayToken = "xxxxx";
            const path = '0_userdata.0.Datenpunkte.PV_Anlage.Solarforecast.Solarweb.';
            const data_solarweb = path + 'JSON_Data_Solarweb';
            const datapoint_forecast_today = path + 'Forecast_Today';
            const datapoint_forecast_tomorrow = path + 'Forecast_Tomorrow';
            const datapoint_energy_remaining_today = path + 'Energy_remaining_today';
            const datapoint_current_energy_generated_today = path + 'Current_energy_generated_today';
             
             //Create Datenpunkte
            createState(path + 'JSON_Data_Solarweb', {type: 'json', name: 'JSON_Data', role: 'state'}); 
            createState(path + 'Forecast_Today', {name: 'Forecast_Today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
            createState(path + 'Forecast_Tomorrow', {name: 'Forecast_Tomorrow',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
            createState(path + 'Current_energy_generated_today', {name: 'Current_energy_generated_today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
            createState(path + 'Energy_remaining_today', {name: 'Energy_remaining_today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
             
            async function  getWebContent(url,displayToken) {
                try {
                    log("Request solarweb data")
                    const response = await axios.get(url+displayToken,{
                        timeout:5000,
                        headers:{
                            "User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Safari/537.36"
                        }
                    });           
                    return response.data;
                } catch (error) {
                    log(error,"error");
                }
            }
             
            async function main() {
                const content=await getWebContent(url,displayToken);
                const data=content.data;
                setState(data_solarweb, JSON.stringify(data), true);
             
                console.log(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Today").ExpectedEnergyYield.Value);
                setState(datapoint_forecast_today, parseFloat(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Today").ExpectedEnergyYield.Value), true);
                
                console.log(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Tomorrow").ExpectedEnergyYield.Value);
                setState(datapoint_forecast_tomorrow,parseFloat(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Tomorrow").ExpectedEnergyYield.Value), true);
                
                setState(datapoint_current_energy_generated_today, (getState("0_userdata.0.Datenpunkte.PV_Anlage.Solarweb.Current.01_Day.Energy.EnergyProductionTotal").val), true);
                setState(datapoint_energy_remaining_today, Math.min(Math.max(getState(datapoint_forecast_today).val - getState(datapoint_current_energy_generated_today).val, 0), 200), true); 
                
            }
            main();
             
            // jede Stunde 6 neu berechnen
            schedule("6,16,26,36,46,56 * * * *", async function () {
              await main();
            });
             
             
            
            

            könntest du mir nochmal behilflich sein, das Skript auf httpGet umzustellen?
            Danke Dir und

            Grüße
            Diamand2k22

            D 1 Antwort Letzte Antwort
            0
            • D Diamand2k22

              @oliverio

              Hallo Oliver, du hast mir doch damals bei der Erstellung des Skripts zur Abfrage der Solarweb Prognose Daten geholfen und mir dieses Skript zusammen gebaut.

              // Definition Variablen
              const axios = require('axios').default;
              const url = "http://www.solarweb.com/PvSystems/GetWeatherWidgetDataForPublicDisplay?publicDisplayToken=";
              const displayToken = "xxxxx";
              const path = '0_userdata.0.Datenpunkte.PV_Anlage.Solarforecast.Solarweb.';
              const data_solarweb = path + 'JSON_Data_Solarweb';
              const datapoint_forecast_today = path + 'Forecast_Today';
              const datapoint_forecast_tomorrow = path + 'Forecast_Tomorrow';
              const datapoint_energy_remaining_today = path + 'Energy_remaining_today';
              const datapoint_current_energy_generated_today = path + 'Current_energy_generated_today';
               
               //Create Datenpunkte
              createState(path + 'JSON_Data_Solarweb', {type: 'json', name: 'JSON_Data', role: 'state'}); 
              createState(path + 'Forecast_Today', {name: 'Forecast_Today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
              createState(path + 'Forecast_Tomorrow', {name: 'Forecast_Tomorrow',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
              createState(path + 'Current_energy_generated_today', {name: 'Current_energy_generated_today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
              createState(path + 'Energy_remaining_today', {name: 'Energy_remaining_today',role: 'state',type: 'number',read: true,write: true, desc: 'Manuell erzeugt',def:0,unit: 'kWh'}, function () {});
               
              async function  getWebContent(url,displayToken) {
                  try {
                      log("Request solarweb data")
                      const response = await axios.get(url+displayToken,{
                          timeout:5000,
                          headers:{
                              "User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Safari/537.36"
                          }
                      });           
                      return response.data;
                  } catch (error) {
                      log(error,"error");
                  }
              }
               
              async function main() {
                  const content=await getWebContent(url,displayToken);
                  const data=content.data;
                  setState(data_solarweb, JSON.stringify(data), true);
               
                  console.log(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Today").ExpectedEnergyYield.Value);
                  setState(datapoint_forecast_today, parseFloat(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Today").ExpectedEnergyYield.Value), true);
                  
                  console.log(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Tomorrow").ExpectedEnergyYield.Value);
                  setState(datapoint_forecast_tomorrow,parseFloat(data.Forecast.find(el=>el.ExpectedYieldDayLabel=="Tomorrow").ExpectedEnergyYield.Value), true);
                  
                  setState(datapoint_current_energy_generated_today, (getState("0_userdata.0.Datenpunkte.PV_Anlage.Solarweb.Current.01_Day.Energy.EnergyProductionTotal").val), true);
                  setState(datapoint_energy_remaining_today, Math.min(Math.max(getState(datapoint_forecast_today).val - getState(datapoint_current_energy_generated_today).val, 0), 200), true); 
                  
              }
              main();
               
              // jede Stunde 6 neu berechnen
              schedule("6,16,26,36,46,56 * * * *", async function () {
                await main();
              });
               
               
              
              

              könntest du mir nochmal behilflich sein, das Skript auf httpGet umzustellen?
              Danke Dir und

              Grüße
              Diamand2k22

              D Offline
              D Offline
              Diamand2k22
              schrieb am zuletzt editiert von
              #46

              @OliverIO

              hab doch hinbekommen, falls es noch jemand gebrauchen kann.

              const http = require('https');
              const url = "https://www.solarweb.com/PvSystems/GetWeatherWidgetDataForPublicDisplay?publicDisplayToken=";
              const displayToken = "xxxxxx-xxxxxxx-xxxxxxx-xxxxxx";
              const path = '0_userdata.0.Datenpunkte.PV_Anlage.Solarforecast.Solarweb.';
              const data_solarweb = path + 'JSON_Data_Solarweb';
              const datapoint_forecast_today = path + 'Forecast_Today';
              const datapoint_forecast_tomorrow = path + 'Forecast_Tomorrow';
              const datapoint_energy_remaining_today = path + 'Energy_remaining_today';
              const datapoint_current_energy_generated_today = path + 'Current_energy_generated_today';
              
              // Create Datenpunkte
              createState(path + 'JSON_Data_Solarweb', { type: 'json', name: 'JSON_Data', role: 'state' });
              createState(path + 'Forecast_Today', { name: 'Forecast_Today', role: 'state', type: 'number', read: true, write: true, desc: 'Manuell erzeugt', def: 0, unit: 'kWh' });
              createState(path + 'Forecast_Tomorrow', { name: 'Forecast_Tomorrow', role: 'state', type: 'number', read: true, write: true, desc: 'Manuell erzeugt', def: 0, unit: 'kWh' });
              createState(path + 'Current_energy_generated_today', { name: 'Current_energy_generated_today', role: 'state', type: 'number', read: true, write: true, desc: 'Manuell erzeugt', def: 0, unit: 'kWh' });
              createState(path + 'Energy_remaining_today', { name: 'Energy_remaining_today', role: 'state', type: 'number', read: true, write: true, desc: 'Manuell erzeugt', def: 0, unit: 'kWh' });
              
              async function getWebContent(url, displayToken) {
                  return new Promise((resolve, reject) => {
                      const requestUrl = url + displayToken;
                      http.get(requestUrl, { headers: { "User-Agent": "Mozilla/5.0" } }, (response) => {
                          let data = '';
              
                          // Daten aus dem Stream sammeln
                          response.on('data', chunk => {
                              data += chunk;
                          });
              
                          response.on('end', () => {
                              try {
                                  const parsedData = JSON.parse(data);
                                  resolve(parsedData);
                              } catch (error) {
                                  reject('Fehler beim Parsen der Antwort: ' + error);
                              }
                          });
              
                          response.on('error', (error) => {
                              reject('Fehler bei der Anfrage: ' + error);
                          });
                      }).on('error', (error) => {
                          reject('Fehler bei der HTTP-Anfrage: ' + error);
                      });
                  });
              }
              
              async function main() {
                  try {
                      const content = await getWebContent(url, displayToken);
                      const data = content.data;
                      
                      setState(data_solarweb, JSON.stringify(data), true);
              
                      console.log(data.Forecast.find(el => el.ExpectedYieldDayLabel == "Today").ExpectedEnergyYield.Value);
                      setState(datapoint_forecast_today, parseFloat(data.Forecast.find(el => el.ExpectedYieldDayLabel == "Today").ExpectedEnergyYield.Value), true);
              
                      console.log(data.Forecast.find(el => el.ExpectedYieldDayLabel == "Tomorrow").ExpectedEnergyYield.Value);
                      setState(datapoint_forecast_tomorrow, parseFloat(data.Forecast.find(el => el.ExpectedYieldDayLabel == "Tomorrow").ExpectedEnergyYield.Value), true);
              
                      setState(datapoint_current_energy_generated_today, getState("0_userdata.0.Datenpunkte.PV_Anlage.Solarweb.Current.01_Day.Energy.EnergyProductionTotal").val, true);
                      setState(datapoint_energy_remaining_today, Math.min(Math.max(getState(datapoint_forecast_today).val - getState(datapoint_current_energy_generated_today).val, 0), 200), true);
                  } catch (error) {
                      log("Fehler im Hauptprozess: " + error, "error");
                  }
              }
              
              main();
              
              // Jede Stunde 6 neu berechnen
              schedule("6,16,26,36,46,56 * * * *", async function () {
                  await main();
              });
              
              
              1 Antwort Letzte Antwort
              0
              Antworten
              • In einem neuen Thema antworten
              Anmelden zum Antworten
              • Älteste zuerst
              • Neuste zuerst
              • Meiste Stimmen


              Support us

              ioBroker
              Community Adapters
              Donate

              334

              Online

              32.4k

              Benutzer

              81.5k

              Themen

              1.3m

              Beiträge
              Community
              Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen | Einwilligungseinstellungen
              ioBroker Community 2014-2025
              logo
              • Anmelden

              • Du hast noch kein Konto? Registrieren

              • Anmelden oder registrieren, um zu suchen
              • Erster Beitrag
                Letzter Beitrag
              0
              • Home
              • Aktuell
              • Tags
              • Ungelesen 0
              • Kategorien
              • Unreplied
              • Beliebt
              • GitHub
              • Docu
              • Hilfe