Hilfe bei Skripte von request auf httpGet umbauen

Negalein

@latzi sagte in Hilfe bei Skripte von request auf httpGet umbauen:

weiterer Ansatz zum IQ-Script:

hast du das in Verwendung?

Ist das ein normales JS?

Latzi

@negalein
Ja, das verwende ich.
Nein, ist ein Bash-Script (so wie das Wetterstation-Script von SBORG), wird am Server ausgeführt

liv-in-sky

@negalein

das sind keinen axios fehler - da ist ein problem mit dem datenpunkt

du könntest mir deinenaccount geben und ich teste es mal bei mir - wenn ja,dann über chat

liv-in-sky

@negalein

also : der zugriff funktioniert, aber das auslesen kann nicht funktionieren - weißt du noch, wo du das script her hast - und lief das schon mal ?

das script von @latzi verstehe ich un dkann es auch nachvollziehen - dein script schau ich mir morgen früh nochmal an

der unterschied ist der - dein script versucht die linken daten zu bekommen (was nicht wirklich funktioniert, weil das über ein internes script angezeigt wird

das von latzi liest die rechten werte aus (schwarzer hintergrund)

Image 001.png

Latzi

@liv-in-sky
das Script funktionierte und kommt von hier

liv-in-sky

@latzi

ich kucke morgen nochmal - braucht etwas hirnpower

liv-in-sky

@latzi @Negalein @OliverIO

vielleicht hat der ersteller lust, da nochmal draufzuschauen

https://forum.iobroker.net/post/907470

Negalein

@liv-in-sky sagte in Hilfe bei Skripte von request auf httpGet umbauen:

vielleicht hat der ersteller lust, da nochmal draufzuschauen

Hab Oliver im Ursprungsthread geschrieben.

Ah, seh gerade, dass du ihn eh verlinkt hast.

liv-in-sky

@negalein

wäre cool, wenn er hilft, er hat def mehr ahnung von solchen abfragen :-)

Negalein

@liv-in-sky sagte in Hilfe bei Skripte von request auf httpGet umbauen:

dann sudo crontab -e öffnen und folgenden eintrag eingeben: */1 * * * * /usr/local/bin/httptest

muss danach rebootet werden, oder läuft der Cron gleich los?

liv-in-sky

@negalein
Läuft sofort los

liv-in-sky

@negalein
Ob alles richtig ist stellst du am besten so fest
Gehe ins Verzeichnis und rufe einfach httptest auf, dann siehst du was passiert

Negalein

@liv-in-sky sagte in Hilfe bei Skripte von request auf httpGet umbauen:

Läuft sofort los

Ok, DP ändert sich nicht.

der Port bei der ioB-IP ist eh der normale (8081 in meinem Fall)?

Negalein

@liv-in-sky sagte in Hilfe bei Skripte von request auf httpGet umbauen:

Gehe ins Verzeichnis und rufe einfach httptest auf, dann siehst du was passiert

pi@raspberrypi:~ $ cd /usr/local/bin/
pi@raspberrypi:/usr/local/bin $ httptest
Warning: Failed to read curl-format.txt/usr/local/bin/httptest: command substitution: Zeile 4: Syntaxfehler beim unerwarteten Wort `|'
/usr/local/bin/httptest: command substitution: Zeile 4: `| awk '{print $2}' | sed -e 's/s//''
Warning: Failed to read curl-format.txtcurl: no URL specified!
curl: try 'curl --help' or 'curl --manual' for more information
/usr/local/bin/httptest: Zeile 6: http://10.0.1.93/middleware.php/data.json?from=now&uuid[]=bc3edcd0-24c4-11ea-b257-bdbd9553c516&uuid[]=deda8550-24c4-11ea-b402-275ee0956365: Datei oder Verzeichnis nicht gefunden
/usr/local/bin/httptest: Zeile 5: iobroker: Kommando nicht gefunden.
Warning: Failed to read curl-format.txtcurl: no URL specified!
curl: try 'curl --help' or 'curl --manual' for more information
/usr/local/bin/httptest: Zeile 8: http://10.0.1.93/middleware.php/data.json?from=now&uuid[]=bc3edcd0-24c4-11ea-b257-bdbd9553c516&uuid[]=deda8550-24c4-11ea-b402-275ee0956365: Datei oder Verzeichnis nicht gefunden
/usr/local/bin/httptest: Zeile 7: iobroker: Kommando nicht gefunden.
Warning: Failed to read curl-format.txtcurl: no URL specified!
curl: try 'curl --help' or 'curl --manual' for more information
/usr/local/bin/httptest: Zeile 10: http://10.0.1.93/middleware.php/data.json?from=now&uuid[]=bc3edcd0-24c4-11ea-b257-bdbd9553c516&uuid[]=deda8550-24c4-11ea-b402-275ee0956365: Datei oder Verzeichnis nicht gefunden
/usr/local/bin/httptest: Zeile 9: iobroker: Kommando nicht gefunden.
/usr/local/bin/httptest: Zeile 11: iobroker: Kommando nicht gefunden.
pi@raspberrypi:/usr/local/bin $

OliverIO

@liv-in-sky

Ich schau einmal.
Allerdings gelten die erwähnten Herausforderungen im Post
https://forum.iobroker.net/topic/60747/daten-aus-pw-geschützte-website/20?_=1716846281603

Request kann das alles in der vorliegenden Form.
Axios nur mit diversen zusatzbibliotheken. (Stichwort cookie jar und automatischer redirect), bzw mit relativ viel zusätzlichem code.

Request ist immer noch keine schlechte Bibliothek
Sie ist depecated, da der maintainer keine neuen Features mehr hinzufügen möchte.
Vgl. auch diesen post

https://github.com/request/request/issues/3142

liv-in-sky

@negalein poste doch mal deine httptest datei - da ist noch der wurm drin

liv-in-sky

@oliverio

damit scheine ich erfolg zu haben - wie gefällt dir diese lösung

//ab hier nix verändern
const axios = require('axios');
const cheerio = require("cheerio");
const tough = require('tough-cookie');
const { wrapper } = require('axios-cookiejar-support');

const cookieJar = new tough.CookieJar();
const client = wrapper(axios.create({
  jar: cookieJar,
  withCredentials: true,
}));
 
let $;
async function main() {
 
const optionsLogin = {
  method: 'POST',
  url: 'https://netservice.iqcard.at/de/login',
  data: `BENUID=${user}&PASSWT=${pass}&login-form-submit=login`,
  headers: {
    'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
    'Accept-Encoding': 'gzip, deflate, br',
    'Accept-Language': 'de-DE,de;q=0.9,en-US;q=0.8,en;q=0.7',
    'Cache-Control': 'no-cache',
    'Content-Type': 'application/x-www-form-urlencoded',
    'DNT': '1',
    'Origin': 'https://netservice.iqcard.at',
    'Pragma': 'no-cache',
    'Sec-CH-UA': '"Not?A_Brand";v="8", "Chromium";v="108", "Google Chrome";v="108"',
    'Sec-CH-UA-Mobile': '?0',
    'Sec-CH-UA-Platform': '"Windows"',
    'Sec-Fetch-Dest': 'empty',
    'Sec-Fetch-Mode': 'cors',
    'Sec-Fetch-Site': 'same-origin',
    'Upgrade-Insecure-Requests': '1',
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.0.0 Safari/537.36',
    'Cookie': 'cAccept=true; NETSERVICE=true; IQCARDPASSWT=; IQCARDBENUID= ',
    'Referer': 'https://netservice.iqcard.at/de/kunden'
  },
  maxRedirects: 5, // Anzahl der zu folgenden Redirects
  withCredentials: true // für das Cookie-Handling
};

const optionsPriceinfo = {
  method: 'GET',
  url: 'https://netservice.iqcard.at/de/netservice_preisinfo',
  headers: {
    'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
    'Accept-Encoding': 'gzip, deflate, br',
    'Accept-Language': 'de-DE,de;q=0.9,en-US;q=0.8,en;q=0.7',
    'Cache-Control': 'no-cache',
    'DNT': '1',
    'Origin': 'https://netservice.iqcard.at',
    'Pragma': 'no-cache',
    'Sec-CH-UA': '"Not?A_Brand";v="8", "Chromium";v="108", "Google Chrome";v="108"',
    'Sec-CH-UA-Mobile': '?0',
    'Sec-CH-UA-Platform': '"Windows"',
    'Sec-Fetch-Dest': 'empty',
    'Sec-Fetch-Mode': 'cors',
    'Sec-Fetch-Site': 'same-origin',
    'Sec-Fetch-User': '?1',
    'Upgrade-Insecure-Requests': '1',
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.0.0 Safari/537.36',
    'Referer': 'https://netservice.iqcard.at/de/netservice'
  },
  maxRedirects: 5, // Anzahl der zu folgenden Redirects
  withCredentials: true // für das Cookie-Handling
};

// Anmeldung mit POST-Request
client(optionsLogin)
  .then(() => {
    // Erfolgreiche Anmeldung, jetzt GET-Request für Preisinfo
    return client(optionsPriceinfo);
  })
  .then(response => {
    // Verarbeitung der Antwort
    const data = analyze(response.data);
    log(data);
    writeDatapoint(data);
  })
  .catch(error => {
    console.error('Error making the request:', error);
  });

output

{
   "ÖSTERREICH": {
   	"services": {
   		"Super Plus": [
   			{
   				"date": "27.05.2024-02.06.2024:",
   				"price": "1,721 EUR"
   			},
   			{
   				"date": "20.05.2024-26.05.2024:",
   				"price": "1,731 EUR"
   			},
   			{
   				"date": "13.05.2024-19.05.2024:",
   				"price": "1,737 EUR"
   			}
   		],
   		"Super": [
   			{
   				"date": "27.05.2024-02.06.2024:",
   				"price": "1,595 EUR"
   			},
   			{
   				"date": "20.05.2024-26.05.2024:",
   				"price": "1,611 EUR"
   			},
   			{
   				"date": "13.05.2024-19.05.2024:",
   				"price": "1,617 EUR"
   			}
   		],
   		"Normal": [
   			{
   				"date": "27.05.2024-02.06.2024:",
   				"price": "1,595 EUR"
   			},
   			{
   				"date": "20.05.2024-26.05.2024:",
   				"price": "1,611 EUR"
   			},
   			{
   				"date": "13.05.2024-19.05.2024:",
   				"price": "1,617 EUR"
   			}
   		],
   		"Diesel": [
   			{
   				"date": "27.05.2024-02.06.2024:",
   				"price": "1,559 EUR"
   			},
   			{
   				"date": "20.05.2024-26.05.2024:",
   				"price": "1,571 EUR"
   			},
   			{
   				"date": "13.05.2024-19.05.2024:",
   				"price": "1,571 EUR"
   			}
   		],
   		"Premium Diesel": [
   			{
   				"date": "27.05.2024-02.06.2024:",
   				"price": "1,781 EUR"
   			},
   			{
   				"date": "20.05.2024-26.05.2024:",
   				"price": "1,781 EUR"
   			},
   			{
   				"date": "13.05.2024-19.05.2024:",
   				"price": "1,787 EUR"
   			}
   		],
   		"IQ Motoröle und Chemie": "10 % Rabatt",
   		"Autowäsche": "10 % Rabatt"
   	},
   	"info": "",
   	"countryname": "ÖSTERREICH"
   },
   "BOSNIEN UND HERZEGOWINA": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "BOSNIEN UND HERZEGOWINA"
   },
   "BELGIEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "BELGIEN"
   },
   "BULGARIEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "BULGARIEN"
   },
   "TSCHECHIEN": {
   	"services": {
   		"Diesel": [
   			{
   				"date": "27.05.2024-02.06.2024:",
   				"price": "34,122 CZK"
   			},
   			{
   				"date": "20.05.2024-26.05.2024:",
   				"price": "34,122 CZK"
   			},
   			{
   				"date": "13.05.2024-19.05.2024:",
   				"price": "34,606 CZK"
   			}
   		]
   	},
   	"info": "",
   	"countryname": "TSCHECHIEN"
   },
   "DEUTSCHLAND": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "DEUTSCHLAND"
   },
   "DÄNEMARK": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "DÄNEMARK"
   },
   "SPANIEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "SPANIEN"
   },
   "FRANKREICH": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "FRANKREICH"
   },
   "GROßBRITANNIEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "GROßBRITANNIEN"
   },
   "UNGARN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "UNGARN"
   },
   "ITALIEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "ITALIEN"
   },
   "LITAUEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "LITAUEN"
   },
   "LUXEMBURG": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "LUXEMBURG"
   },
   "NIEDERLANDE": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "NIEDERLANDE"
   },
   "NORWEGEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "NORWEGEN"
   },
   "POLEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "POLEN"
   },
   "RUMÄNIEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "RUMÄNIEN"
   },
   "SCHWEDEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "SCHWEDEN"
   },
   "SLOWENIEN": {
   	"services": {},
   	"info": "Sie tanken zum aktuellen Pumpenabgabepreis",
   	"countryname": "SLOWENIEN"
   }
}

Negalein

@liv-in-sky sagte in Hilfe bei Skripte von request auf httpGet umbauen:

poste doch mal deine httptest datei - da ist noch der wurm drin

#!/bin/bash
dauer=`curl -w "@curl-format.txt" -s 'http://10.0.1.93/middleware.php/data.json?from=now&uuid[]=bc3edcd0-24c4-11ea-b257-bdbd9553c516&uuid[]=deda8550-24c4-11ea-b402-275ee0956365' | grep time_total -m 1 
| awk '{print $2}' | sed -e 's/s//'`
#curl "http://10.0.1.202:8081/set/0_userdata.0.Tests.htttpget-test?value=$dauer"
iobroker state set 0_userdata.0.Tests.htttpget-test $dauer echo Temp: $dauer sleep 15 tempi=`curl -w "@curl-format.txt" -s 
'http://10.0.1.93/middleware.php/data.json?from=now&uuid[]=bc3edcd0-24c4-11ea-b257-bdbd9553c516&uuid[]=deda8550-24c4-11ea-b402-275ee0956365' | grep time_total -m 1 | awk '{print $2}' | sed -e 's/s//'` 
iobroker state set 0_userdata.0.Tests.htttpget-test $tempi sleep 15 tempi=`curl -w "@curl-format.txt" -s 
'http://10.0.1.93/middleware.php/data.json?from=now&uuid[]=bc3edcd0-24c4-11ea-b257-bdbd9553c516&uuid[]=deda8550-24c4-11ea-b402-275ee0956365' | grep time_total -m 1 | awk '{print $2}' | sed -e 's/s//'` 
iobroker state set 0_userdata.0.Tests.htttpget-test $tempi sleep 15 tempi=`curl -w "@curl-format.txt" -s 
'http://10.0.1.93/middleware.php/data.json?from=now&uuid[]=bc3edcd0-24c4-11ea-b257-bdbd9553c516&uuid[]=deda8550-24c4-11ea-b402-275ee0956365' | grep time_total -m 1 | awk '{print $2}' | sed -e 's/s//'`
iobroker state set 0_userdata.0.Tests.htttpget-test $tempi

liv-in-sky

@negalein

die datei curl-format.txt hast du ins verzeichnis kopiert ?

Negalein

@liv-in-sky sagte in Hilfe bei Skripte von request auf httpGet umbauen:

die datei curl-format.txt hast du ins verzeichnis kopiert ?

yes

Community Forum

NEWS

Hilfe bei Skripte von request auf httpGet umbauen

Support us

392

32.4k

81.5k

1.3m