NEWS
Parsen einer Seite
-
@homoran du musst wissen, ich kann RegEx einfach nicht. Das Interesse wurde eig. nur durch den ioBroker geweckt :sweat_smile: ... bzw. viel mehr durch diesen Topic hier.
Versuche mich momentan in RegEx einzuarbeiten... das ist allerdings recht mühsam :)
Ich bin dir jedenfalls sehr sehr dankbar, dass du mir hierbei geholfen hast.
Jetzt muss ich das nurnoch verstehen. Dafür ist das hier allerdings der falsche Topic :sweat_smile:@deralff sagte in Parsen einer Seite:
ich kann RegEx einfach nicht. Das Interesse wurde eig. nur durch den ioBroker geweckt
ging mir genauso :-)
Aber im Gegensatz zu Javascript, wo ich zwar weiß was ich will, oft auch Skripte nachvollziehen kann, aber die Syntax einfach nicht hinbekomme, schaffe ich es hier, weil es keine komplexe Syntax gibt.
@deralff sagte in Parsen einer Seite:
Jetzt muss ich das nurnoch verstehen. Dafür ist das hier allerdings der falsche Topic
Das mit dem verstehen ist das einfachste, aber du musst auch zusehen, dass du die Preise als Nummer mit Komma einpflegst und was du mit dem Datum machst weiß ich gar nicht
Versteh mal :-) :
- Ankerpunkt (möglichst eindeutig und möglichst diccht an dem gesuchten Wert) suchen:
kstelle - den Weg zum gewünschten Wert irgendwie eindeutig definieren, erschwerend kommt dazu, dass der ioBroker Parser Zeilenumbrüche (\n) nicht kennt. Also Haltepunkte finden die nicht so häufig vorkommen, hier
", also das erste Auftreten finden:[^"]+(wörtlich: suche Zeichen dass nicht ([^]) das genannte (") ist - beliebig oft (+) ) - solange mit diesen Haltepunkten weiterhangeln:
[^\,]+[^>] - bis man an die Zahlen kommt, die man will:
+[^\d]+ - und diese dann als Gruppe deklarieren:
([\d\,]+)wobei die Zahlen hier aus Ziffern und Komma bestehen
kein Support per PN! - Fragen im Forum stellen - es gibt fast nichts, was nicht auch für andere interessant ist.
Benutzt das Voting rechts unten im Beitrag wenn er euch geholfen hat.
der Installationsfixer: curl -fsL https://iobroker.net/fix.sh | bash -
- Ankerpunkt (möglichst eindeutig und möglichst diccht an dem gesuchten Wert) suchen:
-
@deralff sagte in Parsen einer Seite:
ich kann RegEx einfach nicht. Das Interesse wurde eig. nur durch den ioBroker geweckt
ging mir genauso :-)
Aber im Gegensatz zu Javascript, wo ich zwar weiß was ich will, oft auch Skripte nachvollziehen kann, aber die Syntax einfach nicht hinbekomme, schaffe ich es hier, weil es keine komplexe Syntax gibt.
@deralff sagte in Parsen einer Seite:
Jetzt muss ich das nurnoch verstehen. Dafür ist das hier allerdings der falsche Topic
Das mit dem verstehen ist das einfachste, aber du musst auch zusehen, dass du die Preise als Nummer mit Komma einpflegst und was du mit dem Datum machst weiß ich gar nicht
Versteh mal :-) :
- Ankerpunkt (möglichst eindeutig und möglichst diccht an dem gesuchten Wert) suchen:
kstelle - den Weg zum gewünschten Wert irgendwie eindeutig definieren, erschwerend kommt dazu, dass der ioBroker Parser Zeilenumbrüche (\n) nicht kennt. Also Haltepunkte finden die nicht so häufig vorkommen, hier
", also das erste Auftreten finden:[^"]+(wörtlich: suche Zeichen dass nicht ([^]) das genannte (") ist - beliebig oft (+) ) - solange mit diesen Haltepunkten weiterhangeln:
[^\,]+[^>] - bis man an die Zahlen kommt, die man will:
+[^\d]+ - und diese dann als Gruppe deklarieren:
([\d\,]+)wobei die Zahlen hier aus Ziffern und Komma bestehen
@homoran hehe, danke für die Erklärung.
Ich versuche dann mal sebstständig an den Steuersatz heran zu kommen.
Zu dem Datum: In Luxemburg sind die Preise an allen Tankstellen gleich, und werden einen Tag vor Preisänderung auf dieser Webseite aktualisiert. Ich reagieren dann einfach auf das Datum und lasse mir das anzeigen bzw. sende mir dann mit meinem signal-cmb Adapter eine Signal Nachricht zu :)
Proxmox 8
ioBroker im LXC (Master)
2x ioBrober auf RPi (3&4) als Zigbee Gateway (Slave)
Paperless-ngx in VM
OMV6 in VM
Linux auf allen Endgeräten (Windows verbannt) - Ankerpunkt (möglichst eindeutig und möglichst diccht an dem gesuchten Wert) suchen:
-
@homoran hehe, danke für die Erklärung.
Ich versuche dann mal sebstständig an den Steuersatz heran zu kommen.
Zu dem Datum: In Luxemburg sind die Preise an allen Tankstellen gleich, und werden einen Tag vor Preisänderung auf dieser Webseite aktualisiert. Ich reagieren dann einfach auf das Datum und lasse mir das anzeigen bzw. sende mir dann mit meinem signal-cmb Adapter eine Signal Nachricht zu :)
@deralff sagte in Parsen einer Seite:
Ich versuche dann mal sebstständig an den Steuersatz heran zu kommen.
Lass dich nicht veräppeln, das ist wirklich viel einfacher ;-)
aber das schaffst du!
kein Support per PN! - Fragen im Forum stellen - es gibt fast nichts, was nicht auch für andere interessant ist.
Benutzt das Voting rechts unten im Beitrag wenn er euch geholfen hat.
der Installationsfixer: curl -fsL https://iobroker.net/fix.sh | bash -
-
@deralff sagte in Parsen einer Seite:
Ich versuche dann mal sebstständig an den Steuersatz heran zu kommen.
Lass dich nicht veräppeln, das ist wirklich viel einfacher ;-)
aber das schaffst du!
@homoran said in Parsen einer Seite:
kstelle[^p]+p[^+p]+..(\d+)
Hehe, mein RexEx ist doppelt so lang :sweat_smile:
Aaaaaaber ich bin dahin gekommen wo ich hin wollte :)
Proxmox 8
ioBroker im LXC (Master)
2x ioBrober auf RPi (3&4) als Zigbee Gateway (Slave)
Paperless-ngx in VM
OMV6 in VM
Linux auf allen Endgeräten (Windows verbannt) -
@homoran said in Parsen einer Seite:
kstelle[^p]+p[^+p]+..(\d+)
Hehe, mein RexEx ist doppelt so lang :sweat_smile:
Aaaaaaber ich bin dahin gekommen wo ich hin wollte :)
@deralff sagte in Parsen einer Seite:
Hehe, mein RexEx ist doppelt so lang
das hatte ich mir gedacht :-)
Aaaaaaber ich bin dahin gekommen wo ich hin wollte
das auch!
Und das ist das wichtigste. Finetuning kommt mit der ZeitSuper!
kein Support per PN! - Fragen im Forum stellen - es gibt fast nichts, was nicht auch für andere interessant ist.
Benutzt das Voting rechts unten im Beitrag wenn er euch geholfen hat.
der Installationsfixer: curl -fsL https://iobroker.net/fix.sh | bash -
-
@homoran said in Parsen einer Seite:
kstelle[^p]+p[^+p]+..(\d+)
Hehe, mein RexEx ist doppelt so lang :sweat_smile:
Aaaaaaber ich bin dahin gekommen wo ich hin wollte :)
cih glaube ich hatte mal so eine grundlegende anleitung geschrieben, wie jeder das richtige regex pattern finden kann.
- bei regex101.com die datenquelle bei test eintragen
- möglichst kurzen aber eindeutigen string aus der datenquelle suchen
- den variablen anteil, den man am ende haben möchte eine Klammer setzen ()
- dann diesen Anteil mit Tokens ersetzen. dazu sollte man sich erstmal an die folgenden Tokens halten
a) Meta sequenzen wie bspw \d=digit \w=word \s=whitespace
b) Quantifier: die angeben, wie oft ein Zeichen/Squenz sich wiederholen darf +*?
c) common tokens: wie auswahllisten [a-z] oder alternativen a|b
oder ausschlüsse [^a-z]
damit kommt man schon extrem weit. regex101 hat auch den vorteil, das er die sequenz sprachlich aufteilt und genauer erklärt
Nur bei der übernahme nach iobroker hapert es manchmal, da man im iobroker die optionen nicht genau so übernehmen kann und die interne logik zu den optionen nicht immer ganz einleuchtend ist
-
@deralff sagte in Parsen einer Seite:
Hehe, mein RexEx ist doppelt so lang
das hatte ich mir gedacht :-)
Aaaaaaber ich bin dahin gekommen wo ich hin wollte
das auch!
Und das ist das wichtigste. Finetuning kommt mit der ZeitSuper!
-
ich muss mich da wieder mal an euch wenden, ich bin fürs Parsen leider echt zu d***.
Vor allem das Skript von @liv-in-sky wäre da wahrscheinlich interessant zu erweitern.
Ich hätte gern von folgender Page link text die ersten 5 Ergebnisse von mir aus als Object in einem Datenpunkt zb so{'id': 'Jet-Hornerstrasse xy', 'Diesel':'1,999|15.03|07:05', 'Benzin:1,899|15:03|07:05'}Dann könnte ich damit arbeiten. Gibts da was einfaches? vor allem mitn Parser möcht ich das nicht unbedingt machen, da ichs gern per Scheduler dann allo 0,30 Minuten einer Stunde holen möchte.
Danke glg
-
ich muss mich da wieder mal an euch wenden, ich bin fürs Parsen leider echt zu d***.
Vor allem das Skript von @liv-in-sky wäre da wahrscheinlich interessant zu erweitern.
Ich hätte gern von folgender Page link text die ersten 5 Ergebnisse von mir aus als Object in einem Datenpunkt zb so{'id': 'Jet-Hornerstrasse xy', 'Diesel':'1,999|15.03|07:05', 'Benzin:1,899|15:03|07:05'}Dann könnte ich damit arbeiten. Gibts da was einfaches? vor allem mitn Parser möcht ich das nicht unbedingt machen, da ichs gern per Scheduler dann allo 0,30 Minuten einer Stunde holen möchte.
Danke glg
kennst du tankerkönig adapter ?
-
kennst du tankerkönig adapter ?
@liv-in-sky said in Parsen einer Seite:
kennst du tankerkönig adapter ?
jaaa, ist der auch für Österreich?
-
@liv-in-sky said in Parsen einer Seite:
kennst du tankerkönig adapter ?
jaaa, ist der auch für Österreich?
@homecineplexx sagte in Parsen einer Seite:
für Österreich?
das hatte ich bei den Preisen schon befürchtet
-
@homecineplexx sagte in Parsen einer Seite:
für Österreich?
das hatte ich bei den Preisen schon befürchtet
@homoran said in Parsen einer Seite:
@homecineplexx sagte in Parsen einer Seite:
für Österreich?
das hatte ich bei den Preisen schon befürchtet
ist ja auch legitim :grin:
-
@liv-in-sky said in Parsen einer Seite:
kennst du tankerkönig adapter ?
jaaa, ist der auch für Österreich?
frag doch mal da nach, ob das noch aktuell ist https://forum.iobroker.net/topic/20314/skripten-des-e-control-spritpreisrechners/281 da sind die österreicher unter sich :-)
bevor wir hier alles neu erfinden
-
frag doch mal da nach, ob das noch aktuell ist https://forum.iobroker.net/topic/20314/skripten-des-e-control-spritpreisrechners/281 da sind die österreicher unter sich :-)
bevor wir hier alles neu erfinden
@liv-in-sky said in Parsen einer Seite:
frag doch mal da nach, ob das noch aktuell ist https://forum.iobroker.net/topic/20314/skripten-des-e-control-spritpreisrechners/281 da sind die österreicher unter sich :-)
bevor wir hier alles neu erfinden
super, dankeschön...mach ich doch glatt!
-
@liv-in-sky said in Parsen einer Seite:
frag doch mal da nach, ob das noch aktuell ist https://forum.iobroker.net/topic/20314/skripten-des-e-control-spritpreisrechners/281 da sind die österreicher unter sich :-)
bevor wir hier alles neu erfinden
super, dankeschön...mach ich doch glatt!
-
@liv-in-sky said in Parsen einer Seite:
ODER :-)
habe leider noch ein problem mit den umlauten
na das sieht schon sehr fein aus
-
@liv-in-sky said in Parsen einer Seite:
ODER :-)
habe leider noch ein problem mit den umlauten
na das sieht schon sehr fein aus
mit richtigen umlauten - vergiß nicht, du musst axios und cheerio unter zusätzlichen npm modulen in der javascript instanz haben - und mache die abfragen nicht zu oft - manche seiten mögen das nicht !
widget:
script:
-
Habe ebenfalls eine interne Website, von der ich gerne ein paar Werte parsen möchte. Leider steige ich bei Regex immer noch nicht voll durch. Sorry!
Bräuchte die markierten Werte als Zahl/String:
Der HTML Body
Ich hoffe, ihr habt einen Plan :)
Danke euch!
Support us
782
Online32.6k
Benutzer82.2k
Themen1.3m
Beiträge