Parser Corona Fallzahlen

[OliverIO]

Das RKI hat aufgehört die Zahlen tabellarisch auf der unten angegebenen Seite auszugeben und verweist nur noch auf das Dashboard.
Damit sind diese Anweisungen obsolet und ich verweise auf den corona adapter

Hallo,

wer sich die zahlen in den iobroker holen möchte, hier die Einstellungen für den parser

URL:
https://www.rki.de/DE/Content/InfAZ/N/Neuartiges_Coronavirus/Fallzahlen.html

Typ
number

Nach mehreren Änderungen hier die funktionierenden Regexens (13.3.2020) aus dem Gesamtthread zusammengefasst.
Bei anderen Bundesländern, Bayern ersetzen mit exakter Schreibweise aus der oben genannten Seite.

Bundesland infiziert

(?:Baden\-Württemberg|Baden\-Württem­berg)<\/td><td class="center" colspan="1" rowspan="1">([\d\.]+)<\/td><td class="center" colspan="1" rowspan="1">([-+\d\.]+)<\/td><td class="center" colspan="1" rowspan="1">([-+\d\.,]+)<\/td><td class="center" colspan="1" rowspan="1">([\d\.]+)

Bundesland tot

(?:Baden\-Württemberg|Baden\-Württem­berg)<\/td><td class="center" colspan="1" rowspan="1">[\d\.]+<\/td><td class="center" colspan="1" rowspan="1">[-+\d\.]+<\/td><td class="center" colspan="1" rowspan="1">[-+\d\.,]+<\/td><td class="center" colspan="1" rowspan="1">([\d\.]+)

Gesamt infiziert

Gesamt<\/strong><\/td><td class="center" colspan="1" rowspan="1"><strong>([\d\.]+)<\/strong><\/td><td class="center" colspan="1" rowspan="1"><strong>([-+\d\.]+)<\/strong><\/td><td class="center" colspan="1" rowspan="1"><strong>([-+\d\.,]+)<\/strong><\/td><td class="center" colspan="1" rowspan="1"><strong>([\d\.]+)<\/strong>

Gesamt tot

Gesamt<\/strong><\/td><td class="center" colspan="1" rowspan="1"><strong>[\d\.]+<\/strong><\/td><td class="center" colspan="1" rowspan="1"><strong>[-+\d\.]+<\/strong><\/td><td class="center" colspan="1" rowspan="1"><strong>[-+\d\.,]+<\/strong><\/td><td class="center" colspan="1" rowspan="1"><strong>([\d\.]+)<\/strong>

PS: Ein makaberes Gefühl kommt auf, wenn man hier etwas zu tot schreibt

[Homoran]

@OliverIO Wie komme ich denn hier dran?

https://github.com/CSSEGISandData/COVID-19

Also an die daily data oder die time-series.
Ich will immer die csv herunterladen und erhalte HTML-Seiten

[OliverIO]

@Homoran

über den raw link in github bei der jeweiligen datei
https://raw.githubusercontent.com/CSSEGISandData/COVID-19/master/csse_covid_19_data/csse_covid_19_time_series/time_series_19-covid-Confirmed.csv

[sigi234]

@OliverIO

Cool, gibt es das auch für Europa/Weltweit ?

[OliverIO]

das sind die daten, die auf dieser seite angezeigt werden
https://gisanddata.maps.arcgis.com/apps/opsdashboard/index.html#/bda7594740fd40299423467b48e9ecf6

Die europazahlen sind dal alle mit drin

[Homoran]

@sigi234 sagte in Parser Corona Fallzahlen:

@OliverIO

Cool, gibt es das auch für Europa/Weltweit ?

mein Link bei github enthält alle Daten weltweit

[OliverIO]

Das RKI hat an der Seite geschraubt,
Das Regex für Gesamt wurde angepasst

[dslraser]

@OliverIO
Die Seite hat jetzt auch Todesfälle drinn.
Ich habe jetzt zum ersten Mal den Parser Adapter ausprobiert und kenne mich damit noch nicht aus. Werden die Daten über das Polling selbständig abgeholt, oder muss man noch ein scheudele angeben ?
Gesamt stimmt bei mir nicht mit der Website überein, wahrscheinlich weil die Seite verändert ist ? (die anderen Werte habe ich mir jetzt nicht angesehen, ich bin im Moment nur am Handy)

[dslraser]

@OliverIO sagte in Parser Corona Fallzahlen:

Das RKI hat an der Seite geschraubt,
Das Regex für Gesamt wurde angepasst

Da haben wir fast Zeitgleich geschrieben...(Gesamt passt jetzt wieder)

[DjNetwork]

Hallo zusammen,

leider scheinen die Seiten nicht durchgängig aktualisiert zu werden. Die aktuellsten Daten (bis nachts um 2 Uhr und ab morgens 8 Uhr) habe ich bisher hier gefunden:

Coronavirus-Monitor

Kann man die Seite auch abfragen?

[Homoran]

@DjNetwork sagte in Parser Corona Fallzahlen:

leider scheinen die Seiten nicht durchgängig aktualisiert zu werden.

Wie meinst du das?

Das RKI meldet täglich, seit vier Tagen zweimal täglich aktuelle Zahlen.

[DjNetwork]

naja, also das RKI hat eben grade bei Pressekonferenz noch die Zahl von gestern 15:00 Uhr (RKI - 1139 für Deutschland) angegeben.

Die Seite des OTZ oder auch JHU sind aber schon seit heute morgen 8:00 Uhr (Und ich glaube sogar seit heute Nacht 0:00Uhr) nur für Deutschland schon um ca. 80 Infektionen weiter.
Daher würde ich nicht unbedingt die Zahlen des RKI parsen wollen, (welche halt nicht so oft aktualisiert werden - wie Du sagst 2 mal Täglich), sondern eher die, bei welchem die Aktualisierungsraten höher sind. Wie z.B. eben das OTZ.

Habe seit gestern die Zahlen des RKI auf meiner Übersicht. Vorher hatte ich "nur" die Seite des OTZ als Iframe drin, daher ist mir der Unterschied aufgefallen. Nur leider habe ich keine Möglichkeit gefunden, diese Seite zu parsen...

[OliverIO]

@DjNetwork
OTZ überträgt die Daten sogar als Json, was ich grob bei beim prüfen gesehen habe.
Da ich mich hier nur privat interessiere und nicht immer neu die gleichen Seiten aufrufen will, reichen mir die rki Informationen völlig.
Ich benötige keine minutengenaue Darstellung, da sich für mich persönlich nichts dadurch ändert.

[Homoran]

@DjNetwork sagte in Parser Corona Fallzahlen:

nur für Deutschland schon um ca. 80 Infektionen weiter.

Dazu steht z.B. in Wikipedia:

Aufgelistet sind ausschließlich Fälle, die dem RKI über den Meldeweg oder offizielle Quellen mitgeteilt wurden. Daher kann es zwischen der RKI-Tabelle und den Daten anderer Quellen zu Abweichungen kommen.

JHU arbeitet eben auch mit anderen "inoffiziellen" Quelle und schreibt eben dann diesen Disclaimer:

Confirmed cases include presumptive positive cases.

Hier sind dann als Folge auch mal am nächsten Morgen die Zahlen niedriger gewesen als am Abend vorher

[Coffeelover]

Vielen Dank für den Ansatz.
Funktionert. Nur wie bekomme ich den Wert "Todesfälle" auch geparst?

[Homoran]

@Coffeelover
Habe es mal für Nordrhein-Westfalen getestet:

im Parser NUM0 = Fälle; NUM1 = Todesfälle

Werde jetzt mal sehen, ob da für andere BUndesländer noch was geändert werden muss

[OliverIO]

regexens wurden erneut angepasst.
Diesmal gab es dann noch Tausenderpunkte

[Coffeelover]

@Homoran Das klappt bei mir so nicht.

Num0 passt, Num0 zeigt nichts an.

Nordrhein-Westfalen<\/td><td class="center" colspan="1" rowspan="1">([\d\.]+)<\/td>

[bommel_030]

@Coffeelover
Bei anderen Webseiten klappt das bei mir mit NUM0 und NUM1.
Komischerweise klappt das bei der RKI Seite nicht.
Für Todesfälle nach Bundesland sollte es so klappen:

Berlin<\/td><td class="center" colspan="1" rowspan="1">[\d\.]+<\/td><td class="center" colspan="1" rowspan="1">([\d\.]+)<\/td>

Bundesland natürlich bei Bedarf anpassen.

[OliverIO]

@bommel_030
Mit dem num habe ich auch immer Schwierigkeiten.

Berlin<\/td><td class="center" colspan="1" rowspan="1">([\d\.]+)<\/td><td class="center" colspan="1" rowspan="1">([\d\.]+)<\/td>

In deinem Regex fehlt noch die Klammer um den ersten Parameter.
Dann kommt mit num0 das richtige Ergebnis. Aber mit num1 leider nichts, obwohl
bei regex101 das richtige Ergebnis ermittelt wird.

https://regex101.com/r/utLuJE/1