Navigation

    Logo
    • Register
    • Login
    • Search
    • Recent
    • Tags
    • Unread
    • Categories
    • Unreplied
    • Popular
    • GitHub
    • Docu
    • Hilfe
    1. Home
    2. Deutsch
    3. Tester
    4. Adapter - Parser (regEx)

    NEWS

    • ioBroker@Smart Living Forum Solingen, 14.06. - Agenda added

    • ioBroker goes Matter ... Matter Adapter in Stable

    • Monatsrückblick - April 2025

    Adapter - Parser (regEx)

    This topic has been deleted. Only users with topic management privileges can see it.
    • G
      Gürol last edited by

      @Bluefox:

      Zu viele unbekannte Kriterien:

      -Post oder get?

      • Ausgabe mit ajax?

      Es ist alles mit JS möglich. `
      Hallo Bluefox,

      nachdem du schreibst, daß mit JS alles möglich ist.

      Ich habe eine Seite den ich parsen möchte. Blöderweise will die Seite vorher ein Login via "Post". 😞

      Wie kann ich das bewerkstelligen?

      Hier ist der Login-Code:

      
      <center>
      
      <form action="login" method="post">
      
      | <label for="username">Username
       or Email</label>: |
      
       |
      
      | <label for="password">Password</label>: |
      
       |
      
      | <label for="rememberme">Remember Me</label>: |  |
      
      |  |  |
      
      </form>
      
      </center>
      
      

      Danke im Voraus!

      Gruß

      Gürol

      1 Reply Last reply Reply Quote 0
      • G
        Gürol last edited by

        Wenn Bluefox schon nicht dazu kommt zu antworten, kann mir jemand anderes meine Frage beantworten? :roll:

        Kennt sich hier niemand mit Javascript aus? :shock:

        Gruß

        Gürol

        1 Reply Last reply Reply Quote 0
        • Homoran
          Homoran Global Moderator Administrators last edited by

          Das liegt vielleicht daran, dass du hier im Tester Forum bist.

          Stell die Frage doch bitte im Skripting Forum.

          Gruß

          Rainer

          1 Reply Last reply Reply Quote 0
          • Q
            Qlink last edited by

            Hi Leute,

            ich habe heute ebenfalls den Parser Adapter installiert und möchte damit das Internet Service Gateway(ISG) meiner Stiebel Eltron Wärmepumpe auslesen.

            Ich finde leider keine Anleitung zu dem Parser Adapter.

            Könnt ihr mir in die richtige Richtung helfen ?

            Ich möchte z.B. folgende URL auslesen: http://192.168.222.20/?s=1,1

            Die Seite sieht so aus:
            415_isg_wp.png

            Wenn ich beim Browser auf untersuchen gehe kommt folgendes:
            415_isg_wp_chrome.png

            und meine parser Einstellungen schauen so aus:
            415_parser_isg_wp.png

            Was muss ich bei RegEx eintragen um die verschiedenen Werte ausgelesen zu bekommen ?

            Muss ich für jeden Wert und für jedes Wort eine eigene Regel erstellen ?

            1 Reply Last reply Reply Quote 0
            • Q
              Qlink last edited by

              Mit````
              \d{0,3},\d{0,3}(?= bar)

              
              bekomme ich z.B. den korrekten Wert für HOCHDRUCK geliefert, aber auch nur den.
              
              Wie kann ich dann den Wert für NIEDERDRUCK auslesen, der ebenfalls mit bar als Einheit gelistet ist ?
              
              Muss ich also für jeden Wert den ich auslesen möchte, eine eigene Regel erstellen, oder gibt es einen anderen Weg als 30 Regeln pro Seite zu erstellen ?
              1 Reply Last reply Reply Quote 0
              • Homoran
                Homoran Global Moderator Administrators last edited by

                Willst du den für jeden Wert einen ydatenpunkt jaben, z.B. um mit diesen Werten weiterzuarbeiten, oder z.B. als gauge darzustellen?

                Gruß

                Rainer

                1 Reply Last reply Reply Quote 0
                • Q
                  Qlink last edited by

                  Ich möchte alle Werte primär darstellen, aber auch mit flot Langzeitdiagramme erstellen.

                  Weiterverarbeiten ist nur bei einigen wenigen Werten notwendig.

                  Macht das einen Unterschied ?

                  1 Reply Last reply Reply Quote 0
                  • Homoran
                    Homoran Global Moderator Administrators last edited by

                    Auch loggen und darstellen ist ein weiterverarbeiten 😄

                    Dann benötigst du auch einzelne Datenpunkte, und somit einzelne Regeln.

                    Müssen ja nur einmal erstellt werden.

                    Gruß

                    Rainer

                    1 Reply Last reply Reply Quote 0
                    • Q
                      Qlink last edited by

                      Und wie kann ich z.B. Hochdruck und Niederdruck auslesen, bzw. allgemein Werte die dieselbe Einheit haben und auf derselben URL stehen ?

                      Wenn ich \d{0,3},\d{0,3}(?= bar) bei der ersten Regel eingebe krieg ich automatisch den Wert für Hochdruck, wie müsste dann die Regel für den Niederdruckwert aussehen ?

                      1 Reply Last reply Reply Quote 0
                      • Homoran
                        Homoran Global Moderator Administrators last edited by

                        Hier kannst du mal testen

                        https://regex101.com

                        Achtung auf javascript umstellen

                        Gruß

                        Rainer

                        1 Reply Last reply Reply Quote 0
                        • ruhr70
                          ruhr70 last edited by

                          Kannst Du den Quellcode der Webseite hier posten. Dann kann man Dir besser helfen 🙂

                          1 Reply Last reply Reply Quote 0
                          • P
                            pix last edited by

                            Hallo,

                            die Werte werden ja hübsch aufgelistet. Eigentlich musst du für jeden Wert eine neue Abfrage im Regexp Adapter machen.

                            Ein Skript im Javascript Adapter sollte das auch können. Hab gerade keine Zeit, aber für ein ähnliches Projekt nutze ich den Node htmlparser.

                            var htmlparser = require("htmlparser");
                            

                            https://www.npmjs.com/package/htmlparser

                            Damit kann man dann die von HTML in JSON konvertierte Datei schön durcharbeiten.

                            Das macht vor allem dann Sinn, wenn die Ausgabe der Werte auf der HTML-Seite nicht immer in der gleichen Reihenfolge stattfindet.

                            Gruß

                            Pix

                            1 Reply Last reply Reply Quote 0
                            • Q
                              Qlink last edited by

                              @ruhr70:

                              Kannst Du den Quellcode der Webseite hier posten. Dann kann man Dir besser helfen 🙂 `

                              ! ````
                              ! <title>STIEBEL ELTRON Reglersteuerung</title>

                              !

                              !

                              !

                              !

                              **[DEUTSCH](?s=5,3)**
                              
                                [![Servicewelt](./pics/title.png)](. "zur Startseite") 
                              
                              	[ ](. "zur Startseite")
                              

                              !

                                    [START](?s=0)
                              
                                    <a>INFO</a>
                              

                              ! * ANLAGE

                              ! * WÄRMEPUMPE

                              ! * LIZENZBESTIMMUNGEN

                              ! * BEDIENUNG UND INSTALLATION

                              !

                                    <a>DIAGNOSE</a>
                              

                              ! * STATUS

                              ! * BUSTEILNEHMER

                              ! * EREIGNISLISTE

                              ! * FACHMANN

                              !

                                    <a>PROGRAMME</a>
                              

                              ! * HEIZPROGRAMM

                              ! * WARMWASSERPROGRAMM

                              ! * LÜFTERPROGRAMM

                              ! * PARTYPROGRAMM

                              ! * FERIENPROGRAMM

                              ! * KÜHLZEIT

                              ! * TROCKENHEIZPROGRAMM

                              ! * GRUNDEINSTELLUNG

                              !

                                    <a>EINSTELLUNGEN</a>
                              

                              ! * HEIZEN

                              ! * WARMWASSER

                              ! * LÜFTEN

                              ! * KÜHLEN

                              ! * SOLAR

                              ! * SOMMERBETRIEB

                              ! * ZEIT/DATUM

                              ! * INBETRIEBNAHME

                              ! * FACHMANN

                              !

                                    <a>PROFIL</a>
                              

                              ! * Netzwerk

                              ! * Sicherheit

                              ! * Anlagenbild

                              ! * SPRACHE

                              !

                                  WÄRMEPUMPE
                              

                              !
                              ! <form id="werte" action="#" onsubmit="saveValues(this);return false;">

                              ! | PROZESSWERTE |
                              ! HEISSGASTEMPERATUR |
                              28,6 °C |

                              ! HOCHDRUCK |
                              11,12 bar |

                              ! NIEDERDRUCK |
                              11,10 bar |

                              ! VERDAMPFERTEMP. |
                              27,7 °C |

                              ! VERFLÜSSIGERTEMP. |
                              29,5 °C |

                              ! FORTLUFT IST LÜFTERDREHZAHL |
                              0 Hz |

                              ! FORTLUFT SOLL VOLUMENSTROM |
                              0 % |

                              ! | WAERMEMENGEN |
                              ! WM HEIZEN TAG |
                              0,227 kWh |

                              ! WM HEIZEN SUMME |
                              63,075 MWh |

                              ! WM WW TAG |
                              1,990 kWh |

                              ! WM WW SUMME |
                              10,785 MWh |

                              ! WM NE HEIZEN SUMME |
                              2,721 MWh |

                              ! WM NE WW SUMME |
                              0,167 MWh |

                              ! WM WRG TAG |
                              2,050 kWh |

                              ! WM WRG SUMME |
                              12,038 MWh |

                              ! WM SOLAR HZ TAG |
                              0,000 kWh |

                              ! WM SOLAR HZ SUMME |
                              0,000 MWh |

                              ! WM SOLAR WW TAG |
                              0,000 kWh |

                              ! WM SOLAR WW SUMME |
                              0,000 MWh |

                              ! WM KÜHLEN SUMME |
                              4,770 MWh |

                              ! | LEISTUNGSAUFNAHME |
                              ! P HEIZUNG TAG |
                              0,936 kWh |

                              ! P HEIZUNG SUMME |
                              9,036 MWh |

                              ! P WW TAG |
                              1,500 kWh |

                              ! P WW SUMME |
                              2,108 MWh |

                              ! | LAUFZEITEN |
                              ! VERDICHTER HEIZEN |
                              5435 h |

                              ! VERDICHTER KÜHLEN |
                              421 h |

                              ! VERDICHTER WW |
                              909 h |

                              ! ELEKTR. NE HEIZEN |
                              324 h |

                              ! ELEKTR. NE WW |
                              16 h |

                              ! </form>
                              !

                              			![](./pics/ste_footer_website.png)
                              

                              !
                              Weitere Informationen zu unserem Produktprogramm und aktuelle Serviceangebote finden Sie unter www.stiebel-eltron.de

                              !

                              		  ![](./pics/footer_tel.png)
                              

                              ! Unsere Service-Hotline erreichen Sie unter
                              05531 702 90015

                              !

                              ! Das Neueste rund um die Servicewelt
                              servicewelt

                              !

                                  		[Datenschutz](?s=1,2&arch=datenschutzerklaerung)
                              

                              ! v8.5.3
                              !

                              	© STIEBEL ELTRON 2016
                              

                              ! ````
                              das wäre der quellcode einer der Seiten die ich parsen möchte.

                              @pix: danke für den Tipp. Mir wäre es lieber, wenn ich bei iobroker Adapter bleibe um nicht irgendwann den Überblick zu verlieren und die Komplexität "etwas" im Rahmen halten zu können.

                              Beste Grüße

                              1 Reply Last reply Reply Quote 0
                              • ruhr70
                                ruhr70 last edited by

                                Heissgastemperatur:

                                HEISSGASTEMPERATUR.+\n.+>(\d+,\d+)
                                

                                Niederdruck:

                                NIEDERDRUCK.+\n.+>(\d+,\d+)
                                

                                Verdampfertemperatur:

                                VERDAMPFERTEMP.+\n.+>(\d+,\d+)
                                

                                Verflüssigertemperatur:

                                VERFLÜSSIGERTEMP.+\n.+>(\d+,\d+)
                                

                                usw.

                                Im Prinzip muss immer nur die Bezeichnung ausgetaucht werden: HEISSGASTEMPERATUR -> NIEDERDRUCK

                                Je benötigten Wert eine RegEx-Abfrage.

                                327_heissgastemperatur.png

                                1 Reply Last reply Reply Quote 0
                                • Q
                                  Qlink last edited by

                                  Hi ruhr70,

                                  vielen Dank für deine Hilfe.

                                  Beim eingeben der Regeln funktioniert soweit noch alles.

                                  Ich habe jetzt 4 Regeln angelegt zum Testen, aber sobald der parser adapter daraufhin neustartet kommt folgende FM im Log:

                                  parser.0	2017-05-18 22:20:03.453	info	starting. Version 0.2.1 in C:/Program Files/ioBroker/node_modules/iobroker.parser, node: v4.5.0
                                  host.SERVER	2017-05-18 22:20:02.470	info	instance system.adapter.parser.0 started with pid 9488
                                  host.SERVER	2017-05-18 22:20:00.017	info	instance system.adapter.parser.0 terminated with code null ()
                                  host.SERVER	2017-05-18 22:20:00.017	warn	instance system.adapter.parser.0 terminated due to SIGTERM
                                  host.SERVER	2017-05-18 22:19:59.954	info	stopInstance system.adapter.parser.0 killing pid 3284
                                  host.SERVER	2017-05-18 22:19:59.954	info	stopInstance system.adapter.parser.0
                                  host.SERVER	2017-05-18 22:19:59.954	info	object change system.adapter.parser.0
                                  parser.0	2017-05-18 22:18:56.329	info	starting. Version 0.2.1 in C:/Program Files/ioBroker/node_modules/iobroker.parser, node: v4.5.0
                                  host.SERVER	2017-05-18 22:18:55.423	info	instance system.adapter.parser.0 started with pid 3284
                                  host.SERVER	2017-05-18 22:18:25.360	info	Restart adapter system.adapter.parser.0 because enabled
                                  host.SERVER	2017-05-18 22:18:25.360	error	instance system.adapter.parser.0 terminated with code 0 (OK)
                                  parser.0	2017-05-18 22:18:24.813	error	at Timer.listOnTimeout (timers.js:92:15)
                                  parser.0	2017-05-18 22:18:24.813	error	at ontimeout [as _onTimeout] (timers.js:209:34)
                                  parser.0	2017-05-18 22:18:24.813	error	at _analyseDataForStates (C:\Program Files\ioBroker\node_modules\iobroker.parser\main.js:125:9)
                                  parser.0	2017-05-18 22:18:24.813	error	at analyseData (C:\Program Files\ioBroker\node_modules\iobroker.parser\main.js:159:26)
                                  parser.0	2017-05-18 22:18:24.813	error	TypeError: Cannot read property 'exec' of undefined
                                  parser.0	2017-05-18 22:18:24.813	error	uncaught exception: Cannot read property 'exec' of undefined
                                  sql.0	2017-05-18 22:18:23.470	info	enabled logging of parser.0.P_WW_Tag
                                  parser.0	2017-05-18 22:18:22.735	info	starting. Version 0.2.1 in C:/Program Files/ioBroker/node_modules/iobroker.parser, node: v4.5.0
                                  host.SERVER	2017-05-18 22:18:21.688	info	instance system.adapter.parser.0 started with pid 15432
                                  web.0	2017-05-18 22:18:18.704	info	2017-05-18T20:18:18.704Z Connected system.user.admin
                                  sql.0	2017-05-18 22:18:17.423	info	No Data
                                  sql.0	2017-05-18 22:18:12.486	info	enabled logging of parser.0.P_WW_Summe
                                  web.0	2017-05-18 22:18:06.876	info	2017-05-18T20:18:06.876Z Connected system.user.admin
                                  sql.0	2017-05-18 22:18:05.642	info	No Data
                                  sql.0	2017-05-18 22:18:01.439	info	enabled logging of parser.0.P_Heizung_Tag
                                  web.0	2017-05-18 22:17:56.673	info	2017-05-18T20:17:56.673Z Connected system.user.admin
                                  sql.0	2017-05-18 22:17:55.251	info	No Data
                                  host.SERVER	2017-05-18 22:17:51.689	info	Restart adapter system.adapter.parser.0 because enabled
                                  

                                  und unter Objekte sehe ich zwar die Einträge, aber es erscheinen keine Werte…

                                  1 Reply Last reply Reply Quote 0
                                  • ruhr70
                                    ruhr70 last edited by

                                    Das der Adapter abstürzt sollte nicht sein, egal was man eingetragen hat.

                                    Das müsste sich der Adapterentwickler mal ansehen.

                                    Versuch mal bitte die Rolle auf "Wert" zu stellen und den Typ auf "String".

                                    Funktioniert es dann?

                                    1 Reply Last reply Reply Quote 0
                                    • Q
                                      Qlink last edited by

                                      Wenn ich auf Wert und String umstelle erscheint folgendes im Log.

                                      parser.0	2017-05-19 08:22:06.032	info	starting. Version 0.2.1 in C:/Program Files/ioBroker/node_modules/iobroker.parser, node: v4.5.0
                                      host.SERVER	2017-05-19 08:22:04.922	info	instance system.adapter.parser.0 started with pid 14420
                                      host.SERVER	2017-05-19 08:22:02.454	info	instance system.adapter.parser.0 terminated with code null ()
                                      host.SERVER	2017-05-19 08:22:02.454	warn	instance system.adapter.parser.0 terminated due to SIGTERM
                                      host.SERVER	2017-05-19 08:22:02.407	info	stopInstance system.adapter.parser.0 killing pid 20696
                                      host.SERVER	2017-05-19 08:22:02.407	info	stopInstance system.adapter.parser.0
                                      host.SERVER	2017-05-19 08:22:02.391	info	object change system.adapter.parser.0
                                      parser.0	2017-05-19 08:20:14.657	info	starting. Version 0.2.1 in C:/Program Files/ioBroker/node_modules/iobroker.parser, node: v4.5.0
                                      host.SERVER	2017-05-19 08:20:13.736	info	instance system.adapter.parser.0 started with pid 20696
                                      host.SERVER	2017-05-19 08:20:11.283	info	instance system.adapter.parser.0 terminated with code null ()
                                      host.SERVER	2017-05-19 08:20:11.283	warn	instance system.adapter.parser.0 terminated due to SIGTERM
                                      host.SERVER	2017-05-19 08:20:11.205	info	stopInstance system.adapter.parser.0 killing pid 9488
                                      host.SERVER	2017-05-19 08:20:11.205	info	stopInstance system.adapter.parser.0
                                      host.SERVER	2017-05-19 08:20:11.205	info	object change system.adapter.parser.0
                                      sql.0	2017-05-19 08:20:11.188	info	enabled logging of parser.0.P_Heizung_Summe
                                      sql.0	2017-05-19 08:20:11.157	info	enabled logging of parser.0.P_Heizung_Tag
                                      sql.0	2017-05-19 08:20:11.141	info	enabled logging of parser.0.P_WW_Tag
                                      sql.0	2017-05-19 08:20:11.126	info	enabled logging of parser.0.P_WW_Summe
                                      

                                      Werte tauchen unter Objekte aber leider ebenfalls nicht auf 😞

                                      1 Reply Last reply Reply Quote 0
                                      • ruhr70
                                        ruhr70 last edited by

                                        @Qlink:

                                        Wenn ich auf Wert und String umstelle erscheint folgendes im Log. `

                                        Ich habe das mal nachgebaut… über einen Webserver verlangt er bei der Auswertung noch einen "Carriage Return". Das "Linefeed" alleine hatte da nicht ausgereicht.

                                        Versuche mal bitte:

                                        VERDAMPFERTEMP.+\r\n.+>(\d+,\d+)
                                        

                                        Das \r ist dazugekommen.

                                        So funktioniert es bei mir dann nicht nur über Online-Regex, sondern auch über einen Webserver:

                                        327_verdampfer_objekt.png

                                        327_verdampfer_parser.png

                                        1 Reply Last reply Reply Quote 0
                                        • Bluefox
                                          Bluefox last edited by

                                          Ich habe jetzt auf git die neue Version. Die sollte mehr Fehler abfangen und kann nicht nur ersten Element finden. Sondern z.B. dritte.

                                          1 Reply Last reply Reply Quote 0
                                          • Q
                                            Qlink last edited by

                                            Hi Ruhr70,

                                            vielen Dank für deine Hilfe.

                                            Jetzt klappts perfekt ! 🙂

                                            30 Regeln anlegen dauert ein ganz schönes Weilchen.

                                            Eine große Hilfe wäre wenn man die Möglichkeit hätte Regeln zu duplizieren und sie dann nur noch anpassen zu müssen…

                                            Beste Grüße

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Support us

                                            ioBroker
                                            Community Adapters
                                            Donate

                                            525
                                            Online

                                            31.7k
                                            Users

                                            79.8k
                                            Topics

                                            1.3m
                                            Posts

                                            43
                                            268
                                            99470
                                            Loading More Posts
                                            • Oldest to Newest
                                            • Newest to Oldest
                                            • Most Votes
                                            Reply
                                            • Reply as topic
                                            Log in to reply
                                            Community
                                            Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen
                                            The ioBroker Community 2014-2023
                                            logo