NEWS
Parser schreibt nicht alle Werte nach Influx
-
@aiouh hast du in den Einstellungen der influx vielleicht irrtümlich eine hohe Mindeständerung drin?
oder eher ein zu hohes debounce? bei der kurzen Zeit zwischen den Wertendeshalb wollte ich diese Konfig auch sehen
-
@homoran
Das 30 Sekunden Intervall sollte ihn hoffentlich nicht aus der Kurve schmeissen. Ist bei den Werten die von Influx aufgezeichnet werden dieselbe Einstellung.
Sieht so aus:

@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Das 30 Sekunden Intervall sollte ihn hoffentlich nicht aus der Kurve schmeissen.
Doch - sieh dir die Timestamps in History an.
Das sind keine 30 SekundenAbgesehen davon darf da gar nichts drin stehen, wenn "nur Änderungen" nicht angehakt ist
Das ist der Abstand ann bei gleichbleibenden Werten trotzdem geloggt werden soll -
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Das 30 Sekunden Intervall sollte ihn hoffentlich nicht aus der Kurve schmeissen.
Doch - sieh dir die Timestamps in History an.
Das sind keine 30 SekundenAbgesehen davon darf da gar nichts drin stehen, wenn "nur Änderungen" nicht angehakt ist
Das ist der Abstand ann bei gleichbleibenden Werten trotzdem geloggt werden soll -
@homoran
lese ich das falsch ? 11:31:06 bis 11:31:36 sind doch 30sekunden -- 11:31:36 bis 11:32:06 auch, oder ?@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
lese ich das falsch ? 11:31:06 bis 11:31:36 sind doch 30sekunden -- 11:31:36 bis 11:32:06 auch, oder ?
ich las 11:30:41 - 11:31:06
Aber stell das bitte trotzdem auf 0
-
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
lese ich das falsch ? 11:31:06 bis 11:31:36 sind doch 30sekunden -- 11:31:36 bis 11:32:06 auch, oder ?
ich las 11:30:41 - 11:31:06
Aber stell das bitte trotzdem auf 0
@homoran OK, habe ich auf Null gestellt
Wenn ich das aber so lasse, wann wird dann jemals aufgezeichnet, was ist der Trigger?Ich will ja nicht nur die Änderungen, ich möchte feste Intervalle damit ich in Grafana saubere Kurven bekomme.
Geht der Wert z.B. um 8:00 auf Null und um 10:00 wieder auf 50, dann habe ich bei "nur Änderungen" eine "schöne" Rampe zwischen den Punkten. Schreibe ich in kürzeren festen Intervallen hier z.B. die Null weiter, steigt meine Kurve eben erst um 10:00 wieder senkrecht nach oben auf 50.Was mir nicht einleuchtet ist, daß das alles ja auch bei den anderen Werten klappt.
Werde nun nochmal eine Parser Instanz anlegen und sehen was dann passiert. Diesmal werde ich die Zeilen auch nicht kopieren und abändern, sondern neu anlegen, vielleicht passiert beim Kopieren ja Mist.,

-
@homoran OK, habe ich auf Null gestellt
Wenn ich das aber so lasse, wann wird dann jemals aufgezeichnet, was ist der Trigger?Ich will ja nicht nur die Änderungen, ich möchte feste Intervalle damit ich in Grafana saubere Kurven bekomme.
Geht der Wert z.B. um 8:00 auf Null und um 10:00 wieder auf 50, dann habe ich bei "nur Änderungen" eine "schöne" Rampe zwischen den Punkten. Schreibe ich in kürzeren festen Intervallen hier z.B. die Null weiter, steigt meine Kurve eben erst um 10:00 wieder senkrecht nach oben auf 50.Was mir nicht einleuchtet ist, daß das alles ja auch bei den anderen Werten klappt.
Werde nun nochmal eine Parser Instanz anlegen und sehen was dann passiert. Diesmal werde ich die Zeilen auch nicht kopieren und abändern, sondern neu anlegen, vielleicht passiert beim Kopieren ja Mist.,

@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Wenn ich das aber so lasse, wann wird dann jemals aufgezeichnet, was ist der Trigger?
Natürlich!
Jede Aktualisierung, auch mit gleichem Wert.Erst wenn du oben "Nur Änderungen anhakst" würde nur geloggt wenn ein anderer Wert kommt und dieser sich von dem vorherigen mehr unterscheidet als in "Minimum difference" angegeben ist.
Da das aber in Diagrammen of zu unschönen Effekten führt kann man jetzt dort einen Wert eintragen nach welcher Zeit ohne geänderte Werte trotzdem ein neuer Eintrag gemacht werden soll.@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Geht der Wert z.B. um 8:00 auf Null und um 10:00 wieder auf 50, dann habe ich bei "nur Änderungen" eine "schöne" Rampe zwischen den Punkten. Schreibe ich in kürzeren festen Intervallen hier z.B. die Null weiter, steigt meine Kurve eben erst um 10:00 wieder senkrecht nach oben auf 50.
Das ist genau das was ich schrieb. Aber du hast nicht "nur Änderungen" aktiviert.
Den selben Effekt erreichst du außerdem wenn du in Flot als Typ "Auf Änderung" einstellst@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Was mir nicht einleuchtet ist, daß das alles ja auch bei den anderen Werten klappt.
Um das genau beurteilen zu können müssen erst einmal alle (möglichen und unmöglichen) Störeinflüsse abgeschalltet sein
-
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Wenn ich das aber so lasse, wann wird dann jemals aufgezeichnet, was ist der Trigger?
Natürlich!
Jede Aktualisierung, auch mit gleichem Wert.Erst wenn du oben "Nur Änderungen anhakst" würde nur geloggt wenn ein anderer Wert kommt und dieser sich von dem vorherigen mehr unterscheidet als in "Minimum difference" angegeben ist.
Da das aber in Diagrammen of zu unschönen Effekten führt kann man jetzt dort einen Wert eintragen nach welcher Zeit ohne geänderte Werte trotzdem ein neuer Eintrag gemacht werden soll.@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Geht der Wert z.B. um 8:00 auf Null und um 10:00 wieder auf 50, dann habe ich bei "nur Änderungen" eine "schöne" Rampe zwischen den Punkten. Schreibe ich in kürzeren festen Intervallen hier z.B. die Null weiter, steigt meine Kurve eben erst um 10:00 wieder senkrecht nach oben auf 50.
Das ist genau das was ich schrieb. Aber du hast nicht "nur Änderungen" aktiviert.
Den selben Effekt erreichst du außerdem wenn du in Flot als Typ "Auf Änderung" einstellst@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Was mir nicht einleuchtet ist, daß das alles ja auch bei den anderen Werten klappt.
Um das genau beurteilen zu können müssen erst einmal alle (möglichen und unmöglichen) Störeinflüsse abgeschalltet sein
@homoran Erst mal noch ein DANKE für Deine Geduld mit dem Newbie...

OK, falls ich das jetzt also kapiert haben sollte ;o) bedeutet das, wenn ich weder den Haken gesetzt noch ne Zeit eingetragen habe, daß:
Jedes Mal wenn der Parser den Wert abfragt, damit eine Aktualisierung erfolgt die dann direkt nach Influx bzw history geschrieben werden würde.
Der Parser hat als default intervall 5s., ich müsste demnach also alle 5 Sekunden einen Wert haben, oder?
Ich muss gleich weg, setze mich dann heute Abend nochmal dran -
@homoran Erst mal noch ein DANKE für Deine Geduld mit dem Newbie...

OK, falls ich das jetzt also kapiert haben sollte ;o) bedeutet das, wenn ich weder den Haken gesetzt noch ne Zeit eingetragen habe, daß:
Jedes Mal wenn der Parser den Wert abfragt, damit eine Aktualisierung erfolgt die dann direkt nach Influx bzw history geschrieben werden würde.
Der Parser hat als default intervall 5s., ich müsste demnach also alle 5 Sekunden einen Wert haben, oder?
Ich muss gleich weg, setze mich dann heute Abend nochmal dran@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
edes Mal wenn der Parser den Wert abfragt, damit eine Aktualisierung erfolgt die dann direkt nach Influx bzw history geschrieben werden würde.
Der Parser hat als default intervall 5s., ich müsste demnach also alle 5 Sekunden einen Wert haben, oder?wobei der Parser auch nur geänderte Werte schreibt
-
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
edes Mal wenn der Parser den Wert abfragt, damit eine Aktualisierung erfolgt die dann direkt nach Influx bzw history geschrieben werden würde.
Der Parser hat als default intervall 5s., ich müsste demnach also alle 5 Sekunden einen Wert haben, oder?wobei der Parser auch nur geänderte Werte schreibt
@homoran Ich hab jetzt nochmal an dem Problem weitergemacht, mit folgendem Ergebnis
Wenn ich für einen Parser Datenpunkt Influx aktiviere UND bei "still record-.." 30s eintrage, erfolgt keine Aufzeichnung in influx.
Wenn ich im nächsten Schritt zusätzlich"record changes only" anhake, erfolgt die Aufzeichnung in influx
Nun kommt das Interessante, für mich jedenfalls...
Nehme ich den Haken "record changes only" wieder raus, funktioniert die Aufzeichnung in Influx trotzdem weiterhin.
Das habe ich nun bei drei Datenpunkten durchgespielt, das Verhalten ist 100% nachvollziebar.
Damit habe ich zumindest mein Problem gelöst. -
@homoran Ich hab jetzt nochmal an dem Problem weitergemacht, mit folgendem Ergebnis
Wenn ich für einen Parser Datenpunkt Influx aktiviere UND bei "still record-.." 30s eintrage, erfolgt keine Aufzeichnung in influx.
Wenn ich im nächsten Schritt zusätzlich"record changes only" anhake, erfolgt die Aufzeichnung in influx
Nun kommt das Interessante, für mich jedenfalls...
Nehme ich den Haken "record changes only" wieder raus, funktioniert die Aufzeichnung in Influx trotzdem weiterhin.
Das habe ich nun bei drei Datenpunkten durchgespielt, das Verhalten ist 100% nachvollziebar.
Damit habe ich zumindest mein Problem gelöst.@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Wenn ich im nächsten Schritt zusätzlich"record changes only" anhake, erfolgt die Aufzeichnung in influx
Das ist so, weil "trotzdem aufzeichnen" ein Aufzeichnen "nur bei Änderung" in dem eingestellten Intervall aussetzt.
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Nehme ich den Haken "record changes only" wieder raus, funktioniert die Aufzeichnung in Influx trotzdem weiterhin.
Das wundert mich eigentlich, ich könnte mir aber Konstrukte vorstelln, warum das passiert.
Wichtiger wäre es zu wissen, ob geloggt wird, wenn "nur bei Änderung" nicht angehakt ist und ebenfalls der "trotzdem aufzeichnen" Wert auf 0 steht
-
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Wenn ich im nächsten Schritt zusätzlich"record changes only" anhake, erfolgt die Aufzeichnung in influx
Das ist so, weil "trotzdem aufzeichnen" ein Aufzeichnen "nur bei Änderung" in dem eingestellten Intervall aussetzt.
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
Nehme ich den Haken "record changes only" wieder raus, funktioniert die Aufzeichnung in Influx trotzdem weiterhin.
Das wundert mich eigentlich, ich könnte mir aber Konstrukte vorstelln, warum das passiert.
Wichtiger wäre es zu wissen, ob geloggt wird, wenn "nur bei Änderung" nicht angehakt ist und ebenfalls der "trotzdem aufzeichnen" Wert auf 0 steht
@homoran said in Parser schreibt nicht alle Werte nach Influx:
Wichtiger wäre es zu wissen, ob geloggt wird, wenn "nur bei Änderung" nicht angehakt ist und ebenfalls der "trotzdem aufzeichnen" Wert auf 0 steht
Das habe ich jetzt auch getestet, es wird geloggt
-
@homoran said in Parser schreibt nicht alle Werte nach Influx:
Wichtiger wäre es zu wissen, ob geloggt wird, wenn "nur bei Änderung" nicht angehakt ist und ebenfalls der "trotzdem aufzeichnen" Wert auf 0 steht
Das habe ich jetzt auch getestet, es wird geloggt
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
@homoran said in Parser schreibt nicht alle Werte nach Influx:
Wichtiger wäre es zu wissen, ob geloggt wird, wenn "nur bei Änderung" nicht angehakt ist und ebenfalls der "trotzdem aufzeichnen" Wert auf 0 steht
Das habe ich jetzt auch getestet, es wird geloggt
Das ist das korrekte Verhalten.
Das Feld "trotzdem aufzeichnen" ist nur bei Aktivierung von "nur bei Änderung" zu benutzen -
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
@homoran said in Parser schreibt nicht alle Werte nach Influx:
Wichtiger wäre es zu wissen, ob geloggt wird, wenn "nur bei Änderung" nicht angehakt ist und ebenfalls der "trotzdem aufzeichnen" Wert auf 0 steht
Das habe ich jetzt auch getestet, es wird geloggt
Das ist das korrekte Verhalten.
Das Feld "trotzdem aufzeichnen" ist nur bei Aktivierung von "nur bei Änderung" zu benutzen@homoran Danke ! Ein Frage hab ich noch. Ich habe nun 43 Regeln in einer Parser Instanz, immer dieselbe URL, was er ja erkennt soweit ich das verstanden habe. Gibt es hier bei der Performance was zu beachten, oder lass ich die z.B. einfach alle mit 20 Sekunden parsen ?
-
@homoran Danke ! Ein Frage hab ich noch. Ich habe nun 43 Regeln in einer Parser Instanz, immer dieselbe URL, was er ja erkennt soweit ich das verstanden habe. Gibt es hier bei der Performance was zu beachten, oder lass ich die z.B. einfach alle mit 20 Sekunden parsen ?
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
was er ja erkennt soweit ich das verstanden habe.
Ja!
da soll er nur einmal downloaden und dann alle Regeln abarbeiten.@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
lass ich die z.B. einfach alle mit 20 Sekunden parsen ?
Ich hoffe nicht, dass du irgendeine Internetseite alle 20 Sekunden abfragst.
Dort steht meistens in den Nutzungsbedingungen, dass eine automatisierte Abfrage verboten ist.
Und das nicht ohne Grund. So etwas kann wie eine DoS-Attacke wirken -
@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
was er ja erkennt soweit ich das verstanden habe.
Ja!
da soll er nur einmal downloaden und dann alle Regeln abarbeiten.@aiouh sagte in Parser schreibt nicht alle Werte nach Influx:
lass ich die z.B. einfach alle mit 20 Sekunden parsen ?
Ich hoffe nicht, dass du irgendeine Internetseite alle 20 Sekunden abfragst.
Dort steht meistens in den Nutzungsbedingungen, dass eine automatisierte Abfrage verboten ist.
Und das nicht ohne Grund. So etwas kann wie eine DoS-Attacke wirken
Hey! Du scheinst an dieser Unterhaltung interessiert zu sein, hast aber noch kein Konto.
Hast du es satt, bei jedem Besuch durch die gleichen Beiträge zu scrollen? Wenn du dich für ein Konto anmeldest, kommst du immer genau dorthin zurück, wo du zuvor warst, und kannst dich über neue Antworten benachrichtigen lassen (entweder per E-Mail oder Push-Benachrichtigung). Du kannst auch Lesezeichen speichern und Beiträge positiv bewerten, um anderen Community-Mitgliedern deine Wertschätzung zu zeigen.
Mit deinem Input könnte dieser Beitrag noch besser werden 💗
Registrieren Anmelden