[Vorlage] JS: Log-Datei aufbereiten für VIS

[Latzi]

@Glasfaser
mein Block error sieht folgendermaßen aus:

 {
    id:             'error',
    filter_all:     [' - error:', ''],  // nur Logeinträge mit Level 'error'
    filter_any:     [''],
    blacklist:      ['', '', ''],
    clean:          ['', '', ''],
    merge:          true,
    sortDescending: true,
    jsonColumns:    ['date','level','source','msg'],
    jsonDateFormat: 'dd.mm. hh:mm',
    jsonLogLength:  200,
    jsonMaxLines:   60,
    jsonCssToLevel: true,
  }

Kannst du das bitte mal mit deinem Block vergleichen?

[Glasfaser]

@Latzi sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Füge mal das ein :

 {

    id:             'error',

    filter_all:     [' - error: ', ''],  // nur Logeinträge mit Level 'error'

    filter_any:     [''],

    blacklist:      ['', '', ''],

    clean:          ['', '', ''],

    merge:          true,

    sortDescending: true,

    jsonColumns:    ['date','level','source','msg'],

    jsonDateFormat: 'dd.mm. hh:mm',

    jsonLogLength:  200,

    jsonMaxLines:   60,

    jsonCssToLevel: true,

  }

[Latzi]

@Glasfaser ändert leider nichts

[Glasfaser]

@Latzi

Mhhh , habe gerade nochmal verglichen , dachte es hatte einfluss das nach dem - error: ein Leerzeichen fehlte ...

Kann du den Error im Datenpunkt log sehen ?

[Latzi]

@Glasfaser nein, ist darin nicht enthalten

[Glasfaser]

@Latzi

Da bin gerade überfragt ….. mehr kann ich dir im Moment leider nicht weiterhelfen , da ich gerade ein großes ? dazu habe …

Warte auf Mic

[Latzi]

@Glasfaser vielen Dank für deine Mühe

[Mic]

@Latzi sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

ich hab im Log folgende Fehlermeldungen:

2020-02-14 20:06:16.407 - error: rtspStream.0 (14568) uncaught exception: i is not defined
2020-02-14 20:06:16.408 - error: rtspStream.0 (14568) ReferenceError: i is not defined
2020-02-14 20:06:17.452 - error: host.Pi4-Server Caught by controller[43]: frame=95046 fps= 15 q=6.1 size= 315696kB time=01:45:32.56 bitrate= 408.4kbits/s speed= 1x
(...)

Es wird mir im DP error aber nichts angezeigt. Ich habe auch nichts deratiges in der blacklist. Hast du eine Erklärung dafür?

Bitte ersetze mal folgende Zeile im Script:

const LOG_PATT =  '([0-9_.\\-:\\s]*)(\\s+\\- )(silly|debug|info|warn|error|)(: )([a-z0-9.\\-]*)(\\s)(.*)';

Durch:

const LOG_PATT =  '([0-9_.\\-:\\s]*)(\\s+\\- )(silly|debug|info|warn|error|)(: )([^\\s]*)(\\s)(.*)';

[Latzi]

@Mic sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

const LOG_PATT = '([0-9_.\-:\s])(\s+\- )(silly|debug|info|warn|error|)(: )([^\s])(\s)(.*)';

@Mic Applaus, Applaus
Jetzt kommen auch die Meldungen vom rtspStream durch (es waren nicht nur die error-Meldungen, eigentlich waren alle Typen betroffen).
Muss ich diese Zeile für spätere Versionen sichern oder baust du es allgemein im Script ein?

[Mic]

@Latzi
Gern geschehen

@Latzi sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Muss ich diese Zeile für spätere Versionen sichern oder baust du es allgemein im Script ein?

Baue ich ins Script ein, Update folgt sehr bald.

[Mic]

Neue Log-Script-Version 4.8

Neuerungen:

 *  + Allow regular expressions in BLACKLIST_GLOBAL
 *  + Allow regular expressions in LOG_FILTER: 'blacklist', 'clean', 'filter_all', 'filter_any'
 *  - Fix: Log line regex, which did not allow upper case letters in host (source)

Das heißt, es werden nun auch Regular Expressions unterstützt.

Um also etwa Einträge wie z.B.

script.js.System.-_Log-Script: registered 8 subscriptions and 1 schedule
script.js.System.Backup: registered 0 subscriptions and 0 schedules
script.js.System.Test: registered 3 subscriptions and 2 schedules

allesamt zu eliminieren, kann man einfach in BLACKLIST_GLOBAL eintragen:

/registered [0-9]+ subscriptions and [0-9]+ schedules/

Oder um sämtliche script.js.System.XXXXXXXXXX: herauszuschneiden aus den Logzeilen, trägt man in LOG_FILTER unter clean folgendes ein:

/script\.js\.[^:]*: /

Weitere Beispiele sind im Script selbst. Viel Spaß damit.
Um eigene Regex zu erstellen, eignet sich https://regex101.com/ gut.

---

Hier das aktuelle Script wie immer: https://github.com/Mic-M/iobroker.logfile-script

Zum Update von der Vorversion: Einfach alles unterhalb von hier ersetzen:

/*************************************************************************************************************************
 * Ab hier nichts mehr ändern / Stop editing here!
 *************************************************************************************************************************/

[saeft_2003]

@sigi234 sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

@Latzi sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

das Löschdatum beim erstmaligen Betätigen aktualisiert wird

Wo siehst du das? Erledigt, ist bei mir nicht so.

Würdest du mir diesen view zu verfügung stellen? Sieht echt klasse aus und würde mir jede menge arbeit sparen

[sigi234]

@saeft_2003 sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

@sigi234 sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

@Latzi sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

das Löschdatum beim erstmaligen Betätigen aktualisiert wird

Wo siehst du das? Erledigt, ist bei mir nicht so.

Würdest du mir diesen view zu verfügung stellen? Sieht echt klasse aus und würde mir jede menge arbeit sparen

VIEW LOG MIC.txt

[saeft_2003]

@sigi234

Vielen Dank

[saeft_2003]

@sigi234

Ich habe jetzt dein view importiert, aber zurecht komme ich irgendwie nicht

Wie und welche Quelle muss ich bei dem border log widget auswählen? ich sehe nur ein graues Bild und die widget zur logauswahl und zum löschen sehe ich gar nicht. Wäre nett wenn du mir ein wenig auf die sprünge helfen könntest

[sigi234]

@saeft_2003 sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

widget zur logauswahl und zum löschen sehe ich gar nicht

Material Design Widgets installieren.
https://forum.iobroker.net/topic/26925/test-adapter-material-design-widgets-v0-2-x

[sigi234]

@saeft_2003 sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Wie und welche Quelle muss ich bei dem border log widget auswählen?

Keine, das ist nur ein Border!

Wenn du das MDW installiert hast, siehst du die Vis-materialdesign-Table

[saeft_2003]

@sigi234

Alles klar hat jetzt bestens geklappt. Nur das komische ist in meiner Ordnerstruktor vom skript gibt es kein logall.

[Mic]

Tipp:
Um im VIS anzuzeigen, ob das Script erfolgreich läuft, könnt ihr folgendes Widget benutzen:
https://forum.iobroker.net/post/384051

Das HTML-Widget prüft, ob innerhalb der letzten 30 Sekunden das Script erfolgreich gelaufen ist. Ausgabe-Beispiel:

Falls nicht erfolgreich gelaufen innerhalb der letzten 30 Sekunden:

Im Unterschied zum Datenpunkt javascript.0.scriptEnabled.Log-Script, der nur den Status anzeigt, ob das Script aktiviert ist, wird mit obigem Widget auch geprüft, ob das Script erfolgreich lief.
Text "inactive" ist nicht ganz korrekt merke ich gerade, besser wäre wohl "Script Error" oder ähnliches.
Anzupassen im HTML des Widgets, unter:

[Glasfaser]

@Mic

Sehr praktische Idee !