[Vorlage] JS: Log-Datei aufbereiten für VIS

joergeli

@Mic
Hallo Mic,
ich noch mal.
Mitternacht ist gerade vorbei und ich habe im Log festgestellt, daß mit dem neuen Script jetzt nur noch die Log-Einträge des aktuellen Tages vorhanden sind.
Beim "alten" Script blieben die Einträge des Vortages erhalten.
Ist das so gewollt, bzw. könnte man das wieder abändern, daß die alten Einträge erhalten bleiben?
Also quasi wie bisher ein "rollierendes" Log ( first in - last out).

Gruß
Jörg

kmxak

@Mic

Ja das kommt der Sache schon extrem nahe.
Telegram soll halt auch nicht zugemüllt werden.

Sage mal so.
Error tritt auf. Script wartet kurz ob noch mehr error kommen, wenn ja zusammenführen, wenn nein senden.
Error merken für Zeit x damit nicht nochmal gesendet wird.

Ggf ein Menü einbauen falls man explizit nachfragt kommen mehr Infos. Aktueller Fehler ist seit dem noch 5 mal aufgetreten.

Muss ich mir heute Abend mal genauer Gedanken machen, nur Scripten kann ich so eine Abfrage leider nicht das ist mir noch zu hoch:)

joergeli

@joergeli @Mic
Falscher Alarm - Heute sind die Log-Einträge vom Vortag auch nach Mitternacht erhalten geblieben.

Alles gut
Jörg

Negalein

@Mic sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Update:
Script siehe hier:

Hi Mic!

Ich habe gerade dein aktuelles Script für mich angepasst und beim Start hagelt es leider nur so von Fehlermeldungen.

javascript.0	2019-11-04 17:08:02.012	error	at TCP.onStreamRead [as onread] (internal/stream_base_commons.js:94:17)
javascript.0	2019-11-04 17:08:02.012	error	at Socket.Readable.push (_stream_readable.js:223:10)
javascript.0	2019-11-04 17:08:02.012	error	at readableAddChunk (_stream_readable.js:268:11)
javascript.0	2019-11-04 17:08:02.012	error	at addChunk (_stream_readable.js:287:12)
javascript.0	2019-11-04 17:08:02.011	error	at Socket.emit (events.js:198:13)
javascript.0	2019-11-04 17:08:02.011	error	at Socket.realHandler (/opt/iobroker/node_modules/ws/lib/WebSocket.js:825:20)
javascript.0	2019-11-04 17:08:02.011	error	at Receiver.add (/opt/iobroker/node_modules/ws/lib/Receiver.js:103:24)
javascript.0	2019-11-04 17:08:02.011	error	at Receiver.expectHandler (/opt/iobroker/node_modules/ws/lib/Receiver.js:499:31)
javascript.0	2019-11-04 17:08:02.011	error	at Receiver.finish (/opt/iobroker/node_modules/ws/lib/Receiver.js:541:12)
javascript.0	2019-11-04 17:08:02.011	error	at Receiver.flush (/opt/iobroker/node_modules/ws/lib/Receiver.js:347:3)
javascript.0	2019-11-04 17:08:02.011	error	at /opt/iobroker/node_modules/ws/lib/Receiver.js:508:14
javascript.0	2019-11-04 17:08:02.011	error	at Receiver.applyExtensions (/opt/iobroker/node_modules/ws/lib/Receiver.js:371:5)
javascript.0	2019-11-04 17:08:02.011	error	at /opt/iobroker/node_modules/ws/lib/Receiver.js:536:18
javascript.0	2019-11-04 17:08:02.011	error	at Receiver.ontext (/opt/iobroker/node_modules/ws/lib/WebSocket.js:841:10)
javascript.0	2019-11-04 17:08:02.011	error	at WebSocket.emit (events.js:198:13)
javascript.0	2019-11-04 17:08:02.011	error	at WebSocket.onMessage (/opt/iobroker/node_modules/ws/lib/WebSocket.js:442:14)
javascript.0	2019-11-04 17:08:02.011	error	at WebSocket.ws.onmessage (/opt/iobroker/node_modules/engine.io-client/lib/transports/websocket.js:146:10)
javascript.0	2019-11-04 17:08:02.011	error	at WS.Transport.onData (/opt/iobroker/node_modules/engine.io-client/lib/transport.js:137:8)
javascript.0	2019-11-04 17:08:02.011	error	at WS.Transport.onPacket (/opt/iobroker/node_modules/engine.io-client/lib/transport.js:145:8)
javascript.0	2019-11-04 17:08:02.011	error	at WS.Emitter.emit (/opt/iobroker/node_modules/engine.io-client/node_modules/component-emitter/index.js:133:20)
javascript.0	2019-11-04 17:08:02.011	error	at WS.<anonymous> (/opt/iobroker/node_modules/engine.io-client/lib/socket.js:268:10)
javascript.0	2019-11-04 17:08:02.011	error	at Socket.onPacket (/opt/iobroker/node_modules/engine.io-client/lib/socket.js:451:14)
javascript.0	2019-11-04 17:08:02.011	error	at Socket.Emitter.emit (/opt/iobroker/node_modules/engine.io-client/node_modules/component-emitter/index.js:133:20)
javascript.0	2019-11-04 17:08:02.011	error	at Socket.<anonymous> (/opt/iobroker/node_modules/component-bind/index.js:21:15)
javascript.0	2019-11-04 17:08:02.011	error	at Manager.ondata (/opt/iobroker/node_modules/socket.io-client/lib/manager.js:322:16)
javascript.0	2019-11-04 17:08:02.011	error	at Decoder.add (/opt/iobroker/node_modules/socket.io-parser/index.js:246:12)
javascript.0	2019-11-04 17:08:02.011	error	at Decoder.Emitter.emit (/opt/iobroker/node_modules/component-emitter/index.js:134:20)
javascript.0	2019-11-04 17:08:02.010	error	at Decoder.<anonymous> (/opt/iobroker/node_modules/component-bind/index.js:21:15)
javascript.0	2019-11-04 17:08:02.010	error	at Manager.ondecoded (/opt/iobroker/node_modules/socket.io-client/lib/manager.js:332:8)
javascript.0	2019-11-04 17:08:02.010	error	at Manager.Emitter.emit (/opt/iobroker/node_modules/socket.io-client/node_modules/component-emitter/index.js:133:20)
javascript.0	2019-11-04 17:08:02.010	error	at Manager.<anonymous> (/opt/iobroker/node_modules/component-bind/index.js:21:15)
javascript.0	2019-11-04 17:08:02.010	error	at Socket.onpacket (/opt/iobroker/node_modules/socket.io-client/lib/socket.js:236:12)
javascript.0	2019-11-04 17:08:02.010	error	at Socket.onack (/opt/iobroker/node_modules/socket.io-client/lib/socket.js:312:9)
javascript.0	2019-11-04 17:08:02.010	error	at Socket.adapter.getForeignState (/opt/iobroker/node_modules/iobroker.javascript/main.js:845:17)
javascript.0	2019-11-04 17:08:02.010	error	at createProblemObject (/opt/iobroker/node_modules/iobroker.javascript/main.js:1254:17)
javascript.0	2019-11-04 17:08:02.010	error	at prepareScript (/opt/iobroker/node_modules/iobroker.javascript/main.js:1201:37)
javascript.0	2019-11-04 17:08:02.010	error	at compile (/opt/iobroker/node_modules/iobroker.javascript/main.js:978:28)
javascript.0	2019-11-04 17:08:02.009	error	at Object.createScript (vm.js:277:10)
javascript.0	2019-11-04 17:08:02.009	error	at new Script (vm.js:83:7)
javascript.0	2019-11-04 17:08:02.009	error	SyntaxError: Unexpected token *
javascript.0	2019-11-04 17:08:02.009	error	^
javascript.0	2019-11-04 17:08:02.007	error	*/
javascript.0	2019-11-04 17:08:02.006	error	at script.js.common.ioBroker_Log:263
javascript.0	2019-11-04 17:08:02.006	error	script.js.common.ioBroker_Log compile failed:

Könntest du bitte drüberschaun, ob ich irgendwo was falsch konfiguriert habe?

Danke dir!!

ioBroker_Log_für_Vis.txt

Glasfaser

@Negalein

javascript.0 2019-11-04 17:08:02.009 error SyntaxError: Unexpected token *
javascript.0 2019-11-04 17:08:02.009 error ^
javascript.0 2019-11-04 17:08:02.007 error */
javascript.0 2019-11-04 17:08:02.006 error at script.js.common.ioBroker_Log:263
javascript.0 2019-11-04 17:08:02.006 error script.js.common.ioBroker_Log compile failed:

Da ist ein Sternchen ( * ) reingekommen !!

ändere mal auf :

//

Negalein

@Glasfaser sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Da ist ein Sternchen ( * ) reingekommen !!

Danke!

Wie lange dauert es, bis das 1. mal was in den Objekten steht?
Derzeit ist noch alles leer!

objects - ioBroker (9).png

Glasfaser

@Negalein

Erzeuge mal absichtlich ein Error Meldung !!

Negalein

@Glasfaser sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Erzeuge mal absichtlich ein Error Meldung !!

funktioniert.
Danke

Glasfaser

@Negalein

Kein Problem

Negalein

@Glasfaser sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Kein Problem

kannst du mir nochmal weiterhelfen?

Wie zeig ich das am besten in VIS an?

Ich hab zB den DP:
javascript.0.Log-Script.logWarnanderror.log

Mit diesem Inhalt:
2019-11-04 20:43:30.720 - warn: denon.0 [2 Einträge] AVR timed out due to no response2019-11-04 20:43:10.087 - warn: host.iobroker [3 Einträge] "system.host.ioBroker-RasPi4" is offline2019-11-04 20:35:03.037 - error: fb-checkpresence.0 Error getHostNo: undefined2019-11-04 20:35:03.037 - error: fb-checkpresence.0 soapAction error: Error: connect EHOSTUNREACH 10.0.1.1:490002019-11-04 20:18:13.308 - warn: admin.0 [2 Einträge] No repository source configured

Dann auch noch diesen DP:
javascript.0.Log-Script.logWarnanderror.logJSON

Mit diesem Inhalt:
[{"date":"04.11.2019 20:43","level":"warn","source":"denon.0","msg":"[2 Einträge] AVR timed out due to no response"},{"date":"04.11.2019 20:43","level":"warn","source":"host.iobroker","msg":"[3 Einträge] \"system.host.ioBroker-RasPi4\" is offline"},{"date":"04.11.2019 20:35","level":"error","source":"fb-checkpresence.0","msg":"Error getHostNo: undefined"},{"date":"04.11.2019 20:35","level":"error","source":"fb-checkpresence.0","msg":"soapAction error: Error: connect EHOSTUNREACH 10.0.1.1:49000"},{"date":"04.11.2019 20:18","level":"warn","source":"admin.0","msg":"[2 Einträge] No repository source configured"}]

Als Basic-Table sieht es kacke aus und ich weis nicht wie ich diese Tabelle anpassen/aufhübschen könnte.
Edit vis (1).png

Glasfaser

@Negalein

Nimm mein Widget :

[{"tpl":"tplHtml","data":{"g_fixed":true,"g_visibility":false,"g_css_font_text":true,"g_css_background":false,"g_css_shadow_padding":false,"g_css_border":false,"g_gestures":false,"g_signals":false,"g_last_change":false,"visibility-cond":"==","visibility-val":1,"visibility-groups-action":"hide","refreshInterval":"0","signals-cond-0":"==","signals-val-0":true,"signals-icon-0":"/vis/signals/lowbattery.png","signals-icon-size-0":0,"signals-blink-0":false,"signals-horz-0":0,"signals-vert-0":0,"signals-hide-edit-0":false,"signals-cond-1":"==","signals-val-1":true,"signals-icon-1":"/vis/signals/lowbattery.png","signals-icon-size-1":0,"signals-blink-1":false,"signals-horz-1":0,"signals-vert-1":0,"signals-hide-edit-1":false,"signals-cond-2":"==","signals-val-2":true,"signals-icon-2":"/vis/signals/lowbattery.png","signals-icon-size-2":0,"signals-blink-2":false,"signals-horz-2":0,"signals-vert-2":0,"signals-hide-edit-2":false,"lc-type":"last-change","lc-is-interval":true,"lc-is-moment":false,"lc-format":"","lc-position-vert":"top","lc-position-horz":"right","lc-offset-vert":0,"lc-offset-horz":0,"lc-font-size":"12px","lc-font-family":"","lc-font-style":"","lc-bkg-color":"","lc-color":"","lc-border-width":"0","lc-border-style":"","lc-border-color":"","lc-border-radius":10,"lc-zindex":0,"html":"ioBroker Warn - Error Logs","name":"!_Überschrift"},"style":{"left":"699px","top":"7px","z-index":"10","color":"white","font-family":"Arial, Helvetica, sans-serif","font-size":"20px","width":"600px","height":"30px","text-align":"center"},"widgetSet":"basic"},{"tpl":"tplHqButton","data":{"g_fixed":false,"g_visibility":false,"g_css_font_text":false,"g_css_background":false,"g_css_shadow_padding":false,"g_css_border":false,"g_gestures":false,"g_signals":false,"g_last_change":false,"visibility-cond":"==","visibility-val":1,"visibility-groups-action":"hide","oid":"javascript.0.Log-Script.logWarnanderror.clearJSON","min":"false","max":"true","iconName":"/vis.0/Wohnen/Mülle.png","btIconWidth":"45","offsetAuto":true,"leftOffset":"23","topOffset":"55","signals-cond-0":"==","signals-val-0":true,"signals-icon-0":"/vis/signals/lowbattery.png","signals-icon-size-0":0,"signals-blink-0":false,"signals-horz-0":0,"signals-vert-0":0,"signals-hide-edit-0":false,"signals-cond-1":"==","signals-val-1":true,"signals-icon-1":"/vis/signals/lowbattery.png","signals-icon-size-1":0,"signals-blink-1":false,"signals-horz-1":0,"signals-vert-1":0,"signals-hide-edit-1":false,"signals-cond-2":"==","signals-val-2":true,"signals-icon-2":"/vis/signals/lowbattery.png","signals-icon-size-2":0,"signals-blink-2":false,"signals-horz-2":0,"signals-vert-2":0,"signals-hide-edit-2":false,"lc-type":"last-change","lc-is-interval":true,"lc-is-moment":false,"lc-format":"","lc-position-vert":"top","lc-position-horz":"right","lc-offset-vert":0,"lc-offset-horz":0,"lc-font-size":"12px","lc-font-family":"","lc-font-style":"","lc-bkg-color":"","lc-color":"","lc-border-width":"0","lc-border-style":"","lc-border-color":"","lc-border-radius":10,"lc-zindex":0,"pushButton":true,"g_leftRight":true,"timeAsInterval":"true","infoLeftFontSize":"12","infoFontRightSize":"12","infoLeftPaddingLeft":"15","infoLeftPaddingRight":"50","infoRightPaddingRight":"15","descriptionLeft":"Clear JSON log Warnanderror","descriptionLeftDisabled":true},"style":{"left":"1302px","top":"1px","z-index":"30","width":"60px","height":"54px"},"widgetSet":"hqwidgets"},{"tpl":"tplTableBody","data":{"g_fixed":true,"g_visibility":false,"g_css_font_text":true,"g_css_background":true,"g_css_shadow_padding":true,"g_css_border":true,"g_gestures":false,"g_signals":false,"visibility-cond":"==","visibility-val":1,"visibility-groups-action":"hide","static_value":"","signals-cond-0":"==","signals-val-0":true,"signals-icon-0":"/vis.0/Kuddel1/lowbattery.png","signals-icon-size-0":0,"signals-blink-0":false,"signals-horz-0":0,"signals-vert-0":0,"signals-hide-edit-0":false,"signals-cond-1":"==","signals-val-1":true,"signals-icon-1":"/vis.0/Kuddel1/lowbattery.png","signals-icon-size-1":0,"signals-blink-1":false,"signals-horz-1":0,"signals-vert-1":0,"signals-hide-edit-1":false,"signals-cond-2":"==","signals-val-2":true,"signals-icon-2":"/vis.0/Kuddel1/lowbattery.png","signals-icon-size-2":0,"signals-blink-2":false,"signals-horz-2":0,"signals-vert-2":0,"signals-hide-edit-2":false,"table_oid":"javascript.0.Log-Script.logWarnanderror.logJSON","colName1":"Uhrzeit","colWidth1":"1x","colCount":"4","colWidth2":"10px","colWidth4":"450px","colWidth5":"40px","colWidth6":"40px","colName2":"Log-Eintrag","class":"mdui-table mdui-table-ascard-r250-l mdui-table-striped noSwipe","show_scroll":true,"hide_header":true,"g_last_change":false,"lc-type":"last-change","lc-is-interval":true,"lc-is-moment":false,"lc-format":"","lc-position-vert":"top","lc-position-horz":"right","lc-offset-vert":0,"lc-offset-horz":0,"lc-font-size":"12px","lc-font-family":"","lc-font-style":"","lc-bkg-color":"","lc-color":"","lc-border-width":"0","lc-border-style":"","lc-border-color":"","lc-border-radius":10,"lc-zindex":0,"new_on_top":true,"max_rows":"2000","detailed_wid":"w00377","name":"System_Logs","g_header_§2":true,"colName3":"Log-Eintrag","colWidth3":"100px"},"style":{"left":"594px","top":"43px","width":"770px","height":"680px","text-align":"left","color":"#ffffff","background-color":"","font-family":"Arial, Helvetica, sans-serif","z-index":"20","background":"","box-shadow":"","border-radius":"10px","font-size":"15px","border-style":"solid","border-color":"#303030"},"widgetSet":"basic"},{"tpl":"tplShapes","data":{"g_fixed":true,"g_visibility":false,"g_css_font_text":false,"g_css_background":true,"g_css_shadow_padding":true,"g_css_border":true,"g_gestures":false,"g_signals":false,"g_last_change":false,"visibility-cond":"==","visibility-val":1,"visibility-groups-action":"hide","svgType":"square","strokeColor":"","fill":"#212121","strokeWidth":"5","scaleWidth":"1","scaleHeight":"1","signals-cond-0":"==","signals-val-0":true,"signals-icon-0":"/vis/signals/lowbattery.png","signals-icon-size-0":0,"signals-blink-0":false,"signals-horz-0":0,"signals-vert-0":0,"signals-hide-edit-0":false,"signals-cond-1":"==","signals-val-1":true,"signals-icon-1":"/vis/signals/lowbattery.png","signals-icon-size-1":0,"signals-blink-1":false,"signals-horz-1":0,"signals-vert-1":0,"signals-hide-edit-1":false,"signals-cond-2":"==","signals-val-2":true,"signals-icon-2":"/vis/signals/lowbattery.png","signals-icon-size-2":0,"signals-blink-2":false,"signals-horz-2":0,"signals-vert-2":0,"signals-hide-edit-2":false,"lc-type":"last-change","lc-is-interval":true,"lc-is-moment":false,"lc-format":"","lc-position-vert":"top","lc-position-horz":"right","lc-offset-vert":0,"lc-offset-horz":0,"lc-font-size":"12px","lc-font-family":"","lc-font-style":"","lc-bkg-color":"","lc-color":"","lc-border-width":"0","lc-border-style":"","lc-border-color":"","lc-border-radius":10,"lc-zindex":0,"rotate":"45","name":"!_Hintergrund"},"style":{"left":"593px","top":"0px","background":"#212121","background-color":"#212121","z-index":"0","width":"783px","height":"730px","border-radius":"10px","box-shadow":"2px 2px 3px rgba(20, 20, 20, 50)","font-family":"Arial, Helvetica, sans-serif"},"widgetSet":"basic"}]

Datenpunkt :

Negalein

@Glasfaser sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Nimm mein Widget :

Danke

Bin noch am überlegen ob ich das Log-Script weiterverwende oder nicht.

In der Zeit wo der Cron läuft wird das System doch sehr träge. Und das trotz sehr guter Hardware.

Glasfaser

@Negalein

Ich sehe kein Trägheit durch das verwenden des Skript´s , aber dazu kann dir @Mic mehr dazu erklären bzw. sagen .

sigi234

@Negalein sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

In der Zeit wo der Cron läuft wird das System doch sehr träge. Und das trotz sehr guter Hardware.

Das stimmt, ich schalte es nur manchmal ein.

crunchip

@Negalein da es in der Vergangenheit diesbezüglich Probleme gab, hatte Mic doch schon das Skript angepasst. Hast du vllt noch eine alte Version laufen?

Negalein

@crunchip sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Hast du vllt noch eine alte Version laufen?

Nein, ich verwende die aktuelle 3.1

Glasfaser

@Negalein

Sehr komisch … in der aktuellen sind 20 sek. und bei dir 10 sek. !??

Negalein

@Glasfaser sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

in der aktuellen sind 20 sek. und bei dir 10 sek. !??

Ja, hatte ich am Anfang auf 10 Sekunden geändert.
Dann schrittweise um 10 Sekunden erhöht.
Bei 1 Minute hab ich aufgehört.

Jedesmal wenn der Cron gestartet wird, wird das System sehr träge.

Glasfaser

@Negalein

Noch nie Probleme auf meiner Synology gehabt , aber sicherlich kann @Mic vielleicht eine Fehlerquelle bei dir finden ….. warum es bei dir das System sehr träge macht !?

Negalein

@Glasfaser sagte in [Vorlage] JS: Log-Datei aufbereiten für VIS:

Noch nie Probleme auf meiner Synology gehabt , aber sicherlich kann @Mic vielleicht eine Fehlerquelle bei dir finden ….. warum es bei dir das System sehr träge macht !?

Ja, ich warte jetzt mal auf @Mic!

Normal kenn ich auf der Syno auf keine Performanceeinbußen.
Die CPU ist von 5% auf 16% angestiegen.
Der RAM nur sehr minimal.

Aber am ioBroker hab ich es vorallem an der VIS bemerkt, dass der Seitenaufbau sehr träge war und
zB ein Button mit mdui-raisedbutton mdui-blue-blink nur ca. alle 10 Sekunden geblinkt hat (statt normal jede Sekunde).

NEWS

[Vorlage] JS: Log-Datei aufbereiten für VIS

Support us

1.4k
Online

30.7k
Users

77.3k
Topics

1.2m
Posts

NEWS

[Vorlage] JS: Log-Datei aufbereiten für VIS

Support us

1.4kOnline

30.7kUsers

77.3kTopics

1.2mPosts

1.4k
Online

30.7k
Users

77.3k
Topics

1.2m
Posts