js-controller 2.0 ab sofort im Latest Repo

[apollon77]

@MathiasJ Radar2 und broadlink explodieren nicht direkt aber im logs zeigen eine fehler. Und der weißt auf was hin. Welche genaue Auswirkung der hat weiß ich nicht.

Zu Ble: wie gesagt tut ja bei mir auch. Also ist die. Frage was dein Prod System da genau hat. Und das muss AlCalzone checken.

[crunchip]

@apollon77 ich wollte halt einfach nur mal testen, ob und was sich tut, wenn ich auf redis umstelle.
Beobachten konnt ich schön die veränderte Cpu Auslastung, da ich mir das in Grafana darstellen lasse

Bezüglich des Speicherverbrauchs, kann ich nur dies so wiedergeben, wie ich es hier vorfinde, und das ist nun mal

• vor dem Update 36% frei
• nach dem Update 26% frei

ohne sonst irgend etwas gemacht zu haben.
Vllt liegt es auch daran, das meine Iobroker Installation generell sehr groß ist und ich sehr viele Adapter installiert habe.
Die Frage ist, wie und wo sollte/könnte ich suchen.

[MathiasJ]

@apollon77
negativ...... Anwesenheit wird erkannt, im Log finde ich nichts.......
Broadlink läßt sich auch bedienen...der TV geht zumindest ein und aus......

Mein produktives System hat nichts, läuft noch auf JS-Controller 1.5.....
ich habe das prod. System nur ausgeschaltet und nun läuft das Testsystem mit JS 2.0
Das einizige, das mir auf den Zeiger geht, paw will ein nicht vorhandenes Update. Das hatte er aber schon vorher.

Was mir aufgefallen ist, der Slave mit dem Raspberry PI 3B+ wird 5 Grad heißer als vorher.....

[apollon77]

@crunchip das redis/redis leicht mehr cpu braucht ist schon bekannt und hier werden wir weiter optimieren.

Es kann aber sich sein das das nur ist weil redis als dB schneller antwortet. Damit: es gibt einfach höheren Durchsatz. Und ja damit höhere cpu Last.

Ich denke aber das die Größenordnung von der wir reden vollkommen ok ist.

[apollon77]

@MathiasJ 5 grad heißer ... ist das schlimm? Siehe sich letzter Post. Generell braucht der Controller 2.0 etwas weniger cpu Last, aber hat ein anderen gesamtverhalten. Die Berichte davon das es schneller ist bedeuten dann das der Durchsatz höher ist was generell ein anderes lastverhalten bedeutet.

Durch den rewrite ist ein Vergleich auf der Ebene Äpfel und Birnen. aber interessant Erkenntnis.

[MathiasJ]

@apollon77
Was mich aber wundert, dass Radar und Broadlink ohne Änderungen läuft.
Du hast ja geschrieben, dass man da was ändern soll.......
das kann ich jetzt nicht bestätigen

dafür hat sich gerade der Slave verabschiedet

[arteck]

@MathiasJ @crunchip euch ist aber schon klar dass mehr Funktionen auch mit mehr an Ressourcen zusammen hängt. Es ist halt so da Rede mehr verbraucht..klar es ackert auch mehr.. Vorher hast du mehr sd oder Platten Zugriffe gehabt..

Ich für mich muss sagen und ich habe es schon seid 1 Monat produktiv laufen.. ES IST BESSER.. Performanter
ergo auch die lade Zeit von der Visu ist besser

Und mein System ist auch nicht gerade klein..

[apollon77]

@MathiasJ sagte in js-controller 2.0 ab sofort im Latest Repo:

dafür hat sich gerade der Slave verabschiedet

Logs?details?

[MathiasJ]

@arteck
ist schon klar......
wie gesagt, ist auch nur mein Testsystem.....
@apollon77 Slave läuft...... man sollte bei der Überwachung vielleicht auch die richtige IP eingeben......

[Chaot]

@arteck Hast du redis/redis oder file/redis?

Oder anders gefragt:
Bringt die Umstellung von file/redis auf redis/redis noch Geschwindigkeit oder macht das dann eher nichts aus?
Prozessorlast und Speicher ist mir eher nebensächlich.

[AlCalzone]

@MathiasJ sagte in js-controller 2.0 ab sofort im Latest Repo:

Log im Debug:

Danke für den Report, bitte 0.10.1 probieren

[darkiop]

@Chaot sagte in js-controller 2.0 ab sofort im Latest Repo:

Oder anders gefragt:
Bringt die Umstellung von file/redis auf redis/redis noch Geschwindigkeit oder macht das dann eher nichts aus?
Prozessorlast und Speicher ist mir eher nebensächlich.

Vor der selben Frage steht ich auch gerade. Mit Umstellung auf js-controller 2.0 und dem Umzug der Daten für den Docker Container auf eine SSD in der Syno 918+ rennt das System eigentlich ganz ordentlich

[Chaot]

@darkiop
Mein System läuft auf file/redis und das ist schon deutlich schneller als file/file vorher.
Ich bin mir aber nicht sicher ob redis/redis nochmals Vorteile bringt.

[darkiop]

@Chaot Ok, danke für den Hinweis. Dann werd ich das dochmal angehen

Redis wird dann ebenfalls in einem Container auf der SSD neben dem Container für den ioBroker laufen. Muss ich, außer für ein Backup des Redis-Containers, noch irgendwas anderes beachten?

[apollon77]

@Chaot sagte in js-controller 2.0 ab sofort im Latest Repo:

Ich bin mir aber nicht sicher ob redis/redis nochmals Vorteile bringt.

Ich glaube das die Vorteile marginal sind. Der js-controller wird bei redis/redis weniger CPU brauchen und ja es könnte etwas schneller sein einfach weil Redis schneller ist - andererseits ist Redis "single-Threaded" und mehr Requests die auf eine Redis-Instanz gefeuert werden können sich auch gegenseitig behindern. Wie hoch die Performancegewinne am Ende ausfallen erwarte ich daher sehr System- und Adapter- und Kombinationsabhängig. Generell ist es etwas schneller als file/file. Da Objekte aber nicht so oft geändert/erzeugt werden als States ist der reine Vorteil von Objekten in Redis kleiner als der wenn man die States umstellt.

Redis/Redis ist, wie oben schon gesagt, die Grundlage um mittelfristig ein hochverfügbares System aufzubauen, bei dem zB zwei Raspis laufen und einer als "Hot Standby" agiert der übernimmt falls der erste ausfällt. Oder dafür das man einen Cluster von Hosts aufbauen kann und Adapter bei Bedarf von einem ausgefallenen Node auf einen automatisiert umstellt. Mit dem Support von Redis-Sentinel kann dafür auch die Redis-DB hochverfügbar gemacht werden. Für Hochverfügbarkeit DARF nichts in einem Dateisystem liegen ...

Lange Rede kurzer Sinn: Redis/Redis ist cool, aber Performancegewinne sind wenn ein Nebeneffekt. Die Zielsetzung dieses Features ist ein anderes.

[apollon77]

@darkiop sagte in js-controller 2.0 ab sofort im Latest Repo:

Muss ich, außer für ein Backup des Redis-Containers, noch irgendwas anderes beachten?

Infos zum Thema "Redis Persistance" siehe Artikel und Links oben.

Auch hier muss man überlegen was man will. Mit Redis hat man keine "alle paar Stunden Backups" wie bei den File-DBs aktuell. bedeutet: Wenn man Redis einmal am Tag backupt muss man bis dahin zurück im Worst Case.
Um das abzusichern kann man einen Redis-Slave aufsetzen, so hat man den aktuellen Stand auf zwei Hosts - hilft aber auch nur bei File-System-Fehlern und sollten dann getrennte Dateisysteme sein.

Eine Absicherung für "uups ich habe was gelöscht was ich nicht wollte" ist bei Redis wieder etwas schwieriger. Da ist man beim "BGSAVE" und Speichern des dump.drb . Diese Dump-File Generierung kostet aber kurzzeitig "doppelt RAM". Muss man wieder berücksichtigen.

Also Redis generell und speziell Redis für Objekte sollte man gut überlegen ...

[Chaot]

@apollon77 Danke für deine Ausführungen.
Also werde ich einstweilen bei file/redis bleiben.
Ausfallsicherheit bzw. Hochverfügbarkeit werde ich frühestens nächstes Jahr angehen.

So nebenbei:
Ist eigentlich geplant im ioBroker für Redis eine Backuplösung zu implementieren oder eventuell ein Adapter in Planung der sowas übernehmen könnte?

[apollon77]

@Chaot backitup kann das glaube ich schon.

[crunchip]

@apollon77 gerade mal nachgesehen, auch mein VZDump backup file ist von

• 4,68GB (alter Controller)
  auf
• 5,39GB (neuer Controller)
  angestiegen

[darkiop]

@apollon77 Alles klar, Danke für die ausführliche Info. Schau mir das mal an.

Ggf. teste ich dann auch erst file/redis wie @Chaot

---

Andere Frage, seit wann ist dem im Log die Process ID?