Test Adapter hueemu (Hue Emulator) v0.0.x

[Neopholus]

@holomekc
Soweit funktionieren jetzt die Hausautomatisierungstasten an meiner Harmony und eine Liste aller Lampen ist auch am Geräte-Display angezeigt.

Was mit aufgefallen ist:

• Manchmal dauert das Schalten über die Harmony relativ lange. Konnte noch nicht herausfinden, woran das liegt. Schaue ich mir noch an, könnte aber an der Harmony liegen.
• Häufig passiert folgendes, wenn man ein Gerät schaltet (über die Tasten oder im Menu ist egal, man sieht die Fehlermeldungen aber nur im Geräte-Menu):
  • Klicken auf "Lampe ein"
  • Lampe geht ein
  • Der angezeigte Status der Lampe auf der Harmony ändert sich sofort (hier hat die Harmony noch kein Feedback von Hue Emu erhalten, ich vermute, er nimmt einfach an, dass der Schaltbefehl erfolgreich war)
  • Neben der Lampe wird nach ein paar Sekunden ein rotes "!" angezeigt und darunter die Fehlermeldung "Keine Verbindung"
  • Nach weiteren wenigen Sekunden ist die Meldung wieder verschwunden.

Ich habe das Log-Level zwar auf silly hochgestellt, aber so ganz klar ist mir das Verhalten nicht. Eine Vermutung:

• Die Harmony frägt alle ca. 10 Sekunden den Status der Lampen ab
• Klickt man auf eine Lampe, sendet de Harmony einen Befehl an den Hue Emulator
• Hue Emulator schaltet die Lampe, sendet aber kein Feedback an die Harmony, dass geschaltet wurde (stimmt das?)
• Nach einem relativ kurzen Timeout geht die Harmony dann davon aus, dass die Verbindung unterbrochen ist und zeigt den Fehler an, wie oben beschrieben
• Bei der nächsten zyklischen Anfrage von Harmony an Hue Emulator kommen dann die aktuellen Lampenzustände. Harmony geht davon aus, dass die Verbindung wieder hergestellt worden ist, und löscht die Fehlermeldung.

Könnte das sein? Sollte der Hue Emulator nach einem Schaltvorgang ein Statusupdate schicken? Ich habe leider keine Hue Bridge und kann das Verhalten daher leider nicht überprüfen.

Laut Hue-API-Dokumentation, Kapitel 1.6.5. wird eine Antwort wie z.B.

[
	{"success":{"/lights/1/state/bri":200}},
	{"success":{"/lights/1/state/on":true}},
	{"success":{"/lights/1/state/hue":50000}}
]

erwartet nach einem

/api/<username>/lights/<id>/state

eine Antwort wie z.B.

[
	{"success":{"/lights/1/state/bri":200}},
	{"success":{"/lights/1/state/on":true}},
	{"success":{"/lights/1/state/hue":50000}}
]

Update:
Laut Wireshark wird gesendet:

[{"success":{"/lights/1/state/on":false}}]

Meine Vermutung war also falsch. Irgendeine andere Idee, woran es liegen kann?

Update 2
In meinem PCap-Trace, den ich gerade analysiert habe, kommen durchaus Statusänderungen einer Lampe vor, auf deren HTTP-Request nicht geantwortet wurde. Das ist komisch, da der Hue Emulator ja prinzipiell funktioniert und auch im Log kein Fehler steht. Irgendwie scheint es Situationen zu geben, auf die der Hue Emulator zwar den Status intern umstellt im Objekt, dann aber keine Antwort verschickt.

Viele Grüße
Stefan

[holomekc]

@Neopholus
Hi Danke für die vielen Infos und detaillierten Analysen. Wenn ich jetzt das Update 2 richtig verstanden habe siehst du das Requests (Ich vermute /api/<username>/lights/<id>/state) nicht beantwortet werden? Also die Vermutung ist das Hamony hier in einen Timeout läuft. Ist das 100% reproduzierbar oder nur hin und wieder?

Der Request beinhaltet nur das Ein- und Ausschalten oder? Ich kann heute Abend mal probieren das Interface zu bombardieren und zu schauen, ob ich das auch nachstellen kann.

Optimal wäre, wenn du den Request mit allen Details von Nachricht body, header in einen curl formulierst und auf der gleichen Maschine abschickst, wo auch der Emulator läuft. Somit könnte man ausschließen, dass es irgendwie an der Netzwerkverbindung liegt.

Ich hatte am Anfang so ein ähnliches Problem, welches aber 100% reproduzierbar war. Daher hatte ich HTTP Header: Connection: close hinzugefügt, da einige Clients sonst Probleme damit hatten und die Hue Bridge das tatsächlich auch schickt.

[Neopholus]

@holomekc
Hi, wahrscheinlich bin ich schon zu spät dran, aber um deine Fragen zu beantworten:

• Ja, es geht um simple Anfragen wie /api/<username>/lights/<id>/state
• Tritt nicht reproduzierbar auf. Zumindest ist mir bisher kein Muster aufgefallen.

Eine Nachricht, die beantwortet wird:

PUT /api/60329b2b-ff27-XXXX-XXXX-c7f8b05b00a2/lights/5/state HTTP/1.1
connection: close, TE
content-length: 12
user-agent: LuaSocket 2.0.2
te: trailers
content-type: application/json
host: 192.168.3.105
{"on":false}


HTTP/1.1 200 OK
X-Powered-By: Express
Access-Control-Allow-Origin: *
Access-Control-Allow-Methods: POST, GET, OPTIONS, PUT, DELETE, HEAD
Access-Control-Allow-Credentials: true
Access-Control-Max-Age: 3600
Access-Control-Allow-Headers: Origin, X-Requested-With, Content-Type, Accept
Connection: close
Content-Type: application/json; charset=utf-8
Content-Length: 42
ETag: W/"2a-uykK5pYlmrKxqMEgMLTtq2vhWxQ"
Date: Tue, 31 Mar 2020 20:15:57 GMT

[{"success":{"/lights/5/state/on":false}}]

Ein nicht beantworteter Request:

PUT /api/60329b2b-ff27-XXXX-XXXX-c7f8b05b00a2/lights/3/state HTTP/1.1
connection: close, TE
content-length: 30
user-agent: LuaSocket 2.0.2
te: trailers
content-type: application/json
host: 192.168.3.105

{"xy":[0,0],"on":true,"bri":0}

Das mit curl kann ich erst am Wochenende versuchen um Netz-Probleme auszuschließen. Gute Idee.

Danke, Stefan

[Neopholus]

@holomekc
Einer Eingebung folgend habe ich alle einfachen An/Aus-Lampen mit doch recht stark reduzierten Attributen durch "Extended Color Light" mit allen Attributen einer Originallampe angelegt.

Seitdem treten weder die Fehlermeldungen auf der Harmony noch die teilweise langen Verzögerungen mehr auf.

Verstehen tu ich es nicht, aber die Probleme waren sofort nach der Lampen-Neudefinition (und neue Sync auf die Harmony) weg.

Sorry, dass ich dir deswegen Arbeit gemacht habe.

Fazit: Der Adapter funktioniert gut, auch mit der Harmony.

[holomekc]

@Neopholus
Hi. Habe gerade den fix hochgeladen

Es ist wie du sagt. Wenn einer der Werte nicht gefunden wurde, dann hat der Adapter der Library nicht bescheid gegeben, dass die Bearbeitung fertig ist. Dadurch hing der Request fest und wurde nicht beantwortet. In 0.0.2 ist das jetzt behoben. Dann würde die Antwort bspw so aussehen:

[
    {
        "error": {
            "type": 6,
            "address": "/lights/1/state/xy",
            "description": "parameter, xy, not available"
        }
    },
    {
        "error": {
            "type": 6,
            "address": "/lights/1/state/bri",
            "description": "parameter, bri, not available"
        }
    },
    {
        "success": {
            "/lights/1/state/on": true
        }
    }
]

Edit:
Ich war am überlegen, ob ich dann einfach die Werte hätte hinzufügen sollen. Aber theoretisch ist das denke ich das was auch die hue bridge sagen würde.

Edit:
Ich bin eher dankbar, dass du dir das angeschaut hast! Das ganze soll ja funktionieren. Von daher ist Feedback immer Willkommen. Also kurz gesagt: Danke

[Neopholus]

@holomekc
Sehr gerne. Und Danke für den Bugfix. Hab ich vor allem gemacht, weil mit ha-bridge und was es sonst noch gibt einfach zu kompliziert oder komplex waren oder einen weiteren Raspi brauchen. Deine Lösung ist super-schlank und wunderbar in iobroker integriert.

Das Javascript oben zum Auswerten der Änderungen des Hue Emulators ist übrigens getestet. Kannst du gerne in die Anleitung auf Github kopieren, wenn du willst.

[bullrandle]

Hi,

hab voller Vorfreude den Adapter mal testweise installiert, da ich auch ganz gern meine Wohnzimmerbeleuchtung/Raffstores mit der Harmony FB steuern würde.
Leider kann ich den Hub nicht mit dem Emulator verbinden.

Nach kurzer Analyse mittels Wireshark dürfte ich dasselbe Problem haben wie in diesen Thread erwähnt:
https://github.com/diyhue/diyHue/issues/147

Auch mein Hub schein nicht nach der HueBridge zu suchen sondern nach dem Hunter Douglas Powerview Hub.

@Neopholus
kannst du mal checken welche FW version auf deinem Hub läuft?
Bzw. hast du eine Elite oder Companion?

SG
Christian

arachnetech created this issue in diyhue/diyHue

closed Harmony Hub unable to detect diyHue bridge #147

[Neopholus]

@bullrandle
Hi Christian,

ich habe eine Elite.
FW-Version:

• Fernbedienung: 4.15.264
• Hub: 4.15.264
• Nest: 1.1.4
• HEOS: 1.1.7
• Caseta: 1.2.3
• Root-Certificates: 1.1.7
• Quivicon: 1.2.3

Wie sieht deine Konfiguration denn aus?

Meine ist:

• Ip-Adresse, unter der der Server gestartet wird: 0.0.0.0
• Port, auf dem der Server lauscht: 8070
• Ip-Adresse, unter der der Server gefunden wird: 192.168.X.X (die lokale IP meines Raspberry Pis)
• Port, unter dem der Server gefunden wird: 8070
• Bei Bedarf können Sie einen Port für https angeben: 8071
• Mac-Adresse, die in API-Antworten verwendet wird: MAC-Adresse der LAN-Schnittstelle meines Raspberry

Damit ging es dann plötzlich
Viele Grüße
Stefan

[bullrandle]

Hab diesselbe FW Version am Hub allerdings nur die Companion, sollte aber ja eigentlich keinen unterschied machen.

Meine Konfiguration für den Adapter ist exakt gleich.

@Neopholus
Kannst du evtl. mal mit Wireshark checken was der Harmony Hub bei dir ausgibt, wenn du nach einer Hue Bridge suchst?

[siggi85]

Kurze Frage zur Funktion: Könnte man mit diesem Adapter jede in ioBroker integrierte Lampe über diese emulierte Hue Bridge steuern? Also dass man mit den bekannten Hue Apps quasi jede seiner smarten Lampen steuern kann? Und ganz einfach Szenen anlegen?

[holomekc]

@siggi85
Wenn ich dich richtig verstehe dann ja . Du musst jedoch jede Lampe erst einmal in dem Adapter anlegen. Dazu kannst du die vorhandenen Templates (An/Aus, Farbe, Dimmbar) verwenden. Anschließend musst du die Lampen zu den anderen States in ioBroker verlinken.

Du erstellst also immer eine "Fake" Lampe und verknüpfst sie mittels Blockly, Skripte, Node-Red, etc. mit der tatsächlichen Lampe in ioBroker.

[siggi85]

@holomekc Coole Sache. Man könnte hier doch auch Informationen aus dem neuen Devices Adapter beziehen, oder? Also dass man die Lampen im zentralen Devices Adapter definiert und der Hue Adapter die Informationen genau daraus zieht. Der Devices Adapter ist ja prinzipiell genau für sowas gedacht.
Ist sowas geplant?

[bullrandle]

@Neopholus
Vergiss es, musste die gut versteckte XMPP API in der Harmony App aktivieren.
Menu > Harmony Setup > Add/Edit Devices & Activities > Remote & Hub > Enable XMPP

Jetzt hab ich zumindest mal die Bridge in der Harmony App, allerdings sehe ich noch keine "Lampen" ...

[bullrandle]

Wohl doch zu früh gefreut, Harmony findet die Bridge nicht mehr

[bullrandle]

Testweise hab ich mal eine HABridge auf Windows laufen lassen und die wird von meinem Harmony Hub gefunden.
Somit glaube ich nicht, dass es (nur) an meinem Hub liegt.

Bin etwas ratlos wie ich weitermachen bzw. was ich noch ausprobieren kann/soll ...

@holomekc
@Neopholus
habt ihr mal probiert ob die Hue App die hueemu bridge findet? Sollte das funktionieren?

[holomekc]

@bullrandle
Hi aktuell bin ich etwas unter Wasser. Aber am langen Wochenende kann ich schauen. Mit der Hue App habe ich nicht probiert. Ich habe Harmony aber auch hier. Hatte aber bisher nur Alexa gekoppelt. Ich teste mal ein wenig.

[holomekc]

@bullrandle
Hi. Ich habe es gerade getestet und bei mir geht es mit der aktuellen Version. Auch die Lichter werden in der Harmony App richtig erkannt. Ich musste auch nicht XMPP aktivieren. Das sollte damit auch nichts zu tun haben. Das ganze läuft über SSDP.

Was mir jedoch aufgefallen ist. Ich habe auch ioBroker.deconz installiert. Dieser hat den Port 1900 blockiert. Dort wird es wohl verwendet, um zu schauen, ob eine Hue Bridge noch da ist. Ist für hueemu ganz schlecht, da dort die SSDP Nachrichten abgehandelt werden. Was du in so einem Fall machen kannst ist deconz kurz deaktivieren, dann hueemu starten und dann das Pairing starten.

Zum testen (so sah das bei mir aus):

sudo netstat -nap | grep 1900
udp        0      0 0.0.0.0:1900            0.0.0.0:*                           3919/io.deconz.0
udp6       0      0 :::1900                 :::*                                3919/io.deconz.0
udp6       0      0 :::1900                 :::*                                3919/io.deconz.0
udp6       0      0 :::1900                 :::*                                3919/io.deconz.0
udp6       0      0 :::1900                 :::*                                3919/io.deconz.0

Was bei hueemu vielleicht nicht so gut ist, ist das die Info dazu bisher nur auf debug geloggt wird. Das kann ich mir bei Gelegenheit mal anschauen:
hueemu.0 2020-05-02 18:43:16.212 debug (22985) HueUpnp: Server error. Shutdown server: Error: bind EADDRINUSE 0.0.0.0:1900 at dgram.js:334:20 at processTicksAndRejections (internal/process/task_queues.js:82:21)

@siggi85
Den Devices Adapter schaue ich mir mal bei Gelegenheit an.

[bullrandle]

@holomekc
Das war der goldene Tipp. Port 1900 war bei mir von fakeroku blockiert. Kurz deaktiviert und im 2. Anlauf gings dann.

Nachdem ich auf einem jungfräulichen ioBroker nur die hueemu installiert hatte und die von meiner Harmony gefunden wurde hatte ich auch schon angefangen in Richtung der Ports zu debuggen, hätt aber wohl noch länger gedauert bis ich das gefunden hätte, danke für die Zeitersparnis

Ja, die Fehlermeldung als error im Log wär wohl sehr hilfreich gewesen, aber was nicht ist ...

[Airmaxchen]

Ich habe jetzt auch versucht hueemu mit meinem Harmony Hub zu verbinden. Leider funktioniert das Pairing nicht.
Die Einstellungen habe ich mMn richtig gemacht. Stimmt es, dass die Mac-Adresse mit Doppelpunkten geschrieben wird?Der Adapter ist auch grün.
XMPP ist aktiv.

[holomekc]

@Airmaxchen
Schau mal bitte, ob die Infos bezüglich des blockierten ports nicht auch für dich gelten. XMPP muss nicht für die Funktionalität aktiviert werden.
Anonsten stell den Adapter mal auf silly und schau was er dir beim starten sagt.