UPDATE 31.10.: Amazon Alexa - ioBroker Skill läuft aus ?

[coyote]

@jomjol ja cool, würde mich freuen, wenn dass mit dem Ding klappt. Hatte meinen bei Amazon geholt.
Dann halte uns mal auf dem laufenden, ob es mit dem ESP32 machbar ist. Ideal wäre natürlich mit der eingebauten LED.
Wo hast du eigentlich den LED Streifen gekauft, muss es da was ganz bestimmtes sein oder muss nur der Controller passen?

[jomjol]

@coyote LED-Strip: https://www.ebay.de/itm/WS2812B-LED-Streifen-5m-WS2812-RGB-Licht-SMD-5050-Individuell-Adressierbar-DC5V/173334927277?hash=item285b9117adⓂmL5dpT_Qf14xUwIDImuRHYQ&var=472045414448

[MadTrinity]

Hi,
bin ich nicht drauf gekommen aber ja wir hätten einen spendieren können.
Also die Interne LED vom ESP32 kann man durch GPIO 4 ansteuern, aber ob die jetzt nicht zu hell ist keine ahnung.
Noch mal auf den Fehler bei mir von Wasseruhr.js
christian@debianiobroker:~$ node wasseruhr.js
module.js:550
throw err;
^

Error: Cannot find module '/home/christian/wasseruhr.js'
at Function.Module._resolveFilename (module.js:548:15)
at Function.Module._load (module.js:475:25)
at Function.Module.runMain (module.js:694:10)
at startup (bootstrap_node.js:204:16)
at bootstrap_node.js:625:3

habe alles in einen ordner namens wasser kopiert
npm install ini
npm install http

und soweiter ausgeführt, dennoch taucht der Fehler auf beim ausführen
Node 8.15.1
npm 6.10.3

[jomjol]

@MadTrinity Ich verwende Ubuntu Linux - sollte aber keinen Unterschied machen. Es scheint, als ober schon das Startfile nicht findet (wasseruhr.js). Ich würde verstehen, wenn er bei Tensorflow.js o.ä. einen Fehler hat, denn dann fehlt einfach noch ein Bibliothek. Funtionieren bei dir andere Node.js Skripte?

[MadTrinity]

@jomjol keine Ahnung habe davon keine Ahing Ahnung, Iobroker läuft auch auf der Kiste. Am WE versuche ich eine neue VM aufzusetzen.

[intruder7]

Servus,

also ich habe alles aufgebaut und der node mini d1 liefert mir auch ein Bild. die erforderlichen Pakete habe ich alle nach vielen Schwirigkeiten installiert. Jetzt bekommen ich den Server nicht gestartet und dieses ist im LOG

root@ioBroker2-rock64:/opt/iobroker/Wasserzähler# node wasseruhr.js
internal/modules/cjs/loader.js:805
  return process.dlopen(module, path.toNamespacedPath(filename));
                 ^

Error: /opt/iobroker/node_modules/@tensorflow/tfjs-node/lib/napi-v4/tfjs_binding.node: cannot open shared object file: No such file or directory
    at Object.Module._extensions..node (internal/modules/cjs/loader.js:805:18)
    at Module.load (internal/modules/cjs/loader.js:653:32)
    at tryModuleLoad (internal/modules/cjs/loader.js:593:12)
    at Function.Module._load (internal/modules/cjs/loader.js:585:3)
    at Module.require (internal/modules/cjs/loader.js:690:17)
    at require (internal/modules/cjs/helpers.js:25:18)
    at Object.<anonymous> (/opt/iobroker/node_modules/@tensorflow/tfjs-node/dist/index.js:44:16)
    at Module._compile (internal/modules/cjs/loader.js:776:30)
    at Object.Module._extensions..js (internal/modules/cjs/loader.js:787:10)
    at Module.load (internal/modules/cjs/loader.js:653:32)

die Datei "tfjs_binding.node" befindet sich an dem geforderten Ort. Ich komme da jetzt nicht mehr weiter? Hat vielleicht jemand eine Idee?

[jomjol]

@intruder7 hast du sowohl tensorflow/tfjs-node und auch tensorflow/tfjs per npm install installiert? Ich musste dort auch ein bisschen probieren.
Du bist nicht der einzige, der dort Schwierigkeiten hat. Ich überlege gerade, ob ich nicht einen Virtuellen Server aufsetzte und hochlade. Dazu brauche ich aber etwas Zeit, da ich alles von Null auf aufsetzen müsste.
Würde eine "VirtualBox"-Maschine mit Ubuntu helfen?

[intruder7]

@jomjol
perfekt wäre sogar noch ein dockerimage! ;-) Habe es halbwegs zum laufen bekommen aber nur wenn ich Zeile 44 in der indes.js auskommentiert habe. Allerdings verarbeitet er dann nur verzeerte Bilder als wenn das Allignment nicht funktioniert. dieses habe ich dann in der lib_image_cut.js bei der Funktion Allignment umgangen indem ich return = source gemacht habe. Musste dann natürlich die ganzen Koordinaten in der ini anpassen. Ist nicht das gelbe vom Ei aber zum Testen ging das erstmal. Mann darf dann auch nicht an den Zähler kommen. dann ist wieder alles verstellt.

[intruder7]

@jomjol
achso, ja hatte beide Pakete installiert

[intruder7]

Auch die Erkennung ist alles andere als genau.:confused:

[jomjol]

@intruder7 Kannst du mir mal ein paar jeweils von deinen Ziffern irgendwo zum Download bereitstellen? Das neuronale Netzwerk ist momentan nur auf meine Bilder gelernt. Vermutlich läßt sich das mit ein bischen Training leicht verbessern. Wenn allein schon die Bildgrößen nicht passen, kann die Erkennung schief gehen.

[intruder7]

@jomjol
reichen die jetzigen Bilder so wie sie getrennt als jpg auf dem server abgespeichert werden?

[intruder7]

die aktuellen

der rest wird schwierig.

[jomjol]

@jomjol Habe mir gerade mal die Bilder angeschaut: Zwei Unterschiede:

1. Du hast ein unterschiedliches Verhältnis von Breite zu Höhe im Vergleich zu meinem Bildausschnitt:
   bei mir: 55x90 - bei dir 40x60
2. Deine Bilder scheinen etwas größer zu sein.

Die Bilderkennung skaliert die Bilder auf eine Einheitsgröße, dadruch verzerrt sich die Zahl. Die absolute Bildgröße ist nicht so wichtig, wird sowie runter skaliert.

Dein Bildausschnitt rescaliert auf 55x90:
Mein Bildausschnitt:

Versuche daher mal, den Ausschnitt möglichst nahe an ein Verhältnis von 55x90 Pixeln zu kommen, dass sollte schon helfen. Ich werde parallel meine Bilderkennung mit größeren Größenschwankungen trainieren.

[intruder7]

hier nochmal erwas besser ausgerichtet

[intruder7]

@jomjol
okay probiere ich

[intruder7]

@jomjol
das Ergebnis

und hier die Einzelbilder

[jomjol]

@intruder7 CNN-Training mit 40% Größenschwankung in alle Richtung läuft - dauert aber etwas auf meinem Laptop im Urlaub:

[intruder7]

@jomjol :+1:
habs jetzt mal um 20 % verkleinert und die zahlen zentriert.
jetzt passt es. wie es ist wenn sich was bewegt kann ich noch nicht sagen

[jomjol]

@intruder7 Super!

Training vom CNN ist auch fertig. Ich habe den Random-Zoom-Faktor im Training von +/-10% auf +/-40% vergrößert. Gesamtes System ist unter neuen Ordner "Experimental" abgelegt:
https://github.com/jomjol/water-meter-system-complete/tree/master/experimental
Du musst aber nur zwei Dateien für die digitalen Ziffern unter \lib\DL_model_digital_counter austauschen (.bin & .json)