[Aufruf] Adapter: Snips - Offline Speak2Text
-
Danke fuer die Aufklärung.. Kann es sein dass die Befehle in Text to command besser umgesetzt werde wenn ich diese auch mit Infos aus den slots fuelle also z. B. Device / room / command also fernseher im Wohnzimmer einschalten… Als nur Fernseher einschalten.... Und manchmal uebergibt snips das einschalten als true und manchmal als einschalten...
Gesendet von meinem CLT-L09 mit Tapatalk
-
Genau das war der Gedanke, dass man später z.B. Regeln für text2command erstellt, etwa so wie bei den Rollos und dann nur noch eine Zeile für jede Gerätetyp brauchen würde.
Bei receivedText wird der erkannte Text zurückgegeben, bei compiledText dann der Text bei dem die Wörter durch die erkannten Slots ersetzt werden.
Ich schau mal nach, ob einschalten als Synonym für true in der App hinterlegt ist. Falls nicht, wird es ergänzt. Gerne weitere Beispiele für Worte oder Sätze die nicht erkannt wurden melden.
-
Einschalten war bereits hinterlegt.
Was natürlich auch sein kann, dass er einmal setDevice und einmal einen anderen Intent erkennt und daher nicht auf true abändert sondern einschalten belässt. Daher im nächsten Update nur noch 2 Intents zum Lesen bzw Schreiben und den Smalltalk zum einpflegen von Wörtern die nicht erkannt werden aber eigentlich kein Kommando sind. Wie z.B. Guten Morgen.
-
Genau das war der Gedanke, dass man später z.B. Regeln für text2command erstellt, etwa so wie bei den Rollos und dann nur noch eine Zeile für jede Gerätetyp brauchen würde.
Bei receivedText wird der erkannte Text zurückgegeben, bei compiledText dann der Text bei dem die Wörter durch die erkannten Slots ersetzt werden. `
Kannst du noch stumm schalten mit rein nehmen / mute..
und vlt. auf und zu / auf 100 und zu 0
Danke
-
Mute ist kein Problem. Bei 100 und 0 sollten wir uns evtl. was anderes einfallen lassen. Zum einen könnte das mit Zahlen kollidieren, zum Anderen kann man seine Anlage ja auch in dB steuern, also nicht in Prozent.
-
ok, bei auf zu dachte ich halt an meine shutter, 0 % Sicht und 100% Sicht…
Wie sieht es mit nem Slot für Eigenschaften aus? Wie z.B Temperatur, Helligkeit, Feuchtigkeit, Windstärke usw...
könnte man nicht color zu Eigenschaften zählen...also die typischen wie ....rot gelb nass kalt feucht hell usw....oder halt eben einen neuen slot dazu....
-
Evtl. high und low. Aber low wäre ja gleichbedeutend mit mute. Bau es jedenfalls mal ein
Auf und zu gibt es schon. True und false
Get Status liefert die gewünschten Werte zurück. Also Temperatur etc. Beim Werte schreiben denke ich unnötig
-
ok, eine Frage noch um sicher zu stellen, dass ich es richtig verstanden habe…
Wenn ich sage Verstärker im Wohnzimmer leiser, dann muss ich in text to command den Befehl wie folgt eingeben:
Verstärker im Wohnzimmer volume down
oder z.B
Verstärker im Wohnzimmer ausschalten oder aus dann:
Verstärker im Wohnzimmer false
richtig?
-
Genau richtig.
So umständlich, damit man das evtl. leichter verarbeiten kann. So zumindest der Plan.
-
WICHTIG!!!!
Ich habe gerade eine neue Version der App auf Snips veröffentlicht. Bitte erst aktualisieren, wenn Walter (Wal) grünes Licht gibt und der Adapter in ioBroker aktualisiert werden kann. Konnte die neue Version noch nicht ausgiebig testen. Also Vorsicht mit dem Update, ggf. auf die alte Vesion mittels Github zurück gehen.
Neu ist wie schon erwähnt, dass es nur noch zwei Intents gibt und somit alle Slots kombiniert werden können. z.B. "Reinige zweimal das Wohnzimmer". Vorher ging nur "Reinige das Wohnzimmer" oder "Schalte das Licht auf zwei". (setDevice und setNumeric)
-
Snips auf Docker habe ich noch nicht getestet, war nur eine Idee, da ich (noch) keinen VM-Server habe. Wird aber wohl der nächste Schritt werden. ioBroker und Snips je als eigene VM.
Wo hast du denn eingesprochen? In den Main oder den Satelliten? In kitchen, den Main, oder? `
Hallo Michael,
ich habe nun einen Snips Server auf einer 64bit Debian vm installiert. Es gibt wohl bei debian ein prolem beim sam init, daher die manuelle Vorgehensweise.
https://forum.snips.ai/t/install-on-debian-9-vm/660/9
Nach der OS installation habe ich folgendes ausgeführt:
__su
apt update && apt install sudo
usermod -aG sudo <username>echo 'username ALL=(ALL) NOPASSWD: ALL' | sudo tee –append /etc/sudoers > /dev/null
#Logout and login as <username>sudo apt update && sudo apt dist-upgrade
sudo apt-get install -y dirmngr apt-transport-https
sudo apt-add-repository non-free
sudo bash -c 'echo "deb https://debian.snips.ai/stretch stable main" > /etc/apt/sources.list.d/snips.list'
sudo apt-key adv --keyserver pgp.mit.edu --recv-keys F727C778CCB0A455
sudo apt update
sudo apt install -y alsa-utils snips-platform-voice snips-skill-server snips-watch curl unzip
sudo sudo usermod -aG snips-skills-admin <username>#Logout and login
curl -sL https://deb.nodesource.com/setup_8.x | sudo -E bash -
sudo apt-get install -y nodejs
sudo alsactl init
sudo npm install -g snips-sam
sam connect localhost
sam login
sam install assistant
sudo systemctl restart 'snips-*'</username></username></username>__
Sam status:
OS version …................ Debian GNU/Linux 9 (stretch)
Installed assistant .......... ASSI-1
Language ..................... de
Hotword ...................... hey_snips
ASR engine ................... snips
Status ....................... Live
Service status:
snips-analytics .............. 0.60.12 (not running)
snips-asr .................... 0.60.12 (running)
snips-audio-server ........... 0.60.12 (not running)
snips-dialogue ............... 0.60.12 (running)
snips-hotword ................ 0.60.12 (running)
snips-nlu .................... 0.60.12 (running)
snips-skill-server ........... 0.60.12 (not running)
snips-tts .................... 0.60.12 (running)
Morgen versuche ich mich nochmal an den satteliten.....
-
Mach ich nach der Arbeit.
Die Alte leg ich auf npm und die zum testen auf Github.
@Michael, wir sollten wirklich demnächst ein Testzweig einpflegen. :idea:
-
Hi Leute,
gibt es eventuell irgendwo auch eine optisch ansprechendes Gerät, das als Mikrophon verwendet werden kann ?
Der Platinen Look der empfohlenen Mikrophone für den Raspberry ist nicht gerade der Hingucker…
Wie habt ihr das Thema Platzierung der Microphone gelöst ? Idealerweise sollten sie ja unsichtbar sein aber möglichst nah und ohne Hindernisse den Gesprächen der Menschen lauschen ...
-
Hi Leute,
gibt es eventuell irgendwo auch eine optisch ansprechendes Gerät, das als Mikrophon verwendet werden kann ?
Der Platinen Look der empfohlenen Mikrophone für den Raspberry ist nicht gerade der Hingucker…
Wie habt ihr das Thema Platzierung der Microphone gelöst ? Idealerweise sollten sie ja unsichtbar sein aber möglichst nah und ohne Hindernisse den Gesprächen der Menschen lauschen ... `
Ich nutze ein Jabra Speak 410 https://www.jabra.com.de/business/speak … -speak-410
-
@Wal:Ich nutze ein Jabra Speak 410 https://www.jabra.com.de/business/speak … -speak-410 `
und der läuft gut bei dir?Ich hab meinen wieder zurück geschickt weil der total unverständlich mit viel zu schnellem Tempe gesprochen hat.
-
Hi Leute,
gibt es eventuell irgendwo auch eine optisch ansprechendes Gerät, das als Mikrophon verwendet werden kann ?
Der Platinen Look der empfohlenen Mikrophone für den Raspberry ist nicht gerade der Hingucker…
Wie habt ihr das Thema Platzierung der Microphone gelöst ? Idealerweise sollten sie ja unsichtbar sein aber möglichst nah und ohne Hindernisse den Gesprächen der Menschen lauschen ... `
Ich nutze das Matrix Voice auf dem pi. In Naher Zukunft wirds da noch ein Gehäuse aus dem 3D Drucker von mir geben. Mit einem Ring aus "durchsichtigem" PLA über den LED's. Das wird dann optisch schon was hermachen. Hoffe ich zumindest.
Hat jemand eigentlich schon ein Programm geschrieben das die LED's ansteuert sobald das Hotword erkannt wurde?
Das steht nämlich noch auf meiner To-Do Liste.
-
Für die LEDs gibt's z.b. einen Skill. Wurde weiter vorne schon mal besprochen.
-
Für die LEDs gibt's z.b. einen Skill. Wurde weiter vorne schon mal besprochen. `
Vielen Dank! Schaue ich mir nachher mal an.
Dachte eigentlich ich hab den ganzen Thread gelesen, aber das ist wohl an mir vorbei gegangen.
-
Adapter update ist auf Github verfügbar. Bitte Warnung weiter oben beachten.
-
@Wal:Ich nutze ein Jabra Speak 410 https://www.jabra.com.de/business/speak … -speak-410 `
und der läuft gut bei dir?Ich hab meinen wieder zurück geschickt weil der total unverständlich mit viel zu schnellem Tempe gesprochen hat. `
Du mußt die asound.conf anpassen, sonst spricht der im Eiltempo.
pcm.jabbra { type hw card 1 device 0 rate 48000 } pcm.!default { type asym playback.pcm { type plug slave.pcm "jabbra" } capture.pcm { type plug slave.pcm "hw:1,0" } } ctl.!default { type hw card 1 }
