NEWS
[Aufruf] Adapter: Snips - Offline Speak2Text
-
Bin nun noch mal die Server durch gegangen. diese wurden wohl doch mit installiert.
Nach dem Ausschalten kommt immer noch der selbe Fehler.allerdings konnte ich mit dem Befehlt: sudo tail -f /var/log/syslog folgendes raus bekommen.
May 23 17:45:14 raspberrypi snips-hotword[548]: INFO:snips_hotword_lib::audio: Audio thread for site room1 stopped. May 23 17:45:14 raspberrypi snips-audio-server[547]: INFO:snips_audio_portaudio : Playing "3df58b5b-396b-4403-957b-67dd680d6818" using output "bcm2835 ALSA: IEC958/HDMI (hw:0,1)", wav spec: WavSpec { channels: 2, sample_rate: 22050, bits_per_sample: 16, sample_format: Int } May 23 17:45:14 raspberrypi snips-audio-server[547]: Expression 'paInvalidSampleRate' failed in 'src/hostapi/alsa/pa_linux_alsa.c', line: 2043 May 23 17:45:14 raspberrypi snips-audio-server[547]: Expression 'PaAlsaStreamComponent_InitialConfigure( &self->playback, outParams, self->primeBuffers, hwParamsPlayback, &realSr )' failed in 'src/hostapi/alsa/pa_linux_alsa.c', line: 2717 May 23 17:45:14 raspberrypi snips-audio-server[547]: Expression 'PaAlsaStream_Configure( stream, inputParameters, outputParameters, sampleRate, framesPerBuffer, &inputLatency, &outputLatency, &hostBufferSizeMode )' failed in 'src/hostapi/alsa/pa_linux_alsa.c', line: 2838 May 23 17:45:14 raspberrypi snips-audio-server[547]: thread 'portaudio.player' panicked at 'ERROR:snips_audio_server_hermes : could not play "3df58b5b-396b-4403-957b-67dd680d6818" May 23 17:45:14 raspberrypi snips-audio-server[547]: -> caused by: InvalidSampleRate May 23 17:45:14 raspberrypi snips-audio-server[547]: called `Result::unwrap()` on an `Err` value: "SendError(..)"', src/libcore/result.rs:997:5werde also wohl irgendwas vergessen haben zu installieren oder so. Ich werde dann mal googlen was ich vergessen habe oder hast du noch eine Idee`?
@Daniel-Beiderwieden sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
22050
Sind da USB-Lautsprecher bzw. irgendwie HDMI dran? Vllt. unterstützen diese die Rate von 22050 nicht? Scheint ein Konfigurationsfehler zu sein?!
-
Vielen Dank für die Hilfe.
Satellite und VM laufen nun und in IoBroker kommt auch etwas an.
Irgendwie scheine ich wohl undeutlich zu sprechen und bisher führt er noch keine Commands aus aber das wird noch. -
Hallo Zusammen,
Auch ich hatte anfangs Schwierigkeiten mit dem
Hey Snips, aber seit ich "Snips" dann mal als deutsches Wort (also nicht englisch) ausspreche, läuft die Erkennung ca. bei 80%. Ich habe eine ähnliche Konfiguration, bloß dass ich kein Proxmox, sondern vSphere verwende. Bei mir laufen die Audio-Server auf den Satelliten (RPi Zero W). Über:sudo apt install snips-hotword-model-heysnipsv4 sudo apt install snips-satellitewerden sie mitinstalliert. Mitsnips-watch -vvvkann man die Hotworderkennung gut nachvollziehen. Nun muss ich nur noch das mit den Befehlen über iobroker hinbekommen - ich verzweifle. Vielleicht kann mir jemand dabei einen Tipp geben, wie ich das brauchbar konfigurieren und gestalten kann. Mit dem text2command-Adapter komme ich irgendwie nicht klar.Danke im Voraus
onlinepilotDebian 9 VM
ioBroker 1.5.11
vis 1.2.0
-
Hallo Zusammen,
Auch ich hatte anfangs Schwierigkeiten mit dem
Hey Snips, aber seit ich "Snips" dann mal als deutsches Wort (also nicht englisch) ausspreche, läuft die Erkennung ca. bei 80%. Ich habe eine ähnliche Konfiguration, bloß dass ich kein Proxmox, sondern vSphere verwende. Bei mir laufen die Audio-Server auf den Satelliten (RPi Zero W). Über:sudo apt install snips-hotword-model-heysnipsv4 sudo apt install snips-satellitewerden sie mitinstalliert. Mitsnips-watch -vvvkann man die Hotworderkennung gut nachvollziehen. Nun muss ich nur noch das mit den Befehlen über iobroker hinbekommen - ich verzweifle. Vielleicht kann mir jemand dabei einen Tipp geben, wie ich das brauchbar konfigurieren und gestalten kann. Mit dem text2command-Adapter komme ich irgendwie nicht klar.Danke im Voraus
onlinepilot@onlinepilot sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
also nicht englisch
Was meinst du mit englisch? Wäre m.M.n. ja in englisch und deutsch gleich auszusprechen. Siehe auch Windows Snipping-Tool.
Meinst du vllt. Snipes, so wie Wesley Snipes? -
Hallo Zusammen,
Auch ich hatte anfangs Schwierigkeiten mit dem
Hey Snips, aber seit ich "Snips" dann mal als deutsches Wort (also nicht englisch) ausspreche, läuft die Erkennung ca. bei 80%. Ich habe eine ähnliche Konfiguration, bloß dass ich kein Proxmox, sondern vSphere verwende. Bei mir laufen die Audio-Server auf den Satelliten (RPi Zero W). Über:sudo apt install snips-hotword-model-heysnipsv4 sudo apt install snips-satellitewerden sie mitinstalliert. Mitsnips-watch -vvvkann man die Hotworderkennung gut nachvollziehen. Nun muss ich nur noch das mit den Befehlen über iobroker hinbekommen - ich verzweifle. Vielleicht kann mir jemand dabei einen Tipp geben, wie ich das brauchbar konfigurieren und gestalten kann. Mit dem text2command-Adapter komme ich irgendwie nicht klar.Danke im Voraus
onlinepilot@onlinepilot sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
brauchbar konfigurieren und gestalten kann
Was willst denn erreichen?
-
Hi @xulkar,
ich versuche mal etwas Licht ins Dunkel zu bringen. Soweit das bei individuellen Installationen geht. Alle Einstellungen in den Screenshots unten sind aus der Version 1.1.1 und sollten ab Version 1.1.0 funktionieren.@xulkar sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
Nun komme ich nicht weiter, bzw verstehe das weitere vorgehen nicht.
-
Im Grunde musst man zuerst das Snips-Geräte installieren und ausschließlich die unltdnetworx Snips-App installieren. Keinen eigenen Fork oder andere Apps.
- Eigene Forks werden nicht erkannt (bei Wünschen nicht enthaltener Wörter, nicht erkannter Sätze, etc. einfach Meldung hier im Thread, dann kann ich das noch einspielen, alternativ können auch eigene Injections gemacht werden, also eigene Worte angelernt)
- zusätzlich installierte Apps können dazu führen, dass der gewünschte Satz mit der falschen App erkannt wird und ioBroker nichts davon mitbekommt.
-
Als nächsten Schritt muss man den text2command-Adapter installieren, falls noch nicht geschehen, Einstellungen dazu folgen im übernächsten Schritt
-
Als dritten Schritt den Adapter Snips installieren und wie folgt konfigurieren
- Die URL ist die IP-Adresse des Snips-Gerätes
- Port falls weitere MQTT-Adapter bereits 1883 blockieren entsprechend anpassen
- Text2command-Instanz entsprechend anpassen, falls mehrere Instanzen laufen, Standard ist 0
- Filter mit "verstehe" befüllen, da sonst alle nicht erkannten Sätze mit "Ich verstehe blablabla nicht." quittiert werden
- Client-ID kann auch erhöht werden, falls man Satelliten im Einsatz hat. Die laufende Nummer beginnt bei 0 und erhöht sich pro Satellit um 1
-
Nach dem Speichern nun den text2command Adapter konfigurieren
- text2command Oberfläche aufrufen und das Zahnrad rechts oben klicken (Erweiterte Einstellungen)
- text2command Oberfläche aufrufen und das Zahnrad rechts oben klicken (Erweiterte Einstellungen)
-
Nun noch die Regeln in text2command konfigurieren, etwa so
Damit ist das Schalten von Licht und Rollos möglich, sofern diese mit Raum und Funktion bezeichnet wurden.
-
weitere Regeln könnten etwa so aussehen
Wichtig dabei ist, dass an/aus als true/false rückgemeldet wird.
@onlinepilot
Schau dir mal diesen Post an. Vllt. bringt er dich schon mal weiter. -
-
@onlinepilot sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
also nicht englisch
Was meinst du mit englisch? Wäre m.M.n. ja in englisch und deutsch gleich auszusprechen. Siehe auch Windows Snipping-Tool.
Meinst du vllt. Snipes, so wie Wesley Snipes?@unltdnetworx said in [Aufruf] Adapter: Snips - Offline Speak2Text:
@onlinepilot sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
also nicht englisch
Was meinst du mit englisch? Wäre m.M.n. ja in englisch und deutsch gleich auszusprechen. Siehe auch Windows Snipping-Tool.
Meinst du vllt. Snipes, so wie Wesley Snipes?Wie man eben der englischen Aussprache mächtig ist, vielleicht ist es auch texanisches Kauderwelsch gewesen ;).
@unltdnetworx said in [Aufruf] Adapter: Snips - Offline Speak2Text:
@onlinepilot sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
brauchbar konfigurieren und gestalten kann
Was willst denn erreichen?
Das Ziel ist natürlich ein für den Alltag benutzbares System zu erhalten, vorrangig als parallele Integration zum VIS. Das bedeutet in meiner Wahrnehmung, dass ich bestehende Strukturen gern weiter nutzen würde und nicht unbedingt eine zweite, völlig anders aufzubauende Logik erarbeiten muss.
@unltdnetworx said in [Aufruf] Adapter: Snips - Offline Speak2Text:
@onlinepilot
Schau dir mal diesen Post an. Vllt. bringt er dich schon mal weiter.Ja, das nehme ich gern mal an. Ich schau mal, wie weit ich damit komme.
Danke Dir erstmal!
onlinepilot -
Hallo Leute,
ich versuch seit ein paar Wochen Snips problemlos mit dem ioBroker zum laufen zu bekommen (möchte von Googles Cloud wegkommen :relieved: ), aber irgendwie klappt das nicht so gut :confused:
Zur Hardware:
Aktuelle benutze ich für Snips einen Pi3 mit der Playstation Eye und einen zweiten Pi3 für ioBroker und etc.Jetzt zu meinen Problemen:
-
Snips erkennt die gesprochenen Wörter häufig falsch (leider deutlich schlechter als Google Home und Alexa), obwohl ich viele "Geräte" über snips.0.send.inject.device hinzugefügt habe.
-
Die Geräte Namen habe ich hinzugefügt: Tischlampe, Lampe eins, Lampe zwei, Lampe drei, PlayStation, Netflix, Prime Video, Spotify und YouTube.
Trotzdem erkennt er alle Wörter, bis auf die Tischlampe, nicht richtig. -
Text2Command schaltet manche Geräte nicht immer in den gewünschten Zustand, obwohl es richtig eingetragen ist.
-
Snips ignoriert, trotz kurzer Pause am Anfang, das erste Wort häufig und er hört oft nicht lange genug zu und weiß dann nicht, ob das Gerät ein/aus geschaltet werden soll.
-
Eine Funktion, um die Mikrofone von der PS Eye lauter zu machen, gibt es glaube ich nicht, oder?
Ich hoffe ihr könnt mir weiterhelfen und könnt meine Probleme nachvollziehen :relieved:
Anbei noch ein paar Bilder, die ich gemacht habe :nerd_face:
-
-
Moin,
Ich habe zurzeit auch das Problem das Snips und Texttocommand zwar richtig erkennt, jedoch genau wie im letzten Bild trotz erkannten "false" einfach true weitergibt. Wenn Ich den Adapter neu starte tuts das das ein paar mal bis der Fehler wieder auftaucht! Gibt's dazu schon eine Lösung?
-
Hallo Leute,
ich versuch seit ein paar Wochen Snips problemlos mit dem ioBroker zum laufen zu bekommen (möchte von Googles Cloud wegkommen :relieved: ), aber irgendwie klappt das nicht so gut :confused:
Zur Hardware:
Aktuelle benutze ich für Snips einen Pi3 mit der Playstation Eye und einen zweiten Pi3 für ioBroker und etc.Jetzt zu meinen Problemen:
-
Snips erkennt die gesprochenen Wörter häufig falsch (leider deutlich schlechter als Google Home und Alexa), obwohl ich viele "Geräte" über snips.0.send.inject.device hinzugefügt habe.
-
Die Geräte Namen habe ich hinzugefügt: Tischlampe, Lampe eins, Lampe zwei, Lampe drei, PlayStation, Netflix, Prime Video, Spotify und YouTube.
Trotzdem erkennt er alle Wörter, bis auf die Tischlampe, nicht richtig. -
Text2Command schaltet manche Geräte nicht immer in den gewünschten Zustand, obwohl es richtig eingetragen ist.
-
Snips ignoriert, trotz kurzer Pause am Anfang, das erste Wort häufig und er hört oft nicht lange genug zu und weiß dann nicht, ob das Gerät ein/aus geschaltet werden soll.
-
Eine Funktion, um die Mikrofone von der PS Eye lauter zu machen, gibt es glaube ich nicht, oder?
Ich hoffe ihr könnt mir weiterhelfen und könnt meine Probleme nachvollziehen :relieved:
Anbei noch ein paar Bilder, die ich gemacht habe :nerd_face:
@BluePixelHD
Hi. Es gibt meines Erachtens nach momentan zwei große Probleme. Das eine sind geeignete Mikros. Ich hab das 4-Mic-Hat und bin je nach Entfernung zum Snips-Endgerät unterschiedlich zufrieden damit. Das schwankt von Top zufrieden bis geht gar nicht.Das andere sind englische Worte. Ich habe den Eindruck, dass Snips bei eingestellter deutscher Sprache Probleme mit dem Erkennen von englischen Worten hat. Siehe z.B. bei dir YouTube, etc.
Du kannst ja mal mit Sam deine Spracheingabe überwachen und sehen, was jeweils erkannt wird.
Sam watchwäre der Befehl. Außerdem würde ich dir in text2command die Funktion "Steuere mit Funktion" ans Herz legen. Du musst dazu lediglich die Funktion "light" und einen Raum aus den Enums in den Objekten zuweisen.
Ich werde mal versuchen eine grobe Anleitung zu schreiben, sobald ich Zeit dafür finde.
-
-
Hallo zusammen,
da ich gebeten wurde, die Spracheingabe bei Bedarf auf die Räume zu beschränken, in denen der jeweilige Satellit steht, habe ich eine Testversion auf Github hochgeladen. Der Sinn einer solchen Funktion ist, dass z.B. bei Häusern mit vielen Zimmern die Bewohner keine fremden Räume schalten können, etwa in Hotels.
Ich hatte mir das so gedacht, dass man dem Gerät über die Enumerationen (Aufzählungen) einen Raum zuweist und dann den Punkt "enforceSameRoom" auf wahr setzt.
Jetzt tritt bei mir ein kurioses Phänomen auf und ich komme auf keine Lösung. Ich habe ein Testsystem, auf dem klappt das Ganze einwandfrei. Raum auf "Wohnzimmer", "enforceSameRoom" auf "true" und der Befehl "Schalte das Licht in der Küche aus" bewirkt ein "Schalte das Licht im Wohnzimmer aus".
In meinem Echtsystem hingegen wird mit dem selben Satelliten der Raum auf "undefined" gesetzt und text2command meldet, dass es diesen Raum nicht gibt.
Evlt. kann das mal jemand testen. Wenn das "enforceSameRoom" auf false steht, läuft der Adapter und die Befehle wieder wie gewohnt, es sollte also keine Gefahr drohen, etwas zu zerstören.
Danke schon mal für eure Hilfe.
Gruß, Michael
Weitere Infos im Profil.
Wenn euch der Beitrag weitergeholfen hat, könnt ihr die Bewertung rechts unten im Beitrag nutzen. -
Moin,
Ich habe zurzeit auch das Problem das Snips und Texttocommand zwar richtig erkennt, jedoch genau wie im letzten Bild trotz erkannten "false" einfach true weitergibt. Wenn Ich den Adapter neu starte tuts das das ein paar mal bis der Fehler wieder auftaucht! Gibt's dazu schon eine Lösung?
@Oak
Das Problem hatte ich bisher nicht. Außer ich war zu weit weg und wurde nicht einwandfrei verstanden. Aber dann wurde der Text auch auf true statt false gesetzt. Gab es denn ein Update von text2command?Welchen Adapter startest du neu? Liefert Snips den richtigen Wert an text2command?
-
Guten Abend,
kann mir bitte vielleicht kurz jemand erläutern wie ich Snips neue Räume beibringen kann.
Die Vordefinierten Räume erkennt er ohne Problemem, wenn Ich jedoch Haustüre als Raum eingebe wird dieser nicht mehr gefunden!Vielen Dank
-
@Oak
Das Problem hatte ich bisher nicht. Außer ich war zu weit weg und wurde nicht einwandfrei verstanden. Aber dann wurde der Text auch auf true statt false gesetzt. Gab es denn ein Update von text2command?Welchen Adapter startest du neu? Liefert Snips den richtigen Wert an text2command?
@unltdnetworx
dadurch das Ich nun Schalte mit Funktion eingestellt habe, schaltet er immer richtig. Vielen Dank -
Guten Abend,
kann mir bitte vielleicht kurz jemand erläutern wie ich Snips neue Räume beibringen kann.
Die Vordefinierten Räume erkennt er ohne Problemem, wenn Ich jedoch Haustüre als Raum eingebe wird dieser nicht mehr gefunden!Vielen Dank
@Oak
Das liegt an text2command. Dort gibt es nur eine begrenzte Anzahl an Räumen, weil dafür Genitiv und Dativ in mehreren Sprachen fest codiert ist.Es fehlt eine Funktion, die alle anderen Räume abfängt und z.B. sagt "schalte das Licht im Raum Haustür ein" anstatt "schalte das Licht in der Haustüre ein".
Du könntest das mit einer eigenen Regel in text2command abfangen oder einen Issue im Repository von text2command bei Github einreichen.
-
@Oak
Das liegt an text2command. Dort gibt es nur eine begrenzte Anzahl an Räumen, weil dafür Genitiv und Dativ in mehreren Sprachen fest codiert ist.Es fehlt eine Funktion, die alle anderen Räume abfängt und z.B. sagt "schalte das Licht im Raum Haustür ein" anstatt "schalte das Licht in der Haustüre ein".
Du könntest das mit einer eigenen Regel in text2command abfangen oder einen Issue im Repository von text2command bei Github einreichen.
@unltdnetworx
OK mit der Info konnte ich was Anfangen.
Bei Github kann man ja auch schauen welche Räume hinterlegt sind.
Jetzt läuft es wie gewünscht. Danke -
interessante sache dieses SNIPS..
würde mich mal interessieren, ob ich das ganze auch über meine NUC laufen lassen kann..
ich hätte da zb noch den Jabra Speak 510, welchen ich dann zur sprachein- und ausgabe nutzen wollen würde.
wäre das so machbar?
also den NUC als server,
da drauf eine VT mit snips installiert
und den jabra speak 510 als sprachein- und ausgabe -
interessante sache dieses SNIPS..
würde mich mal interessieren, ob ich das ganze auch über meine NUC laufen lassen kann..
ich hätte da zb noch den Jabra Speak 510, welchen ich dann zur sprachein- und ausgabe nutzen wollen würde.
wäre das so machbar?
also den NUC als server,
da drauf eine VT mit snips installiert
und den jabra speak 510 als sprachein- und ausgabe@ltsalvatore sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
über meine NUC
Als Server mit Satelliten geht es definitiv, sollte aber auf dem Gerät direkt funktionieren. Je nach Generation wären ja auch Mikrofone verbaut. Im Nuc8, glaube ich, sogar Far-Field-Mikros.
-
@ltsalvatore sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
über meine NUC
Als Server mit Satelliten geht es definitiv, sollte aber auf dem Gerät direkt funktionieren. Je nach Generation wären ja auch Mikrofone verbaut. Im Nuc8, glaube ich, sogar Far-Field-Mikros.
@unltdnetworx sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
@ltsalvatore sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
über meine NUC
Als Server mit Satelliten geht es definitiv, sollte aber auf dem Gerät direkt funktionieren. Je nach Generation wären ja auch Mikrofone verbaut. Im Nuc8, glaube ich, sogar Far-Field-Mikros.
danke für die rückmeldung.
stimmt, mein NUC8i5BEK sollte ja mic und lautsprecher haben, welche ich notfalls benutzen könnte. wobei.. der ist etwas ungünstig platziert...da müsste ich mal schauen.
was genau meinst du mit Satelliten?
Support us
842
Online32.4k
Benutzer81.5k
Themen1.3m
Beiträge