[Aufruf] Adapter: Snips - Offline Speak2Text
-
Bei Sprachbefehlen reagiert er ganz komisch, auch erkennt er sie im Moment überhaupt nicht.
Hey snips -> 2x ping -> 1x "nicht erkannt Ping" -> 2-5x ! ping
watch am Main:[12:38:33] Watching on localhost:1883 (MQTT) [12:38:35] [Hotword] detected on site default, for model hey_snips [12:38:35] [Asr] was asked to stop listening on site default [12:38:35] [Hotword] was asked to toggle itself 'off' on site default [12:38:35] [Dialogue] session with id '92a8dce2-d34c-4793-a2ed-33799610d394' was started on site default [12:38:35] [Asr] was asked to stop listening on site default [12:38:35] [AudioServer] was asked to play a wav of 41.1 kB with id 'e18b94f7-9a33-4a2f-a466-2f418c171eee' on site default [12:38:35] [Hotword] was asked to toggle itself 'off' on site default [12:38:35] [Dialogue] session with id 'b4dc7a3c-4bc0-4e79-924d-9bd2ac2cea49' was started on site default [12:38:35] [AudioServer] was asked to play a wav of 41.1 kB with id '1bb16720-fbef-482c-ba12-cc1a1fad21c9' on site default [12:38:36] [AudioServer] finished playing wav with id 'e18b94f7-9a33-4a2f-a466-2f418c171eee' [12:38:36] [Asr] was asked to listen on site default [12:38:36] [AudioServer] finished playing wav with id '1bb16720-fbef-482c-ba12-cc1a1fad21c9' [12:38:36] [Asr] was asked to listen on site default [12:38:39] [Asr] captured text "an" in 3.0s [12:38:39] [Asr] was asked to stop listening on site default [12:38:39] [AudioServer] was asked to play a wav of 93.1 kB with id 'f2bab4c5-6adf-4dc8-be6a-e7b65d941635' on site default [12:38:40] [Asr] captured text "licht an" in 3.0s [12:38:40] [AudioServer] was asked to play a wav of 61.1 kB with id 'a37913d8-7489-48d1-a902-730c26d28fbe' on site default [12:38:41] [AudioServer] finished playing wav with id 'f2bab4c5-6adf-4dc8-be6a-e7b65d941635' [12:38:41] [AudioServer] finished playing wav with id 'a37913d8-7489-48d1-a902-730c26d28fbe' [12:38:41] [Dialogue] session with id '92a8dce2-d34c-4793-a2ed-33799610d394' was ended on site default. The session was ended because an error happened: Event not supported: Response { waiting: AudioFinishedPayload }, with response: AsrCapture(AsrPayload { text: "licht an", tokens: Some([AsrTokenPayload { value: "licht", confidence: 0.7844479, range_start: 0, range_end: 5, time: AsrDecodingDurationPayload { start: 0.0, end: 1.57888 } }, AsrTokenPayload { value: "an", confidence: 0.8506282, range_start: 6, range_end: 8, time: AsrDecodingDurationPayload { start: 1.57888, end: 3.1499999 } }]), likelihood: 0.8168681, seconds: 3.0 }) [12:38:41] [Asr] was asked to stop listening on site default [12:38:41] [Hotword] was asked to toggle itself 'on' on site default [12:38:52] [Dialogue] session with id 'b4dc7a3c-4bc0-4e79-924d-9bd2ac2cea49' was ended on site default. The session was ended because one of the component didn't respond in a timely manner [12:38:52] [Asr] was asked to stop listening on site default [12:38:52] [Hotword] was asked to toggle itself 'on' on site default[12:41:12] [Asr] captured text "schalte das nicht an" in 4.0s [12:41:12] [Asr] was asked to stop listening on site default [12:41:12] [AudioServer] was asked to play a wav of 93.1 kB with id 'abc3e691-c4bb-44a2-b8e7-276380be0d83' on site default [12:41:12] [Asr] captured text "schalte das licht an" in 4.0s [12:41:12] [AudioServer] was asked to play a wav of 61.1 kB with id 'fe6cd879-5366-464d-94e5-4dca113be55c' on site default [12:41:13] [AudioServer] finished playing wav with id 'abc3e691-c4bb-44a2-b8e7-276380be0d83' [12:41:14] [AudioServer] finished playing wav with id 'fe6cd879-5366-464d-94e5-4dca113be55c' [12:41:14] [Dialogue] session with id '1b1cbd31-6f78-4691-a257-1f86dadd3719' was ended on site default. The session was ended because an error happened: Event not supported: Response { waiting: AudioFinishedPayload }, with response: AsrCapture(AsrPayload { text: "schalte das licht an", tokens: Some([AsrTokenPayload { value: "schalte", confidence: 1.0, range_start: 0, range_end: 7, time: AsrDecodingDurationPayload { start: 0.0, end: 2.34 } }, AsrTokenPayload { value: "das", confidence: 1.0, range_start: 8, range_end: 11, time: AsrDecodingDurationPayload { start: 2.34, end: 2.79 } }, AsrTokenPayload { value: "licht", confidence: 1.0, range_start: 12, range_end: 17, time: AsrDecodingDurationPayload { start: 2.79, end: 2.97 } }, AsrTokenPayload { value: "an", confidence: 1.0, range_start: 18, range_end: 20, time: AsrDecodingDurationPayload { start: 2.97, end: 3.99 } }]), likelihood: 1.0, seconds: 4.0 }) [12:41:14] [Asr] was asked to stop listening on site default [12:41:14] [Hotword] was asked to toggle itself 'on' on site default -
@unltdnetworx sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
A oder B
Ich habe das Script verwendet und bis vor 2 Tagen hat auch alles ganz gut funktioniert:
https://github.com/Psychokiller1888/satConnect -
@rascal
Okay, dazu kann ich persönlich nichts sagen. Evtl. schilderst du dein Problem mal im Snips-Forum.
Einen eigenen Namen (nicht default) hat der Satellit aber schon? -
dein letzter Tipp hat geholfen: snips über sam am Satelliten ausgeschaltet, Main neu gestartet und siehe da, der Main funkt ganz normal
-
@rascal
Dann passt die Konfiguration nicht. Schau dir mal die Anleitung zum Satellitenbetrieb oder die Posts dazu weiter oben an. Evtl. kannst du was nachbessern. Es brauchen auf dem Satelliten nur wenige Dienste von Snips laufen. -
Neue Funktion in der Adapter-Version 1.1.6:
Bei allen Satelliten kann jetzt das Hotword/Wakeword (de)aktiviert werden. -
Hallo! Ich habe jetzt die Hardware für einen Snips Satelliten (Raspi-Zero und 2Hat Mic Array). Es gibt eine Anleitung bei Snips, wie ich einen Satelliten hinzufüge Satellites. Muss ich diese nutzen? Oder hilft mit der Punkt "Create Satellite" im Adpater? Und wenn ja, was muss ich da eintragen? Die IP?
Gruß
Vore -
@vore
Ja, du kannst diese nutzen. Alternativ gibt es auch Skript, das die Anbindung durchführt.Was zum Anbinden nicht funktioniert, ist der Punkt "create Satellite". Dieser Punkt legt, nach Eingabe des zuvor definierten Namens des Satelliten-Gerätes, die Datenpunkte in ioBroker an. Das ist allerdings auch nur nötig, falls man kein Mikrophon am Gerät hat. Ansonsten werden die Datenpunkte bei der ersten Spracheingabe automatisch generiert.
-
Dieses Script macht das alles von alleine. 2Min und der Satellite ist angemeldet: https://github.com/Psychokiller1888/satConnect
Gruß -
Kurze Frage: Wollte den Adapter installieren bekomme aber folgende Message beim Installieren.
l@0.7.0 requires a peer of stream-browserify@* but none is installed. You must install peer dependencies yourself.
iobroker 2019-05-13 10:38:23.033 info WARN
iobroker 2019-05-13 10:38:23.030 info npm
iobroker 2019-05-13 10:37:03.193 info npm install https://github.com/unltdnetworx/ioBroker.snips/tarball/master --production --save --prefix "/opt/iobroker" (System call)
iobroker 2019-05-13 10:37:00.894 info install https://github.com/unltdnetworx/ioBroker.snips/tarball/master
iobroker 2019-05-13 10:36:58.974 info url "https://github.com/unltdnetworx/ioBroker.snips/tarball/master" snipsKann mir da jemand einen Tipp geben was ich genau machen muss?
Node.js: v8.15.1
NPM: 6.4.1Danke und Gruesse
Findus -
@Findus sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:
l@0.7.0 requires a peer of stream-browserify@* but none is installed. You must install peer dependencies yourself.
Hallo Findus,
versuch es mal über die Github-Katze zu installieren. Das ist momentan die gleiche Version. Jetzt fehlen komischerweise Abhängigkeiten, ich habe aber nichts geändert. Somit hat sich vermutlich eine andere Abhängkeit geändert. Wenn noch mehrere das Problem haben, muss ich wohl diese Abhängigkeit einfügen. Obwohl das nicht Sinn der Sache wäre.
-
Mit meiner npm-Version läuft es einwandfrei. 8.13.*
-
@unltdnetworx Danke fuer die schnelle Antwort.
Die Installation über die Katze habe ich schon probiert. Leider gleiches Problem.
Viele Gruesse
Findus -
Der Adpater liegt jetzt unter /opt/iobroker/node_modules/iobroker.snips
er taucht aber im UI nicht auf. Gibt es eine Moeglichkeit den Adapter manuell zu starten?Oder ein Tipp was ich noch machen kann?
Viele Gruesse
Findus -
Kurzer update: Habe nachdem ich den Adapter über Katze installiert hatte ( mit Fehlermeldung) diesen nun mit der Console "iobroker add snips" installiert. Dies hat funktioniert und er ist jetzt auch im Admin sichtbar. Werde nun mit den Test beginnen.
-
@Findus
Super. Immerhin.
Wollte gerade vorschlagen heute Abend eine Testversion für dein Problem zu basteln. Habe nämlich heute eine Meldung erhalten, dass eine Abhängigkeit eine Sicherheitslücke hat. Möglicherweise hat da ein Entwickler gerade essentielle Änderungen eingebaut. Denke, dass das viele andere Anwendungen betrifft und bald behoben sein wird. -
Wo finde ich die Einstellungen von Text2Command Adapter um die Antwort Id "snips.0.send.say.text einzutragen? Die Text2Command Konfiguration ist bei mir ausgegraut?
-
@Findus
Im text2command Adapter (neuer Eintrag im Menü links) ist rechts oben ein Zahnrad für erweiterte Einstellungen. -
-
Moin,
ich bin jetzt schon 2 Tage dran Snips zu installieren bzw. zum laufen zu bringen.
IoBroker hat den Snips und den Command Adapter wie beschrieben installiert. Er wurde auch entsprechend in der Sinps Console hinzugefügt.Der Snips Server läuft in Proxmox in einer Debian VM.
Das Hotword wird erkannt und per sam watch bekomme ich folgende Informationen:sam watch [17:31:25] Watching on localhost:1883 (MQTT) [17:31:27] [Hotword] detected on site room1, for model hey_snips [17:31:27] [Asr] was asked to stop listening on site room1 [17:31:27] [Hotword] was asked to toggle itself 'off' on site room1 [17:31:27] [Dialogue] session with id '19c5c8b4-b002-49d7-9c2e-0e6bb5453ed0' was started on site room1 [17:31:27] [AudioServer] was asked to play a wav of 41.1 kB with id '61c42146-84bc-4820-a907-0a59dc623e5d' on site room1 [17:31:42] [Dialogue] session with id '19c5c8b4-b002-49d7-9c2e-0e6bb5453ed0' was ended on site room1. The session was ended because one of the component didn't respond in a timely manner [17:31:42] [Asr] was asked to stop listening on site room1 [17:31:42] [Hotword] was asked to toggle itself 'on' on site room1der Satellite wurde mit dem git Script hinzugefügt von Psychokiller..
Sam Status gibt mir folgendes aus:sam status Connected to device localhost OS version ................... Debian GNU/Linux 9 (stretch) Installed assistant .......... MainSnips Language ..................... de Hotword ...................... hey_snips ASR engine ................... snips Status ....................... Live Service status: snips-analytics .............. (not running) snips-asr .................... 0.63.2 (running) snips-audio-server ........... 0.63.2 (running) snips-dialogue ............... 0.63.2 (running) snips-hotword ................ 0.63.2 (running) snips-nlu .................... 0.63.2 (running) snips-skill-server ........... 0.63.2 (running) snips-tts .................... 0.63.2 (running)Den Audio Server habe ich zum laufen gebracht indem ich die Soundkarte durchgeschliffen habe.
Auf dem Satellite habe ich wie in auf dem git reposetory die entsprechen packte installiert.
Ich verwende ein Rasb. mit ReSpeaker ohne lautsprecher derzeit.Daher die Frage, was läuft hier falsch? was muss ich tun, ich finde einfach keine Lösung.
Und muss auf der VM der Skill-server laufen?
