[Aufruf] Adapter: Snips - Offline Speak2Text

[unltdnetworx]

Du bist hiernach vorgegangen?
Anleitung auf Snips

[frank70]

@unltdnetworx
ja. Der Sattelit war ursprünglich als Standalone Gerät konfiguriert. Ich habe dann nach dieser Anleitung die Einstellungen angepasst. Die LEDs steuere ich an.

Habe eben nochmal getestet. Wenn ich mit diesen aktiven Diensten teste, kann der Sattelit über den Server mit dem Adapter kommunizieren. Ich kann aber keine injects durchführen. Dazu muss ich den "snips-asr" auf dem Satteliten starten. Wenn dieser auf dem Sattelit gestartet ist funktioniert der Adapter nicht mit "recieve".

Service status:

snips-analytics .............. 0.60.10 (not running)
snips-asr .................... 0.60.10 (not running)
snips-audio-server ........... 0.60.10 (running)
snips-dialogue ............... 0.60.10 (not running)
snips-hotword ................ 0.60.10 (running)
snips-nlu .................... 0.60.10 (not running)
snips-skill-server ........... 0.60.10 (running)
snips-tts .................... 0.60.10 (running)
code_text

[unltdnetworx]

Die Injects sollen ja auch auf dem Server eingehen. Also alles gut.

[frank70]

Ja, aber danach sollten die neu injezierten Worte doch auch auf dem Satteliten erkannt werden.

[frank70]

vielleicht ist das eine snips internes problem, dass mit dem adapter nichts zu tun hat

[unltdnetworx]

@frank70
Der Satellit macht ja nichts weiter, als die Empfangenen Audioaufnahmen an der Server zu schicken. Der macht dann weiter.

Der Unterschied zwischen den beiden Varianten ist nur, ob der Satellit oder der Server das Hotword erkennt. Es reicht als Satellit also ein ganz minimalistischer Rechner. Ein pi zero w reicht scheinbar völlig aus.

Auf dem Satelliten ist auch keine App installiert. Daher auch kein Inject.

[frank70]

muss meine aussage von vorhin mit den injects korrigieren. Nach Neustart des Snips Servers gehts auch ohne den asr auf dem satteliten.
Der Adapter geht. Neue injects gehen im moment gar nicht

[frank70]

@unltdnetworx said in [Aufruf] Adapter: Snips - Offline Speak2Text:

@frank70
Der Satellit macht ja nichts weiter, als die Empfangenen Audioaufnahmen an der Server zu schicken. Der macht dann weiter.

Der Unterschied zwischen den beiden Varianten ist nur, ob der Satellit oder der Server das Hotword erkennt. Es reicht als Satellit also ein ganz minimalistischer Rechner. Ein pi zero w reicht scheinbar völlig aus.

Auf dem Satelliten ist auch keine App installiert. Daher auch kein Inject.

Ahh. das ist vielleicht mein Problem! Der Sattelit war als Standalone vorher in betrieb. Ich habe dahe noch deine App drauf!

[unltdnetworx]

Hast du die Version 1.0.0 oder die aus dem Testing-branch?

[unltdnetworx]

@frank70 said in [Aufruf] Adapter: Snips - Offline Speak2Text:

@unltdnetworx said in [Aufruf] Adapter: Snips - Offline Speak2Text:

@frank70
Der Satellit macht ja nichts weiter, als die Empfangenen Audioaufnahmen an der Server zu schicken. Der macht dann weiter.

Der Unterschied zwischen den beiden Varianten ist nur, ob der Satellit oder der Server das Hotword erkennt. Es reicht als Satellit also ein ganz minimalistischer Rechner. Ein pi zero w reicht scheinbar völlig aus.

Auf dem Satelliten ist auch keine App installiert. Daher auch kein Inject.

Ahh. das ist vielleicht mein Problem! Der Sattelit war als Standalone vorher in betrieb. Ich habe dahe noch deine App drauf!

Jetzt scheint das Problem eingegrenzt zu sein.

[frank70]

ich habe noch die 0.31. Mache jetzt gleich das update. Versuche aber vorher den Assistant zu löschen

[frank70]

wie mache ich das am einfachsten? sam init?

Commands:
2 sam connect <HOSTNAME_OR_IP> Connect to a device
3 sam devices Discover devices on your local network
4 sam disconnect Disconnect from a device
5 sam hass Home assistant commands
6 sam init Install Snips Platform components
7 sam install Install assistant or skills
8 sam login Login to the console
9 sam logout Logout of the console
10 sam mqtt Control MQTT service
11 sam reboot Reboot the device
12 sam service Display logs or restart Snips services
13 sam set-hostname <HOSTNAME> Set device hostname
14 sam setup Setup hardware
15 sam sound-feedback <toggle> Toogle sound feedback on or off
16 sam status Show the status of your device
17 sam test Test microphone or speaker
18 sam update-assistant Update the assistant already installed on the device
19 sam update Update Snips platform on your device
20 sam watch Show MQTT logs

[unltdnetworx]

Weiter oben steht der Ordner, in dem die Apps installiert sind. Bin gerade nicht am Rechner. Das muss manuell gelöscht werden.

Wenn du nichts anderes drauf laufen hast, könntest du ja alles neu aufsetzen.

[frank70]

habe /usr/share/snips/assistant erstmal umbenannt.

[frank70]

geht! Habe nicht mehr an die Assistants gedacht. Welche Version des Adapters soll ich nehmen?

[unltdnetworx]

Um zu sehen, ob es läuft erst mal 1.0.0.

[Wal]

Die Github-Url des Adapters mit Satellitenunterstützung zum installieren lautet: https://github.com/Bettman66/ioBroker.snips/tarball/testing

Alten Adapter deinstallieren und Testingadapter über die Github-Url installieren.

[frank70]

@Wal
Hallo Walter, Adapter installiert. Läuft auf Anhieb.

Die Id's meiner beiden Satteliten 2 Satteliten werden vom Adapter unter rooid angezeigt.

[unltdnetworx]

@frank70
Kannst du mal testen, was passiert, wenn gleichzeitig eingesprochen wird?

[frank70]

Setup: Die 2 Satteliten stehen direkt nebeneinander und sind am selben WiFI AP eingeloggt. Latenzzeit zum Server sollte somit gleich sein. Beide Satteliten werden erkannt und im sam watch angezeigt:

[21:00:01] [Asr] captured text "" in 4.0s
[21:00:01] [Asr] was asked to stop listening on site living
[21:00:01] [AudioServer] was asked to play a wav of 93.1 kB with id '4b4aad30-a0a3-4aac-b842-4460dcc5081a' on site living
[21:00:01] [AudioServer] finished playing wav with id '3fc13c4e-df61-492a-a918-4fcfddd6d5ef'
[21:00:02] [AudioServer] was asked to play a wav of 61.1 kB with id '4ba0cde2-ed98-40f6-933b-82817db36677' on site kitchen
[21:00:02] [AudioServer] finished playing wav with id '4ba0cde2-ed98-40f6-933b-82817db36677'
[21:00:02] [Dialogue] session with id '86887fee-1c7f-4c47-9aa3-273764b360ac' was ended on site kitchen. The session was ended because the platform didn't understand the user
[21:00:02] [Asr] was asked to stop listening on site kitchen
[21:00:02] [Hotword] was asked to toggle itself 'on' on site kitchen
[21:00:02] [AudioServer] finished playing wav with id '4b4aad30-a0a3-4aac-b842-4460dcc5081a'
[21:00:03] [AudioServer] was asked to play a wav of 61.1 kB with id 'd1d73b02-3ee3-4400-afba-956106de0776' on site living
[21:00:03] [AudioServer] finished playing wav with id 'd1d73b02-3ee3-4400-afba-956106de0776'
[21:00:03] [Dialogue] session with id 'd63d1a49-5b06-44d2-b49f-6525f8186440' was ended on site living. The session was ended because the platform didn't understand the user
[21:00:03] [Asr] was asked to stop listening on site living
[21:00:03] [Hotword] was asked to toggle itself 'on' on site living

Der Datenpunkt roomid zeigt beide an (mal den einen, mal den anderen), wahrscheinlich nach first come-first serve Prinzip.
Bei 2 Geräten ist es unwahrscheinlich, dass es zu Überschneidungen wie bei diesem Setup kommt. Bei mehreren Satteliten schon eher.