[Aufruf] Adapter: Snips - Offline Speak2Text

[unltdnetworx]

Neue Funktion in der Adapter-Version 1.1.6:
Bei allen Satelliten kann jetzt das Hotword/Wakeword (de)aktiviert werden.

[vore]

Hallo! Ich habe jetzt die Hardware für einen Snips Satelliten (Raspi-Zero und 2Hat Mic Array). Es gibt eine Anleitung bei Snips, wie ich einen Satelliten hinzufüge Satellites. Muss ich diese nutzen? Oder hilft mit der Punkt "Create Satellite" im Adpater? Und wenn ja, was muss ich da eintragen? Die IP?
Gruß
Vore

[unltdnetworx]

@vore
Ja, du kannst diese nutzen. Alternativ gibt es auch Skript, das die Anbindung durchführt.

Was zum Anbinden nicht funktioniert, ist der Punkt "create Satellite". Dieser Punkt legt, nach Eingabe des zuvor definierten Namens des Satelliten-Gerätes, die Datenpunkte in ioBroker an. Das ist allerdings auch nur nötig, falls man kein Mikrophon am Gerät hat. Ansonsten werden die Datenpunkte bei der ersten Spracheingabe automatisch generiert.

[vore]

Dieses Script macht das alles von alleine. 2Min und der Satellite ist angemeldet: https://github.com/Psychokiller1888/satConnect
Gruß

[Findus]

Kurze Frage: Wollte den Adapter installieren bekomme aber folgende Message beim Installieren.

l@0.7.0 requires a peer of stream-browserify@* but none is installed. You must install peer dependencies yourself.
iobroker 2019-05-13 10:38:23.033 info WARN
iobroker 2019-05-13 10:38:23.030 info npm
iobroker 2019-05-13 10:37:03.193 info npm install https://github.com/unltdnetworx/ioBroker.snips/tarball/master --production --save --prefix "/opt/iobroker" (System call)
iobroker 2019-05-13 10:37:00.894 info install https://github.com/unltdnetworx/ioBroker.snips/tarball/master
iobroker 2019-05-13 10:36:58.974 info url "https://github.com/unltdnetworx/ioBroker.snips/tarball/master" snips

Kann mir da jemand einen Tipp geben was ich genau machen muss?

Node.js: v8.15.1
NPM: 6.4.1

Danke und Gruesse
Findus

[unltdnetworx]

@Findus sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:

l@0.7.0 requires a peer of stream-browserify@* but none is installed. You must install peer dependencies yourself.

Hallo Findus,

versuch es mal über die Github-Katze zu installieren. Das ist momentan die gleiche Version. Jetzt fehlen komischerweise Abhängigkeiten, ich habe aber nichts geändert. Somit hat sich vermutlich eine andere Abhängkeit geändert. Wenn noch mehrere das Problem haben, muss ich wohl diese Abhängigkeit einfügen. Obwohl das nicht Sinn der Sache wäre.

[unltdnetworx]

Mit meiner npm-Version läuft es einwandfrei. 8.13.*

[Findus]

@unltdnetworx Danke fuer die schnelle Antwort.

Die Installation über die Katze habe ich schon probiert. Leider gleiches Problem.

Viele Gruesse
Findus

[Findus]

Der Adpater liegt jetzt unter /opt/iobroker/node_modules/iobroker.snips
er taucht aber im UI nicht auf. Gibt es eine Moeglichkeit den Adapter manuell zu starten?

Oder ein Tipp was ich noch machen kann?

Viele Gruesse
Findus

[Findus]

Kurzer update: Habe nachdem ich den Adapter über Katze installiert hatte ( mit Fehlermeldung) diesen nun mit der Console "iobroker add snips" installiert. Dies hat funktioniert und er ist jetzt auch im Admin sichtbar. Werde nun mit den Test beginnen.

[unltdnetworx]

@Findus
Super. Immerhin.
Wollte gerade vorschlagen heute Abend eine Testversion für dein Problem zu basteln. Habe nämlich heute eine Meldung erhalten, dass eine Abhängigkeit eine Sicherheitslücke hat. Möglicherweise hat da ein Entwickler gerade essentielle Änderungen eingebaut. Denke, dass das viele andere Anwendungen betrifft und bald behoben sein wird.

[Findus]

Wo finde ich die Einstellungen von Text2Command Adapter um die Antwort Id "snips.0.send.say.text einzutragen? Die Text2Command Konfiguration ist bei mir ausgegraut?

[unltdnetworx]

@Findus
Im text2command Adapter (neuer Eintrag im Menü links) ist rechts oben ein Zahnrad für erweiterte Einstellungen.

[Findus]

@unltdnetworx

[Daniel Beiderwieden]

Moin,

ich bin jetzt schon 2 Tage dran Snips zu installieren bzw. zum laufen zu bringen.
IoBroker hat den Snips und den Command Adapter wie beschrieben installiert. Er wurde auch entsprechend in der Sinps Console hinzugefügt.

Der Snips Server läuft in Proxmox in einer Debian VM.
Das Hotword wird erkannt und per sam watch bekomme ich folgende Informationen:

sam watch
[17:31:25] Watching on localhost:1883 (MQTT)
[17:31:27] [Hotword] detected on site room1, for model hey_snips
[17:31:27] [Asr] was asked to stop listening on site room1
[17:31:27] [Hotword] was asked to toggle itself 'off' on site room1
[17:31:27] [Dialogue] session with id '19c5c8b4-b002-49d7-9c2e-0e6bb5453ed0' was started on site room1
[17:31:27] [AudioServer] was asked to play a wav of 41.1 kB with id '61c42146-84bc-4820-a907-0a59dc623e5d' on site room1
[17:31:42] [Dialogue] session with id '19c5c8b4-b002-49d7-9c2e-0e6bb5453ed0' was ended on site room1. The session was ended because one of the component didn't respond in a timely manner
[17:31:42] [Asr] was asked to stop listening on site room1
[17:31:42] [Hotword] was asked to toggle itself 'on' on site room1

der Satellite wurde mit dem git Script hinzugefügt von Psychokiller..
Sam Status gibt mir folgendes aus:

sam status

Connected to device localhost

OS version ................... Debian GNU/Linux 9 (stretch)
Installed assistant .......... MainSnips
Language ..................... de
Hotword ...................... hey_snips
ASR engine ................... snips
Status ....................... Live

Service status:

snips-analytics .............. (not running)
snips-asr .................... 0.63.2 (running)
snips-audio-server ........... 0.63.2 (running)
snips-dialogue ............... 0.63.2 (running)
snips-hotword ................ 0.63.2 (running)
snips-nlu .................... 0.63.2 (running)
snips-skill-server ........... 0.63.2 (running)
snips-tts .................... 0.63.2 (running)

Den Audio Server habe ich zum laufen gebracht indem ich die Soundkarte durchgeschliffen habe.

Auf dem Satellite habe ich wie in auf dem git reposetory die entsprechen packte installiert.
Ich verwende ein Rasb. mit ReSpeaker ohne lautsprecher derzeit.

Daher die Frage, was läuft hier falsch? was muss ich tun, ich finde einfach keine Lösung.
Und muss auf der VM der Skill-server laufen?

[unltdnetworx]

@Daniel-Beiderwieden
Hi, also zum Skill-Server: Nein, der muss nicht laufen.

Es sieht so aus, als würde er zumindest das Hotword erkennen, soweit so gut. Hast du evtl. zu früh begonnen zu sprechen? Du bekommst ja keine Feedback ohne Lautsprecher.

[Daniel Beiderwieden]

@unltdnetworx habe das ganze jetzt erneut gestest und in verschiedenen Abständen gesprochen. Es kommt leider immer die selbe meldung.

[unltdnetworx]

Ich habe das Tool noch nie verwendet, aber ich denke, dass zu viele Server auf dem Satelliten laufen. Weiter oben war schon mal das Thema. Ich glaube es müssen nur 2 auf dem Satelliten aktiv sein, auf dem Server natürlich mehr. (Skill kannst du ausmachen.)

[Daniel Beiderwieden]

Bin nun noch mal die Server durch gegangen. diese wurden wohl doch mit installiert.
Nach dem Ausschalten kommt immer noch der selbe Fehler.

allerdings konnte ich mit dem Befehlt: sudo tail -f /var/log/syslog folgendes raus bekommen.

May 23 17:45:14 raspberrypi snips-hotword[548]: INFO:snips_hotword_lib::audio: Audio thread for site room1 stopped.
May 23 17:45:14 raspberrypi snips-audio-server[547]: INFO:snips_audio_portaudio      : Playing "3df58b5b-396b-4403-957b-67dd680d6818" using output "bcm2835 ALSA: IEC958/HDMI (hw:0,1)", wav spec: WavSpec { channels: 2, sample_rate: 22050, bits_per_sample: 16, sample_format: Int }
May 23 17:45:14 raspberrypi snips-audio-server[547]: Expression 'paInvalidSampleRate' failed in 'src/hostapi/alsa/pa_linux_alsa.c', line: 2043
May 23 17:45:14 raspberrypi snips-audio-server[547]: Expression 'PaAlsaStreamComponent_InitialConfigure( &self->playback, outParams, self->primeBuffers, hwParamsPlayback, &realSr )' failed in 'src/hostapi/alsa/pa_linux_alsa.c', line: 2717
May 23 17:45:14 raspberrypi snips-audio-server[547]: Expression 'PaAlsaStream_Configure( stream, inputParameters, outputParameters, sampleRate, framesPerBuffer, &inputLatency, &outputLatency, &hostBufferSizeMode )' failed in 'src/hostapi/alsa/pa_linux_alsa.c', line: 2838
May 23 17:45:14 raspberrypi snips-audio-server[547]: thread 'portaudio.player' panicked at 'ERROR:snips_audio_server_hermes  : could not play "3df58b5b-396b-4403-957b-67dd680d6818"
May 23 17:45:14 raspberrypi snips-audio-server[547]:  -> caused by: InvalidSampleRate
May 23 17:45:14 raspberrypi snips-audio-server[547]: called `Result::unwrap()` on an `Err` value: "SendError(..)"', src/libcore/result.rs:997:5

werde also wohl irgendwas vergessen haben zu installieren oder so. Ich werde dann mal googlen was ich vergessen habe oder hast du noch eine Idee`?

[unltdnetworx]

@Daniel-Beiderwieden sagte in [Aufruf] Adapter: Snips - Offline Speak2Text:

22050

Sind da USB-Lautsprecher bzw. irgendwie HDMI dran? Vllt. unterstützen diese die Rate von 22050 nicht? Scheint ein Konfigurationsfehler zu sein?!