Snips Iobroker komplettes Tutorial???

[unltdnetworx]

@Talu
Leider hat es etwas länger gedauert und einen kleinen Fehler mit den LEDs habe ich noch, aber hier schon mal eine lauffähige Zusammenfassung. Evtl. hat der Fehler auch etwas mit meinem letzten Update von Debian zu tun.

https://blog.unltd-networx.de/snips-installieren/

So viel zur Installation. Die Steuerung ist im Snips-Adapter Threat erklärt. Bei Gelegenheit und wenn mal etwas Ruhe in die Entwicklung kehrt, kommt auch dafür eine Zusammenfassung.

[cburghardt]

Nur mal am Rande, ich habe snips im Einsatz und habe zur Anbindung aber den mqtt Adapter verwendet.
Ich habe also ein großes Javascript, dass auf die möglichen mqtt Events reagiert und dann die Aktionen durchführt. Ist extrem flexibel.

[Dolomiti]

Hallo in die Runde,

habe mir einen ReSpeaker Core V2 gegönnt um Snips auszuprobieren. Hat auch eigentlich auf Anhieb funktioniert und meine Rolladen fahren auf Kommando. Jetzt muss ich nur noch die ganze Auswertung ins System integrieren und Feintuning betreiben. Eine akustische Rückmeldung habe ich auch noch nicht hinbekommen, dafür funktioniert der LED-Ring schonmal. @cburghardt Dein Javascript hört sich sehr interessant an.
Bin die nächsten vier Tage nicht zu Hause kann also nur temporär vorbeischauen, aber werde das Thema hier weiterverfolgen.

Gruß
Dolomiti

[cburghardt]

Eine akustische Rückmeldung gibt man typischerweise beim Beenden der Session. In meinem Falle (mqtt empfängt die Nachricht) würde eine Funktion zB so aussehen.

function endSession(sessionId, text) {
    var payload = { "sessionId": sessionId };
    if (text) {
        payload.text = text;
    }
    sendTo('mqtt.0', 'sendMessage2Client', {topic: 'hermes/dialogueManager/endSession', message: JSON.stringify(payload)});
}

In meinem Script mache ich sowas:

on({id: "mqtt.0.hermes.intent.<INTENT NAME>"}, function (obj) {
    var data = JSON.parse(obj.newState.val);
....
    endSession(data.sessionId, "Tolle Sache");
})

[unltdnetworx]

@Talu

Ich habe jetzt mal mein Vorgehen zur Anbindung an ioBroker beschrieben und hoffe es ist verständlich. Leider etwas sehr spät.

[MathiasJ]

Den Adapter snips kann man beruhigt von der repro entfernen.
Snips wird nicht mehr weiter entwickelt. Wenn man auf deren Webseite geht, landet man automatisch auf der Webseite von Sonos.
Für alle, die es noch nicht wissen:
Snips wurde für 37,5 Millionen an Sonos verkauft.
Ich persönlich finde es schade. Eine Alternative zu Google und Alexa ist weg.

[unltdnetworx]

@MathiasJ
Ich gebe dir Recht, das klingt nicht gut. Allerdings wird man nicht automatisch weitergeleitet. Snips.ai zeigt einen Hinweis mit Weiterleitung. Im Text steht dann, dass Privacy by Design in Sonos integriert wird. Hoffen wir das beste.

[tobetobe]

@unltdnetworx

Hallo Snips-Gemeinde,

ich wollte mir auch eine solche Sprachsteuerung zulegen, konnte allerdings im Dez18 schon keinen Account mehr anlegen. So kam ich auf Rhasspy und habe bereits erste Erfahrungen gesammelt.

Falls ihr ans Umsteigen denkt, könnt ihr euch meinen ersten Erfahrungsbericht unter https://forum.iobroker.net/topic/28411/rhasspy-offline-sprachsteuerung/4 anschauen. Bei Fragen: fragen!

Gruß in die Runde

[unltdnetworx]

@tobetobe
Ich hab das auch getestet und finde es zum Teil besser als Snips. Vor allem, da die Worterkennung und -aussprache angepasst werden kann.

Wie handhabst du die Sprachausgabe? Die finde ich in den Offline Varianten unterirdisch.

[tobetobe]

@unltdnetworx
soweit bin ich noch nicht. Im Moment genügt es mir zu steuern.

[BastianH]

Hi,
ich benötige mal eure Unterstützung, ich habe snips und mehreren Satelliten erfolgreich mit fhem verbunden. Jetzt würde ich gerne dies auch mit iobroaker testen. Da aber seit Februar die snips Console abgeschaltet wurde kann ich mir darüber nicht mehr einen eigenen Assistenten mit der iobroaker app erstellen.

Daher die Frage an euch, hat jemand noch eine assistant_proj_...zip Datei (Damals unter deploy assistant als Download) oder kann jemand von seinem funktionierenden System den Order /usr/share/snips/assistant als zip bereitstellen?

MFG BastianH

[tobetobe]

@unltdnetworx said in Snips Iobroker komplettes Tutorial???:

Wie handhabst du die Sprachausgabe? Die finde ich in den Offline Varianten unterirdisch.

Hallo,
nun habe ich mich diesem Thema zugewandt. Du hast Recht: Mit eSpeak und Flite kommt keine Freude auf. PicoTTS liefert jedoch IMHO sehr gute Ergebnisse. Die Sprache ist akzentfrei und die Stimme angenehm.

Falls du dir dies selbst anschauen/anhören möchtest: Nach der Einstellung von PicoTTS über "Settings" braucht man das Profil nur noch unter "Advanced" folgendermaßen zu ergänzen:

"text_to_speech": {
  "system": "picotts",
  "picotts": {
    "language": "de-DE"
  }
}

Das geänderte Profil wird nach dem Speichern sofort wirksam. Wenn du dieses Ergebnis immer noch für unterirdisch hältst, wäre ich natürlich an deinen Argumenten interessiert.

Beste Grüße
Thomas

[Pittini]

Falls es wen interessiert, bin grad auf das hier gestossen:
https://forum.iobroker.net/topic/34343/sepia-open-assistant-diy-sprachassistent-iobroker