Skip to content
  • Home
  • Aktuell
  • Tags
  • 0 Ungelesen 0
  • Kategorien
  • Unreplied
  • Beliebt
  • GitHub
  • Docu
  • Hilfe
Skins
  • Light
  • Brite
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • Standard: (Kein Skin)
  • Kein Skin
Einklappen
ioBroker Logo

Community Forum

donate donate
  1. ioBroker Community Home
  2. Deutsch
  3. Off Topic
  4. Rhasspy Offline Sprachsteuerung

NEWS

  • UPDATE 31.10.: Amazon Alexa - ioBroker Skill läuft aus ?
    apollon77A
    apollon77
    48
    3
    8.8k

  • Monatsrückblick – September 2025
    BluefoxB
    Bluefox
    13
    1
    2.2k

  • Neues Video "KI im Smart Home" - ioBroker plus n8n
    BluefoxB
    Bluefox
    16
    1
    3.2k

Rhasspy Offline Sprachsteuerung

Geplant Angeheftet Gesperrt Verschoben Off Topic
403 Beiträge 30 Kommentatoren 100.5k Aufrufe 47 Watching
  • Älteste zuerst
  • Neuste zuerst
  • Meiste Stimmen
Antworten
  • In einem neuen Thema antworten
Anmelden zum Antworten
Dieses Thema wurde gelöscht. Nur Nutzer mit entsprechenden Rechten können es sehen.
  • D DerT

    Wie bereits angekündigt stelle ich nun mal meine Lösung vor und habe noch ein Paar Fragen wie Ihr gewisse Dinge gelöst habt.

    Die Übergabe der JSON an ioBroker erfolgt nun doch wieder über MQTT.
    (Nachdem ich meinen ioBroker komplett neu installiert habe gab es keinen Fehler mehr :grimacing: )

    Das Skript kann aktuell die folgenden Aufgaben übernehmen

    • Objekt in einem bestimmten Raum schalten
    • Objekt ohne den Raum schalten.
      In diesem Fall wird zuerst im Raum in dem der rhasspy steht nach dem Objekt gesucht
      Falls im Raum kein Objekt mit diesem Namen gefunden wurde wird global danach gesucht
      Wenn es global nur ein Objekt gibt wird dieses geschalten.

    sentences.ini

    [changeLightRoom]
    ([schalte] | [mach]) ([das] | [die]) ($objects){objectName} [im] ($rooms){room} ($states){state}
    
    [changeState]
    ([schalte] | [mach]) ([das] | [die] | [den]) ($objects){objectName} ($states){state}
    

    sentences.ini

    [changeLightRoom]
    ([schalte] | [mach]) ([das] | [die]) ($objects){objectName} [im] ($rooms){room} ($states){state}
    
    [changeState]
    ([schalte] | [mach]) ([das] | [die] | [den]) ($objects){objectName} ($states){state}
    

    slot - objects

    Highboard 
    Stehlampe
    Bett
    Herd
    Licht
    Spiegel
    Wohnwand
    Indirekte Licht
    Spüle
    Schrank
    blablabla
    

    slot - rooms

    Schlafzimmer
    Küche
    Klo
    Büro
    Esszimmer
    Bad
    Wohnzimmer
    

    slot - states

    ein
    an
    aus
    

    Durch diese Definition sind alle Daten die später vom Skript verarbeitet werden in Slots.

    Das Herzstück des ganzen ist das Javascript.
    Der Code ist kommentiert, hoffe meine Kommentare sind nicht zu verwirrend.

    //##########################################################################
    // Rhasspy-intents via MQTT empfangen und entspr.Datenpunkte setzen/schalten
    //##########################################################################
    let http = require('http');
    
    /*
    Definition meiner Räume und der jeweiligen Objekte darin
    Die Struktur sieht dabei wie folgt aus.
    Im Intent der übermittelt wird sind sowohl der Raum Name als auch der Objektname als Slot enthalten.
    Beide werden dann vom Skript verwendet um den korrekten Datenpunkt herauszufinden.
    */
    const rooms = {
        "Büro": {
            "Licht": "sonoff.0.ShellyV1_13.POWER",
        },
        "Wohnzimmer": {
            "Licht": "sonoff.0.ShellyV1_06.POWER",
            "Stehlampe": "OwnDevices.0.433mhzPlugs.10011.PlugC",
            "Wohnwand": "OwnDevices.0.433mhzPlugs.10011.PlugB",
            "Rollo": ""
        },
        "Bad": {
            "Licht": "sonoff.0.ShellyV1_05.POWER",
            "Spiegel": "sonoff.0.ShellyV1_11.POWER",
            "Indirekte Licht": "sonoff.0.SonoffBasic_02.POWER"
        },
        "Esszimmer": {
            "Licht": "sonoff.0.ShellyV1_03.POWER",
            "Highboard": "sonoff.0.SonoffS26_3.POWER"
        },
        "Küche": {
            "Licht": "hm-rpc.1.000858A9960E7A.4.STATE",
            "Spüle": "sonoff.0.ShellyV1_02.POWER",
            "Herd": "sonoff.0.ShellyV1_01.POWER"
        },
        "Schlafzimmer": {
            "Licht": "sonoff.0.ShellyV1_09.POWER",
            "Schrank": "sonoff.0.ShellyV1_10.POWER",
            "Bett": "sonoff.0.SonoffBasic_01.POWER",
            "Rollo": ""
        },
        "Klo": {
            "Licht": "sonoff.0.ShellyV1_04.POWER"
        }
    }
    
    //In diesem  json werden nötige Informationen zu allen rhasspys abgelget.
    const rhasspySites = {
        "testpi": {
            room: "Büro",
            host: "testpi.angl.loc",
            httpPort: "12101"
        }
    }
    
    
    //************************ Functions *********************
    //Mit dieser Funktion werden Strings in einen Boolschen Wert umgewandelt
    //Wenn der Wert in 'trueValues' enthalten ist wird 'true' zurückgegeben. 
    //Wenn nicht, wird 'false' zurückgegeben
    function convertStateToBool(state) {
        const trueValues = ['ein', 'an'];
        return trueValues.includes(state);
    }
    
    //Reukursives durchsuchen eines JSON Objektes
    //© https://gist.github.com/shakhal/3cf5402fc61484d58c8d
    function findValues(obj, key) {
        return findValuesHelper(obj, key, []);
    }
    
    //Reukursives durchsuchen eines JSON Objektes
    //© https://gist.github.com/shakhal/3cf5402fc61484d58c8d
    function findValuesHelper(obj, key, list) {
        if (!obj) return list;
        if (obj instanceof Array) {
            for (var i in obj) {
                list = list.concat(findValuesHelper(obj[i], key, []));
            }
            return list;
        }
        if (obj[key]) list.push(obj[key]);
    
        if ((typeof obj == "object") && (obj !== null)) {
            var children = Object.keys(obj);
            if (children.length > 0) {
                for (i = 0; i < children.length; i++) {
                    list = list.concat(findValuesHelper(obj[children[i]], key, []));
                }
            }
        }
        return list;
    }
    
    //Generiert ein JSON-Objekt mit allen wichtigen Informationen für die Funktionen im Skript.
    //Dies dient vor allem dazu den späteren Code lesbarer zu machen.
    //Beisipel Ergebnis
    /*
    {
       "slots":{
          "objectName":"Stehlampe",
          "state":"aus"
       },
       "intentName":"changeState",
       "siteId":"testpi"
    }
    */
    function extractIntentData(message) {
        const parsedMessage = JSON.parse(message);
        let extractedJSON = {};
        extractedJSON.slots = {};
        extractedJSON.intentName = parsedMessage.intent.intentName;
        extractedJSON.siteId = parsedMessage.siteId;
    
        parsedMessage.slots.forEach(slot => {
            extractedJSON.slots[slot.slotName] = slot.value.value;
        });
    
        return extractedJSON;
    }
    
    //Damit kann jeder Rhasspy sprechen
    function speakRhasspy(text, rhasspySiteId) {
        console.log(rhasspySiteId);
        const rhasspy = rhasspySites[rhasspySiteId];
        const options = {
            host: rhasspy.host,
            port: rhasspy.httpPort,
            path: "/api/text-to-speech",
            method: 'POST',
            headers: {
                'User-Agent': 'ioBroker',
                'Content-Type': 'text/plain',
            }
        }
    
        let req = http.request(options);
        req.on('error', function (e) {
            console.error('ERROR: ' + e.message, "warn");
        });
        req.write(text);
        req.end();
    }
    
    
    //In dieser Variablen werden alle Funktionen gepsiechert die später aufgerufen werden.
    //Dies dient dazu den anfallenden Code zu minimieren.
    //Die Funktionen haben immer den selben Namen wie die Intents in rhasspy und werden auch darauf basierend aufgerufen.
    const callFunctions = {
        //Ändert den Wert eines ioBroker Datenpunktes in einem bestimmten Raum.
        changeLightRoom: function (json) {
            const objectName = json.slots.objectName;
            const roomName = json.slots.room;
            const state = convertStateToBool(json.slots.state);
    
    
            //Nur wenn alle 3 Werte vorhanden sind wird der Zustand geändert
            if (typeof roomName != 'undefined' && typeof state != 'undefined' && typeof objectName != 'undefined') {
                const room = rooms[roomName];
    
                if (typeof room != 'undefined') {
                    const lightId = room[objectName];
                    if (typeof lightId != 'undefined') {
                        setState(lightId, state);
                    }
                    else {
                        speakRhasspy(`Ich konnte ${objectName} nicht finden`, json.siteId);
                        console.warn(`can not find object '${objectName}' in room '${roomName}'`);
                    }
                }
                else {
                    speakRhasspy(`Ich konnte den Raum ${roomName} nicht finden`, json.siteId);
                    console.warn(`can not find room '${roomName}' in list of rooms`);
                }
    
            }
            else {
                speakRhasspy(`Etwas ist schief gelaufen`, json.siteId);
                console.warn(`rhasspy intent '${json.intentName}' from '${json.siteId}' slots not complete | room = '${roomName}' | state = '${state}' | objectName = '${objectName}'`);
            }
        },
        //Ändert des Wert eines ioBroker Datenpunktes auf Basis des Raumes in welchem der Rhasspy sich befindet.
        //Wenn in diesem Raum kein objekt mit diesem Name ist wird rekursiv in allen Räumen danach geuscht.
        //Wenn dann nur ein Objekt mit diesem Namen gefunden wird, wird dieses geschalten.
        changeState: function (json) {
            const objectName = json.slots.objectName;
            const state = convertStateToBool(json.slots.state);
            const site = rhasspySites[json.siteId];
            const room = rooms[site.room];
            let lightId = room[objectName];
    
            if (typeof lightId === 'undefined') {
                //Prüfen ob es mehr als ein Objekt mit diesem Namen gibt
                const objects = findValues(rooms, objectName);
    
                if (objects.length === 1) {
                    lightId = objects[0];
                }
                else if (objects.length > 1) {
                    speakRhasspy(`Es gibt mehrere Objekte mit dem Namen ${objectName}`, json.siteId);
                    console.warn(`rhasspy intent '${json.intentName}' from '${json.siteId}' - more than one object found with name '${objectName}'`);
                }
                else {
                    speakRhasspy(`Ich konnte ${objectName} nicht finden`, json.siteId);
                    console.warn(`rhasspy intent '${json.intentName}' from '${json.siteId}' - no object found with name '${objectName}'`);
                }
            }
    
            if (typeof lightId != 'undefined' && typeof state != 'undefined') {
                setState(lightId, state);
            }
            else {
                speakRhasspy(`Etwas ist schief gelaufen`, json.siteId);
                console.warn(`rhasspy intent '${json.intentName}' from '${json.siteId}' slots not complete | lightId = '${lightId}' | state = '${state}'`);
            }
        }
    }
    //************************ Functions *********************
    
    //************************ Events ************************
    //Wird beim auslösen jedes Intents getriggert
    on({ id: /mqtt\.0\.hermes\.intent\..*/, change: "any" }, function (obj) {
        const extractedJSON = extractIntentData(obj.state.val);
        const intentName = extractedJSON.intentName;
        const callFunction = callFunctions[intentName];
    
        if (typeof callFunction != 'undefined') {
            callFunction(extractedJSON);
        }
        else {
            console.error(`Rhasspy: Funktion ist nicht definiert --> Fehler bei Intent ${intentName}`);
        }
    });
    //************************ Events ************************
    

    Würde mich freuen wenn Ihr mal eure Meinung dazu sagt :)

    Außerdem habe ich noch ein paar Fragen.

    1. Mit welchen Wakword System arbeitet Ihr? Ich bekomme Smowboy nicht zum laufen :(
    2. Welches text-2-speach System nutzt ihr? Bei Espeak hört sich das total schlecht an und wirkt als ob es englisch ist.
    3. Habt Ihr Musikdienste wie Spotify und oder Radio eingebunden?

    Liebe Grüße und schöne Wochenende

    J Offline
    J Offline
    jwerlsdf
    schrieb am zuletzt editiert von jwerlsdf
    #377

    @dert
    hi,
    ich habe jetzt schon länger dein Skript am Laufen. Jetzt habe ich einen weiteren Rhasspy in einem weiteren Raum installiert. Wo muss ich nun genau im Skript diesen eintragen?
    Bei


    const rhasspySites = {
    "Wohnzimmer": {
    room: "Wohnzimmer",
    host: "192.168.178.40",
    httpPort: "12101"
    }
    "Esszimmer": {
    room: "Esszimmer",
    host: "192.168.178.34",
    httpPort: "12101"
    }
    }

    Funktioniert dies leider nicht.

    Edit:
    hat funktioniert. Ich habe ein Komma vergessen...:expressionless:

    D 1 Antwort Letzte Antwort
    0
    • J jwerlsdf

      @dert
      hi,
      ich habe jetzt schon länger dein Skript am Laufen. Jetzt habe ich einen weiteren Rhasspy in einem weiteren Raum installiert. Wo muss ich nun genau im Skript diesen eintragen?
      Bei


      const rhasspySites = {
      "Wohnzimmer": {
      room: "Wohnzimmer",
      host: "192.168.178.40",
      httpPort: "12101"
      }
      "Esszimmer": {
      room: "Esszimmer",
      host: "192.168.178.34",
      httpPort: "12101"
      }
      }

      Funktioniert dies leider nicht.

      Edit:
      hat funktioniert. Ich habe ein Komma vergessen...:expressionless:

      D Offline
      D Offline
      DerT
      Forum Testing
      schrieb am zuletzt editiert von
      #378

      @jwerlsdf
      Schön das mein Skript genutzt wird :)
      Welche Funktionen in Rhasspy nutzt du denn? Hat zufällig schon jemand solche Themen wie Spotify und Einkaufsliste gelöst?
      Wegen dieser beiden Themen ist das Projekt bei mir gescheitert und ich bin doch wieder auf eine Amazon Wanze gegangen xD.

      Gruß
      T

      J CarstenDerGroßeC 2 Antworten Letzte Antwort
      0
      • D DerT

        @jwerlsdf
        Schön das mein Skript genutzt wird :)
        Welche Funktionen in Rhasspy nutzt du denn? Hat zufällig schon jemand solche Themen wie Spotify und Einkaufsliste gelöst?
        Wegen dieser beiden Themen ist das Projekt bei mir gescheitert und ich bin doch wieder auf eine Amazon Wanze gegangen xD.

        Gruß
        T

        J Offline
        J Offline
        jwerlsdf
        schrieb am zuletzt editiert von
        #379

        @dert
        tobetobe hat das mit der Bring-Liste ja gelöst. Es funktioniert bei mir. Das Problem ist jedoch, dass alle Lebensmittel-Wörter in Rhasspy aufgenommen werden müssen. Dafür habe ich dann von Lebensmittelseiten die Wörter reinkopiert. Für mich reicht es aber.
        Ansonsten steuere ich das übliche: Lichter, Musik (Amazon über Sonos), Wetter.
        In der Regel benutze ich dein Skript um Datenpunkte zu schalten, die dann wiederum meine Blocklys schaltet. Ist etwas umständlich, aber funktioniert bei mir.

        D 1 Antwort Letzte Antwort
        0
        • J jwerlsdf

          @dert
          tobetobe hat das mit der Bring-Liste ja gelöst. Es funktioniert bei mir. Das Problem ist jedoch, dass alle Lebensmittel-Wörter in Rhasspy aufgenommen werden müssen. Dafür habe ich dann von Lebensmittelseiten die Wörter reinkopiert. Für mich reicht es aber.
          Ansonsten steuere ich das übliche: Lichter, Musik (Amazon über Sonos), Wetter.
          In der Regel benutze ich dein Skript um Datenpunkte zu schalten, die dann wiederum meine Blocklys schaltet. Ist etwas umständlich, aber funktioniert bei mir.

          D Offline
          D Offline
          DerT
          Forum Testing
          schrieb am zuletzt editiert von
          #380

          @jwerlsdf

          Okay, das mit der Liste an Lebensmittel hatte ich auch und wollte es so nicht. Beim erkennen von Sätzen ohne die Vorgabe von Wörtern war die Erkennung miserabel.

          Wieso schaltest du über dDatenpunkte blocklys und nicht die Geräte direkt?

          J 1 Antwort Letzte Antwort
          0
          • D DerT

            @jwerlsdf

            Okay, das mit der Liste an Lebensmittel hatte ich auch und wollte es so nicht. Beim erkennen von Sätzen ohne die Vorgabe von Wörtern war die Erkennung miserabel.

            Wieso schaltest du über dDatenpunkte blocklys und nicht die Geräte direkt?

            J Offline
            J Offline
            jwerlsdf
            schrieb am zuletzt editiert von
            #381

            @dert
            bei Lichtern z.B. mach ich das auch. Möchte ich aber meine Musik über Sonos API hören, geht das nur über ein Extra-Skript. Dies ist für mich als Laie einfacher...

            1 Antwort Letzte Antwort
            0
            • D DerT

              @jwerlsdf
              Schön das mein Skript genutzt wird :)
              Welche Funktionen in Rhasspy nutzt du denn? Hat zufällig schon jemand solche Themen wie Spotify und Einkaufsliste gelöst?
              Wegen dieser beiden Themen ist das Projekt bei mir gescheitert und ich bin doch wieder auf eine Amazon Wanze gegangen xD.

              Gruß
              T

              CarstenDerGroßeC Offline
              CarstenDerGroßeC Offline
              CarstenDerGroße
              schrieb am zuletzt editiert von
              #382

              @dert

              Ansicht läuft das Skript super, Spotify (über Logitech Mediaserver) ist aktuell auch noch ein Thema bei mir. Hab aktuell leider zu wenig Zeit.

              1 Antwort Letzte Antwort
              0
              • C Offline
                C Offline
                ChrizZz
                schrieb am zuletzt editiert von ChrizZz
                #383

                nach 382 Nachrichten habe ich mich jetzt auch ziemlich aufgeschlaut und freue mich, dass ihr noch aktiv Rhasspy nutzt oder noch in der Weiterentwicklung seid. Ich stecke noch in der Überlegungsphase, ob im Zuge des Hausumbaus die Haussteuerung per Rhasspy Offline Spracherkennung durchführe. Da das für die Basics nach euren Hinweisen gut funktionieren wird, wollte ich euch noch mit ein paar anderen Fragen belästigen :)

                Ist der externe MQTT Server noch immer die empfohlene Variante? In der Zwischenzeit gab es noch ein paar Updates von Rhasspy und im Netz bin ich jetzt auch häufig auf Verknüpfungen über die HTTP API mit Node-Red gestoßen

                Hat jemand von euch schonmal versucht externe Smart Speaker zu verknüpfen? Sehe es kritisch mit Pi Zero 2 W und einem Lautsprecher einen guten Smart Speaker mit guter Klangqualität zu bauen, möchte aber in Bad und Küche nicht darauf verzichten.

                Hat jemand von euch Erfahrung mit der (inoffiziellen?) Android App? Perspektivisch wohl auch eine iOS App - Meine Idee ist ein altes Android Tablet als Bedienungszentrale zu nutzen und da würde es sich anbieten das Tablet auch als weiteren Satelliten in die gesamte Struktur einzubinden.

                G 1 Antwort Letzte Antwort
                0
                • C ChrizZz

                  nach 382 Nachrichten habe ich mich jetzt auch ziemlich aufgeschlaut und freue mich, dass ihr noch aktiv Rhasspy nutzt oder noch in der Weiterentwicklung seid. Ich stecke noch in der Überlegungsphase, ob im Zuge des Hausumbaus die Haussteuerung per Rhasspy Offline Spracherkennung durchführe. Da das für die Basics nach euren Hinweisen gut funktionieren wird, wollte ich euch noch mit ein paar anderen Fragen belästigen :)

                  Ist der externe MQTT Server noch immer die empfohlene Variante? In der Zwischenzeit gab es noch ein paar Updates von Rhasspy und im Netz bin ich jetzt auch häufig auf Verknüpfungen über die HTTP API mit Node-Red gestoßen

                  Hat jemand von euch schonmal versucht externe Smart Speaker zu verknüpfen? Sehe es kritisch mit Pi Zero 2 W und einem Lautsprecher einen guten Smart Speaker mit guter Klangqualität zu bauen, möchte aber in Bad und Küche nicht darauf verzichten.

                  Hat jemand von euch Erfahrung mit der (inoffiziellen?) Android App? Perspektivisch wohl auch eine iOS App - Meine Idee ist ein altes Android Tablet als Bedienungszentrale zu nutzen und da würde es sich anbieten das Tablet auch als weiteren Satelliten in die gesamte Struktur einzubinden.

                  G Offline
                  G Offline
                  Gutscho
                  schrieb am zuletzt editiert von
                  #384

                  @chrizzz
                  Ich hoffe das Thema ist noch Aktuell. Ich habe mir mehrere "Smartspeaker" (wenn man das noch so nennen kann) mit Pi Zero WH + Hifiberry AMP2 + Teufel Ultima 40 und 20 Lautsprecher gebaut. Natürlich kann der AMP2 nicht die volle Leistung aus den Lautsprechern holen, aber es reicht für eine wunderschöne und wenn nötig sehr laute Beschallung von meinen Räumen.

                  Softwareseitig habe ich bisher folgendes umgesetzt:

                  • Rhasspy mit Radiosendern und Räumen gefüttert die ich einzeln anfragen kann
                  • Node-RED steuert meinen Logitech Media Server. Hierfür habe ich mir eine .json Datei mit den Radiosendern gebastelt in der die Stream-URLs zu den Sendern sind. Diese werden über ein Script in Node-RED durchsucht und dann an den jeweilig gewünschten PiCorePlayer/Squeezeplayer (mit node-red-contrib-logitechmediaserver) weitergereicht. Außerdem kann ich die Lautstärke der Räume verändern und die Musik ausschalten/einschalten/pausieren.
                  • Rhasspy mutet bei Wakeword die Musikplayer für 3 Sekunden für bessere Sprachverständlichkeit
                  • in IOBroker habe ich dann noch den LMS eingebunden und kann auch hier steuern
                  • am Smartphone habe ich zusätzlich Squeezer drauf dass auch hierüber die Player gesteuert werden können

                  ToDo's bzw. Wunschdenken sind bei mir noch:

                  • vorgefertigte Playlisten zum Aufruf hinzufügen dass diese auch per Sprachsteuerung angestartet werden können
                  • Multiroom durch Bewegungsmelder im neuen Haus (noch im Bau) steuern, dass wenn ich z.B. aus der Küche in den Flur gehe hier die Musik von der Küche weiterläuft. Wenn keiner mehr in der Küche ist wird hier der Player automatisch ausgeschaltet.
                  • InWall Eigenbau-Lautsprecher bauen für Bad, Küche, Essbereich aus Bausätze mit SBAcoustics by ADW
                  1 Antwort Letzte Antwort
                  0
                  • System 9S Offline
                    System 9S Offline
                    System 9
                    schrieb am zuletzt editiert von
                    #385

                    Hallo,

                    habe bie mri jetzt 15 Sateliten verbaut und angebunden.
                    Leider habe ich noch ein riesen Problem mit dem Intent Recognition.
                    Zur Zeit nutze ich fsticuffs. Gibt es hier bessere varianten ?

                    derAlffD 1 Antwort Letzte Antwort
                    0
                    • System 9S System 9

                      Hallo,

                      habe bie mri jetzt 15 Sateliten verbaut und angebunden.
                      Leider habe ich noch ein riesen Problem mit dem Intent Recognition.
                      Zur Zeit nutze ich fsticuffs. Gibt es hier bessere varianten ?

                      derAlffD Offline
                      derAlffD Offline
                      derAlff
                      Developer
                      schrieb am zuletzt editiert von
                      #386

                      @system-9 zu besseren Varianten kann ich leider nichts sagen, da ich gerade erst mit dem Thema Rhasspy anfange. Aber hast du eventuell einen Link zum Code der Sattellites für mich? Danke ;)

                      Proxmox 8
                      ioBroker im LXC (Master)
                      2x ioBrober auf RPi (3&4) als Zigbee Gateway (Slave)
                      Paperless-ngx in VM
                      OMV6 in VM
                      Linux auf allen Endgeräten (Windows verbannt)

                      System 9S 1 Antwort Letzte Antwort
                      0
                      • derAlffD derAlff

                        @system-9 zu besseren Varianten kann ich leider nichts sagen, da ich gerade erst mit dem Thema Rhasspy anfange. Aber hast du eventuell einen Link zum Code der Sattellites für mich? Danke ;)

                        System 9S Offline
                        System 9S Offline
                        System 9
                        schrieb am zuletzt editiert von
                        #387

                        @deralff
                        anbei mein Sattelit.

                        {
                        "dialogue": {
                        "system": "rhasspy"
                        },
                        "intent": {
                        "remote": {
                        "url": "http://:12101/api/text-to-intent"
                        },
                        "satellite_site_ids": "Wohnzimmer",
                        "system": "remote"
                        },
                        "microphone": {
                        "pyaudio": {
                        "device": "1"
                        },
                        "system": "pyaudio"
                        },
                        "mqtt": {
                        "enabled": "",
                        "site_id": "Wohnzimmer"
                        },
                        "speech_to_text": {
                        "remote": {
                        "url": "http://
                        :12101/api/speech-to-text"
                        },
                        "satellite_site_ids": "Wohnzimmer",
                        "system": "remote"
                        },
                        "text_to_speech": {
                        "remote": {
                        "url": "http://*:12101/api/speech-to-text"
                        },
                        "system": "remote"
                        },
                        "wake": {
                        "raven": {
                        "keywords": {
                        "jarvis": {
                        "enabled": true
                        }
                        }
                        },
                        "system": "raven"
                        }
                        }

                        1 Antwort Letzte Antwort
                        2
                        • PackElendP Offline
                          PackElendP Offline
                          PackElend
                          schrieb am zuletzt editiert von
                          #388

                          Moin,
                          die Unterhaltung ist ja schon über zwei Jahre alt und hat schon bald 400 Beiträge gesammelt.
                          Gibt es denn ein akutelles Resumé, bzw. hat sicher der ganze Prozess verglichen mit den Anfängen schon stark verbessert?
                          danke

                          C K 2 Antworten Letzte Antwort
                          0
                          • PackElendP PackElend

                            Moin,
                            die Unterhaltung ist ja schon über zwei Jahre alt und hat schon bald 400 Beiträge gesammelt.
                            Gibt es denn ein akutelles Resumé, bzw. hat sicher der ganze Prozess verglichen mit den Anfängen schon stark verbessert?
                            danke

                            C Offline
                            C Offline
                            ChrizZz
                            schrieb am zuletzt editiert von
                            #389

                            @packelend gefühlt nicht wirklich. Auch ob Rhasspy "die" Lösung ist/sein wird, ist zumindest für mich fraglich. Der Rhasspy Entwickler arbeitet jetzt für Mycroft und viel Bewegung in der Rhasspy Community ist auch nicht erkennbar. Sehr schade...

                            1 Antwort Letzte Antwort
                            0
                            • PackElendP PackElend

                              Moin,
                              die Unterhaltung ist ja schon über zwei Jahre alt und hat schon bald 400 Beiträge gesammelt.
                              Gibt es denn ein akutelles Resumé, bzw. hat sicher der ganze Prozess verglichen mit den Anfängen schon stark verbessert?
                              danke

                              K Offline
                              K Offline
                              kuumaur
                              schrieb am zuletzt editiert von
                              #390

                              @packelend
                              Moin,
                              was meinst Du mit "stark verbessert"?

                              Proxmox | IoBroker LXC Container | Zigbee | Rhasspy Voice | SqueezeBox | Frigate CCTV | Jarvis Vis |

                              PackElendP 1 Antwort Letzte Antwort
                              0
                              • K kuumaur

                                @packelend
                                Moin,
                                was meinst Du mit "stark verbessert"?

                                PackElendP Offline
                                PackElendP Offline
                                PackElend
                                schrieb am zuletzt editiert von
                                #391

                                @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                was meinst Du mit "stark verbessert"?
                                Ich habe nur den Anfang gelesen aber es schien mir, dass es nicht auf anhieb geht, bzw. viele Schritte zu machen sind.

                                @chrizzz said in Rhasspy Offline Sprachsteuerung:

                                Der Rhasspy Entwickler arbeitet jetzt für Mycroft und viel Bewegung in der Rhasspy Community ist auch nicht erkennbar. Sehr schade...

                                Immerhin ist er da gut aufgehoben und wird Mycroft weiteren Aufschwung geben.
                                Dass es eine kommerzielle Komponente braucht, um das mittels Open Source weiterzutreiben ist eine Tatsache, die man nicht verneinen kann.

                                K C 2 Antworten Letzte Antwort
                                0
                                • PackElendP PackElend

                                  @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                  was meinst Du mit "stark verbessert"?
                                  Ich habe nur den Anfang gelesen aber es schien mir, dass es nicht auf anhieb geht, bzw. viele Schritte zu machen sind.

                                  @chrizzz said in Rhasspy Offline Sprachsteuerung:

                                  Der Rhasspy Entwickler arbeitet jetzt für Mycroft und viel Bewegung in der Rhasspy Community ist auch nicht erkennbar. Sehr schade...

                                  Immerhin ist er da gut aufgehoben und wird Mycroft weiteren Aufschwung geben.
                                  Dass es eine kommerzielle Komponente braucht, um das mittels Open Source weiterzutreiben ist eine Tatsache, die man nicht verneinen kann.

                                  K Offline
                                  K Offline
                                  kuumaur
                                  schrieb am zuletzt editiert von
                                  #392

                                  @packelend
                                  Viele Schritte ist immer relativ.
                                  Kommt darauf an, was Du bereits bei Dir am Laufen hast.

                                  • Rhasspy ist i.d.R. als Docker Container im Einsatz
                                  • Mqtt Broker als Container
                                  • deine IOBroker Instanz
                                  • Mqtt Client Adapter
                                  • Mqtt Hermes/# abonieren
                                  • Rhasspy-Satelliten bauen
                                    so weit, so gut.
                                    Die "richtige" Arbeit fängt nun an.
                                  • Intents im Rhasspy einrichten (Licht an/aus, Mülltonne-Kalender, etc.)
                                  • JScript im IOBroker schreiben oder fertiges JScript abwandeln

                                  Rhasspy läuft bei mir seit >2 Jahren ohne (techn.) Probleme.
                                  Aus meiner Sicht leiden alle Voice-Assistenten an dem gleichen Problem, dass die Mikrofonperformance in lauten Umgebungen (Wohnzimmer, Küche, etc.) stark schwankend ist. Das könnte man aus meiner Sicht als Resume bezeichnen. Die Rhasspy Community sieht es ähnlich. Ohne gute Audio-Codecs ist das Nutzungserlebnis stark schwankend.
                                  Ich habe 4 Satelliten im Einsatz, alle mit unterschiedlichen Mikrophonen. Kein Satellit kann wirklich bei lauteren Umgebungen überzeugen. Würde ich zu Amazon oder Google etc. wechseln? Nein, auf keinen Fall. Im Alltag kristallisieren sich die Intents heraus, die am nützlichsten sind. Diese habe ich dann optimiert und ein akzeptables Niveau gefunden.

                                  Proxmox | IoBroker LXC Container | Zigbee | Rhasspy Voice | SqueezeBox | Frigate CCTV | Jarvis Vis |

                                  PackElendP 1 Antwort Letzte Antwort
                                  1
                                  • K kuumaur

                                    @packelend
                                    Viele Schritte ist immer relativ.
                                    Kommt darauf an, was Du bereits bei Dir am Laufen hast.

                                    • Rhasspy ist i.d.R. als Docker Container im Einsatz
                                    • Mqtt Broker als Container
                                    • deine IOBroker Instanz
                                    • Mqtt Client Adapter
                                    • Mqtt Hermes/# abonieren
                                    • Rhasspy-Satelliten bauen
                                      so weit, so gut.
                                      Die "richtige" Arbeit fängt nun an.
                                    • Intents im Rhasspy einrichten (Licht an/aus, Mülltonne-Kalender, etc.)
                                    • JScript im IOBroker schreiben oder fertiges JScript abwandeln

                                    Rhasspy läuft bei mir seit >2 Jahren ohne (techn.) Probleme.
                                    Aus meiner Sicht leiden alle Voice-Assistenten an dem gleichen Problem, dass die Mikrofonperformance in lauten Umgebungen (Wohnzimmer, Küche, etc.) stark schwankend ist. Das könnte man aus meiner Sicht als Resume bezeichnen. Die Rhasspy Community sieht es ähnlich. Ohne gute Audio-Codecs ist das Nutzungserlebnis stark schwankend.
                                    Ich habe 4 Satelliten im Einsatz, alle mit unterschiedlichen Mikrophonen. Kein Satellit kann wirklich bei lauteren Umgebungen überzeugen. Würde ich zu Amazon oder Google etc. wechseln? Nein, auf keinen Fall. Im Alltag kristallisieren sich die Intents heraus, die am nützlichsten sind. Diese habe ich dann optimiert und ein akzeptables Niveau gefunden.

                                    PackElendP Offline
                                    PackElendP Offline
                                    PackElend
                                    schrieb am zuletzt editiert von
                                    #393

                                    @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                    Kommt darauf an, was Du bereits bei Dir am Laufen hast.

                                    iobroker noch nicht im Einsatz, möchte dies aber in den nächsten Wochen angehen.

                                    @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                    Die Rhasspy Community sieht es ähnlich. Ohne gute Audio-Codecs ist das Nutzungserlebnis stark schwankend.

                                    das heisst? Closed-Source-Codecs?

                                    @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                    Kein Satellit kann wirklich bei lauteren Umgebungen überzeugen.

                                    ist die Frage, kann https://mycroft.ai/product/mark-ii/ dies besser?

                                    K 1 Antwort Letzte Antwort
                                    0
                                    • PackElendP PackElend

                                      @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                      Kommt darauf an, was Du bereits bei Dir am Laufen hast.

                                      iobroker noch nicht im Einsatz, möchte dies aber in den nächsten Wochen angehen.

                                      @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                      Die Rhasspy Community sieht es ähnlich. Ohne gute Audio-Codecs ist das Nutzungserlebnis stark schwankend.

                                      das heisst? Closed-Source-Codecs?

                                      @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                      Kein Satellit kann wirklich bei lauteren Umgebungen überzeugen.

                                      ist die Frage, kann https://mycroft.ai/product/mark-ii/ dies besser?

                                      K Offline
                                      K Offline
                                      kuumaur
                                      schrieb am zuletzt editiert von
                                      #394

                                      @packelend
                                      Nicht aus der Sicht der Audio/Microphone Performance.
                                      Das ist vermutlich ein Lizenz-, wie auch ein Hardware-, als auch ein Wake-Word-Problem (KWS). Die Threads zu dem Thema sind ellenlang (@rolyan_trauts ist da scheinbar sehr aktiv). Meine Frau und ich haben einiges an Zeit in Rhasspy investiert. Meine Frau hat sogar Ihre Stimme "gespendet" für Rhasspy.
                                      Also versteh mich nicht falsch; Rhasspy läuft, ist aber keine Klick-Klick-Fertig-Geschichte s.o.

                                      Proxmox | IoBroker LXC Container | Zigbee | Rhasspy Voice | SqueezeBox | Frigate CCTV | Jarvis Vis |

                                      PackElendP 1 Antwort Letzte Antwort
                                      0
                                      • K kuumaur

                                        @packelend
                                        Nicht aus der Sicht der Audio/Microphone Performance.
                                        Das ist vermutlich ein Lizenz-, wie auch ein Hardware-, als auch ein Wake-Word-Problem (KWS). Die Threads zu dem Thema sind ellenlang (@rolyan_trauts ist da scheinbar sehr aktiv). Meine Frau und ich haben einiges an Zeit in Rhasspy investiert. Meine Frau hat sogar Ihre Stimme "gespendet" für Rhasspy.
                                        Also versteh mich nicht falsch; Rhasspy läuft, ist aber keine Klick-Klick-Fertig-Geschichte s.o.

                                        PackElendP Offline
                                        PackElendP Offline
                                        PackElend
                                        schrieb am zuletzt editiert von
                                        #395

                                        danke für die fixe antwort

                                        @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                        Also versteh mich nicht falsch; Rhasspy läuft, ist aber keine Klick-Klick-Fertig-Geschichte s.o.

                                        vielleicht ist es keine dumme Idee mit https://mycroft.ai/product/mark-ii/ anzufangen als Hauptgeräte und dann mit Rhasspy weitere Räume auszustatten.


                                        @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                        Also versteh mich nicht falsch; Rhasspy läuft, ist aber keine Klick-Klick-Fertig-Geschichte s.o.

                                        keine Angst ist schon davor angekommen :)


                                        @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                        dass die Mikrofonperformance in lauten Umgebungen (Wohnzimmer, Küche, etc.) stark schwankend ist.
                                        was heisst laut?
                                        Küchenmaschinen, TV oder laute Unterhaltung...?

                                        K 1 Antwort Letzte Antwort
                                        0
                                        • PackElendP PackElend

                                          danke für die fixe antwort

                                          @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                          Also versteh mich nicht falsch; Rhasspy läuft, ist aber keine Klick-Klick-Fertig-Geschichte s.o.

                                          vielleicht ist es keine dumme Idee mit https://mycroft.ai/product/mark-ii/ anzufangen als Hauptgeräte und dann mit Rhasspy weitere Räume auszustatten.


                                          @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                          Also versteh mich nicht falsch; Rhasspy läuft, ist aber keine Klick-Klick-Fertig-Geschichte s.o.

                                          keine Angst ist schon davor angekommen :)


                                          @kuumaur said in Rhasspy Offline Sprachsteuerung:

                                          dass die Mikrofonperformance in lauten Umgebungen (Wohnzimmer, Küche, etc.) stark schwankend ist.
                                          was heisst laut?
                                          Küchenmaschinen, TV oder laute Unterhaltung...?

                                          K Offline
                                          K Offline
                                          kuumaur
                                          schrieb am zuletzt editiert von
                                          #396

                                          @packelend
                                          Ja, Geschirrspüler, Dunstabzug, Radio, TV, Musik, Unterhaltung mit mehreren Personen.
                                          Je nach Mikrofon und Soundkarte hat man sehr unterschiedliche Ergebnisse.
                                          Ich habe von Ring- bis Richtmikrofon alles im Einsatz ...

                                          Proxmox | IoBroker LXC Container | Zigbee | Rhasspy Voice | SqueezeBox | Frigate CCTV | Jarvis Vis |

                                          PackElendP 1 Antwort Letzte Antwort
                                          0
                                          Antworten
                                          • In einem neuen Thema antworten
                                          Anmelden zum Antworten
                                          • Älteste zuerst
                                          • Neuste zuerst
                                          • Meiste Stimmen


                                          Support us

                                          ioBroker
                                          Community Adapters
                                          Donate

                                          882

                                          Online

                                          32.4k

                                          Benutzer

                                          81.5k

                                          Themen

                                          1.3m

                                          Beiträge
                                          Community
                                          Impressum | Datenschutz-Bestimmungen | Nutzungsbedingungen | Einwilligungseinstellungen
                                          ioBroker Community 2014-2025
                                          logo
                                          • Anmelden

                                          • Du hast noch kein Konto? Registrieren

                                          • Anmelden oder registrieren, um zu suchen
                                          • Erster Beitrag
                                            Letzter Beitrag
                                          0
                                          • Home
                                          • Aktuell
                                          • Tags
                                          • Ungelesen 0
                                          • Kategorien
                                          • Unreplied
                                          • Beliebt
                                          • GitHub
                                          • Docu
                                          • Hilfe