@Bluefox sagte:

Dieser Thread soll als zentraler Anlaufpunkt für den Austausch rund um KI in ioBroker dienen.

ich denke dass ein einziger Thread mit der Zeit zu unübersichtlich wird. Es gibt viele Fragen wie man bereits jetzt lesen kann. Mir fehlen noch Projekte in denen nicht nur zu lesen ist dass man etwas gemacht und wie es aussieht(vis2), sondern in denen auch gezeigt werden kann wie man das konkret gemacht hat.

Ich schlage deshalb eine neue Kategorie Künstliche Intelligenz vor, in der man das alles verwirklichen kann. Auch dieser Thread hier gehört sicherlich nicht in die Kategorie Off Topic :-) Ich bin mir sehr sicher dass da reger Zulauf sein wird

Das ist leider nicht so ganz einfach.
Die Modelle ändern sich fast monatlich.
Jedes Unternehmen bietet unterschiedliche Anzahl von Modellen an, mit unterschiedlichen (Teil)-Fähigkeiten und Intelligenzgraden.

Relevante Anbieter die sich aktuell an der Spitze der Modelle befinden
OpenAI
Antrohpic
(Google)

Unterschiedliche Intelligenzgrade. Umso Intelligenter umso teuerer bzw. weniger Anzahl an Freiabfragen über kostenlos oder Abo-Accounts
Manche Modelle sind bspw bei Kostenlos nicht verfügbar

OpenAI

• Luna (kostenlos Account)
• Terra
• Sol
• Astra

Antrophic

• Haiku (kostenlos Account)
• Sonnet (kostenlos Account)
• Opus
• Faible
• Mythos (verfügbar nur für bestimmte Unternehmen)

Google

• Gemma (kostenloses, OpenSource/OpenWeights Modell)
• Flash Lite (kostenlos Account)
• Flash
• Argon
• Carbon (nicht für alle verfügbar)

XAi

Lasse ich mal weg.

Die Modelle sind aufsteigend ihres Intelligenzgrades (Anzahl Parameter) sortiert.

Weitere Unterscheidungen

• Modelle unterscheiden sich noch über die Versionsnummer. Höher=besser
• Weiterhin haben die Modelle unterschiedliche Fähigkeiten:
  • Text/Programmieren (also man kann chatten)
  • Audio (versteht Sprache und kann ggfs auch sprechen)
  • Bild/Video (erkennt Bilder/Videos und kann ggfs diese erzeugen)
  • MCP/ComputerUse (kann über entsprechende Protokolle/Adapter mit
    anderer Software (bspw Browser) interagieren bzw. bekommt über diese die eigentlichen
    Fähigkeiten mitgeteilt.
  • Modelle haben oft eine Kombination dieser Fähigkeiten, aber nicht alle.
• Kontextfenster: Ist die Größe des Gedächtnisses, alles was größer ist, vergisst das Modell in einer Session. Standardkontextfenster ist so ca 128K bis 256K Token, manche Modelle bieten auch 1 Million und mehr Token an. 1 Million token entsprechen ca 750.000 Wörtern.

Jeder der obigen Anbieter hat darüber Hinaus noch weitere Spezialmodelle, die eher auf Audio/Streaming oder auf Bildbearbeitung spezialisiert ist (bspw NanoBanana bei Google oder OpenAI GPT-Image-2.5 Flare oder Sunburst). Die habe ich jetzt nicht aufgeführt, weil sie für iobroker erst mal irrelevant sind.

Für iobroker müsste man "Erstellen" und "Steuern" unterscheiden.

Erstellen:

• Eines der oben genannten Modelle
• Von der Intelligenzstufe alles ab Sol, Opus, Flash aufwärts.
• Wer über MCP arbeitet, können alle diese Modelle das auch.

Steuern:

• Die Informationen des zu steuernden Umfangs muss ins Kontextfenster passen. (Also Datenpunktbezeichnungen, aktueller Wert, uU Typ, Raum, Funktion und auch Regelmäig aktualisiert werden..
• Für kleinere Umfänge dürfte ein kleines Modell ausreichen.
• Für große iobroker Installationen könnten die 1Mio Token schon knapp werden.

Was ich jetzt noch nicht erwähnt habe sind die sogenannten OpenSource/OpenWeights-Modelle
Kimi, DeepSeek, Qwen (Ailbaba), Mistral
Die Modellstruktur ist ähnlich wie oben
Modelle werden ebenfalls Online angeboten
bspw bei https://openrouter.ai/
Diese Modelle halten im Benchmark zu den Top-Anbietern ganz gut mit.
Bitte vergleicht selbst die entsprechenden Benchmarks, das verändert sich ständig, da jedes neue Modell natürlich über dem alten und teilweise auch über den Mitbewerbern liegt.
Preislich sind sie oft um einiges günstiger.

@stenmic sagte:

ich fände es gut, wenn man einen Leitfaden hätte (welche KI macht Sinn für was), ich würde mich gerne mit KI und Javaskript beschäftigen.
Aber die aktuellen Möglichkeiten erschlagen einen. Aktuell löse ich es mit (externen) Copilot (ganz gut für meine "einfachen" Skripte).
Ich wüsste jetzt nicht, welche KI für was am "besten" wähe.

Da würde ich mich glatt anhängen

@OliverIO sagte:

Mit dieser Methode kannst du dann den im iobroker eingebauten KI-Assistenten nicht nutzen

Es ist auch nicht notwendig diesen zu nutzen. Es läuft alles über ChatGPT bzw Codex und das funktioniert wesentlich besser als über den im ioBroker eingebauten KI-Assistenten. Für mich jedenfalls. Damit hat man so viel mehr Möglichkeiten und es ist auch übersichtlicher. Kleiner Tip: Stelle um auf GPT 6.1 Sol. Verbrennt nicht mehr Token als 5.6 Sol aber ist viel besser. Bei GPT 6 Astra kann man zusehen wie die Prozente schwinden und es bringt hier nicht mehr.

Evtl noch als Ergänzung:

Mit dieser Methode kannst du dann den im iobroker eingebauten KI-Assistenten nicht nutzen, sondern nutzt als Oberfläche dann ein anderes Tool, welches den MCP-Server des IObrokers dann auch erreichen und steuern kann.

Ich habe das mit codex gemacht (ist ein kommandozeilentool von OpenAI, also ChatGPT). Also Modell verwende ich vorzugsweise GPT 5.6 Sol. Man kann auch GPT 6 Astra verwenden, das verbrennt dann entsprechend mehr Tokens, ist aber auch intelligenter.

Astra verwende ich primär für Planungsaufgaben, Konzepte und andere Vorarbeiten. Für die eigentliche Umsetzung nutze ich dann Sol.
Allerdings primär im Nicht-IOBroker-Umfeld.

Theoretisch müsste es damit funktionieren
https://ai.google.dev/gemini-api/docs/pricing?hl=de

Auswahl "Kostenpflichtig"
Bezahlt Geld ein (höhe beliebig)
Dann bekommt man einen API-Token,
den man dann für den KI-Assistenten im iobroker eintragen kann.
Abgerechnet wird Token genau, gemäß den Preisen.
Als modell müsste
Gemini 3.8 Flash
Gemini 3.6 Flash
reichen. Aber das Modell kann man dynamisch wechseln und ausprobieren ob die Intelligenz reicht. Man muss nicht je Modell ein extra budget kaufen.
Das Argon Modell ist wahrscheinlich intelligenter, aber evtl nicht notwendig.

Mit dieser Vorgehensweise kannst du dann den im iobroker eingebauten KI-Assistenten nutzen.

@OliverIO sagte:

Evtl können die Antrophic/Claude und GeminiPlus Leute was sagen.

Google hat kürzlich umgestellt. Mit Gemini plus funktioniert das nicht mehr. Dazu muss man mindestens Gemini pro abonnieren. Es beginnt mit ca. 10,- €/Monat.

@docsnyder7 sagte:

Moin zusammen... ich hab mich gestern Abend mal mit diesem Thema beschäftigt und probiert ChatGPT und Google in meinen IObroker zu bringen... mit google hatte ich Erfolg, aber welches Modul benötige ich denn, wenn ich mir Hilfe beim erstellen von Scripten etc suchen möchte... für das Abfragen der Temp oder ähnlichen benötige ich die KI nicht. Hätte da wer nen Tipp für mich... getestet hatte ich Gemini 3.8 da erschien eine Meldung, dass man Gemini Live benötigt , ChatGPT hab ich gar nicht hinbekommen...

Mit den kostenlosen KI kannst du das nicht nutzen.
Leider funktionieren hierfür die normalen Abomodelle nicht.
Du musst ein Account erstellen und die ein Token Budget kaufen.
Dieses Token budget wird dann nach und nach aufgebraucht, je nachdem welches Modell man nutzt schneller oder langsamer.
Aber mit 10$ kommt man schon relativ weit.

Ich nutze OpenAI mit einem Token Budget und das funktioniert sehr gut.
Du gehst da auch keine langfristigen Verträge ein. Wenn das Budget aufgebraucht ist ist Ende. Dein Budget verfällt glaube ich auch erst nach 2 Jahren.

Ich denke bei den anderen Anbietern ist es ähnlich.
Evtl können die Antrophic/Claude und GeminiPlus Leute was sagen.

Ich weiß nicht mal was man darauf antworten muss. Trage API Key, und dann wirst du die Liste von allen Modellen sehen, die möglich sind, dann nimmst du die stärkste und experimentierst damit.

@docsnyder7 sagte:

Ich versuche mich da mal reinzuvertiefen...dachte die Integration ist etwas einfacher... aber alleine die anzahl der Google Module ist derbe

Welche "google module" meinst du?

@docsnyder7 sagte:

Moin zusammen... ich hab mich gestern Abend mal mit diesem Thema beschäftigt und probiert ChatGPT und Google in meinen IObroker zu bringen... mit google hatte ich Erfolg, aber welches Modul benötige ich denn, wenn ich mir Hilfe beim erstellen von Scripten etc suchen möchte... für das Abfragen der Temp oder ähnlichen benötige ich die KI nicht. Hätte da wer nen Tipp für mich... getestet hatte ich Gemini 3.8 da erschien eine Meldung, dass man Gemini Live benötigt , ChatGPT hab ich gar nicht hinbekommen...

Also Temp abfragen - geht mit iobroker.assistant über telegram oder Sprach-Satelliten. Man kann auch da Scripte und Co bearbeiten.

@OliverIO sagte:

Nimm 5.6 sol

Ich habe nun mal GPT-6 Luna eingestellt. Ist deutlich günstiger bei angeblich beinahe gleicher Leistung. Mal sehen …

Alle die sich beschweren, dass bei ioBroker nichts passiert, hier ist die Chance mitzumachen.

KI ist teuer. Einmal direkt, wenn man es ohne Zwangspause / mit API nutzen möchte, und einmal indirekt. Brauche ich Hardware, zahle ich utopische Preise, weil die KI-Rechenzentren den Markt leergeräumt haben.

Die kostenlose KI, bevorzugt Gemini, hat mir allerdings schon gut geholfen, wenn ich eine Webseite (VIS-2 läuft nicht auf Android 4.4.) für ein altes Tablet als Anzeige brauchte. Da das Stichwort Android 4.4 und das Teil weiß, was direkt geht, und was über Umwege gelöst werden muss.

Ansonsten stellt sich Gemini in z.B. Android Auto dämlicher als der Google Assistent an. Zumindest, was das Hörvermögen angeht. Es kommt schonmal die falsche Musik. Neulich hatte es einen Straßennamen, welche mit Schule beginnt, nicht verstanden. Es hat dann jedesmal geheißen, dass es keine Schule in der Straße gibt. Am Ende hatte das Navi vom Auto seinen ersten Einsatz. Das hatte den Straßennamen auf Anhieb verstanden. - aber ich schweife ab

@fastfoot sagte:

das gibt die Tabelle doch her

klar, sonst hätte ich es ja nicht gezeigt, dies bezog sich ja auch auf

@Dr.-Bakterius sagte:

Das hat mit der ioBroker-Hardware nichts zu tun.

@fastfoot sagte:

ist aber nicht die Schuld von bluefox

habe ich das irgendwo angedeutet?

@Bluefox sagte:

Unterschiedliche Meinungen, Erfahrungen und kritische Rückmeldungen sind ausdrücklich willkommen

mehr habe ich nicht gemacht

@crunchip sagte:

@Dr.-Bakterius ich weiß, ich bezog mich auf den Thread Titel und für diejenigen die es aus Gründen xy local laufen lassen wollen, brauchen dann was?

das gibt die Tabelle doch her, und ja, das bedeutet dass man das z.Zt. wohl eher vergessen kann mit lokal. Das gefällt mir auch nicht, ist aber nicht die Schuld von bluefox. Der Blog-Beitrag ist klasse und zeigt was geht. Und wenn man das nicht will, muss man halt warten bis die Modelle schwächere Hardware akzeptieren(der Trend geht dahin, meines Wissens)

Ich glaube auch, daß diese ganze KI Entwicklung weitläufig eventuell die Preisentwicklung rund um ioBroker reguliert

das habe ich nicht verstanden, welche Preise?

@Dr.-Bakterius sagte:

@Bluefox sagte:

Welchen Assistenten und welches Modell hast du verwendet?

OpenAI gpt-4o-mini.

Nimm 5.6 sol

Astra ist wahrscheinlich nicht notwendig