# Gladys Assistant 4.48: Die Proaktive KI kommt in Gladys Assistant!

**URL:** <https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153>\
**Category:** Actualités\
**Created:** [1. November 2024 um 10:58 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153 "2024-11-01T10:58:53Z")\
**Posts on this page:** 20\
**Page:** 1

<div class="post-metadata">

**Author:** ![pierre-gilles](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/pierre-gilles/32/5886_2.png) [@pierre-gilles](https://community.gladysassistant.com/u/pierre-gilles)\
**Post date:** [1. November 2024 um 10:58 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/1 "2024-11-01T10:58:54Z")

</div>

Hallo zusammen!

Das ist ein Update, das euch gefallen wird!! 😃

Mehr dazu auf dem Blog:

[https://gladysassistant.com/de/blog/proactive-ai/](https://gladysassistant.com/de/blog/proactive-ai/)

Wenn ihr Feedback zu den neuen Funktionen habt, bin ich wirklich offen dafür.

Das CHANGELOG ist [hier](https://github.com/GladysAssistant/Gladys/releases/tag/v4.48.0) verfügbar.

Falls ihr Fragen habt, zögert nicht 🙂

---

<div class="post-metadata">

**Author:** ![pierre-gilles](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/pierre-gilles/32/5886_2.png) [@pierre-gilles](https://community.gladysassistant.com/u/pierre-gilles)\
**Post date:** [1. November 2024 um 11:10 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/2 "2024-11-01T11:10:24Z")

</div>



---

<div class="post-metadata">

**Author:** ![tiboys](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/tiboys/32/17668_2.png) [@tiboys](https://community.gladysassistant.com/u/tiboys)\
**Post date:** [1. November 2024 um 13:22 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/3 "2024-11-01T13:22:55Z")

</div>

😍  
Ich spüre, dass mein Künstlername durch die Decke gehen wird 😋  
Ein großes Bravo für all die Arbeit. 🙏 👍  
Je mehr Gladys sich weiterentwickelt, desto weniger kann ich darauf verzichten ..

---

<div class="post-metadata">

**Author:** ![pierre-gilles](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/pierre-gilles/32/5886_2.png) [@pierre-gilles](https://community.gladysassistant.com/u/pierre-gilles)\
**Post date:** [1. November 2024 um 13:31 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/4 "2024-11-01T13:31:15Z")

</div>

Danke @tiboys ! 🙂

---

<div class="post-metadata">

**Author:** ![guim31](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/guim31/32/4840_2.png) [@guim31](https://community.gladysassistant.com/u/guim31)\
**Post date:** [1. November 2024 um 13:31 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/5 "2024-11-01T13:31:35Z")

</div>

@pierre-gilles ich weiß nicht, ob du diese Seite kennst [https://selfh.st/](https://selfh.st/)?

Ich habe sie über r/selfhosted auf Reddit kennengelernt, weil ich jede Woche deren Artikel lese.

Ihre Veröffentlichungen haben viel Erfolg und ich denke, es wäre einen Versuch wert, ihm von Gladys zu erzählen, damit er sie zu seiner Projektbeobachtung hinzufügt! 👍

---

<div class="post-metadata">

**Author:** ![pierre-gilles](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/pierre-gilles/32/5886_2.png) [@pierre-gilles](https://community.gladysassistant.com/u/pierre-gilles)\
**Post date:** [1. November 2024 um 13:43 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/6 "2024-11-01T13:43:45Z")

</div>

Das wusste ich nicht, ich habe ihn per E-Mail kontaktiert, danke! 🙂

---

<div class="post-metadata">

**Author:** ![spenceur](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/spenceur/32/1961_2.png) [@spenceur](https://community.gladysassistant.com/u/spenceur)\
**Post date:** [1. November 2024 um 15:27 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/7 "2024-11-01T15:27:15Z")

</div>

Ich muss etwas zurückgeben.  
Standardmäßig antwortet es nur auf Telegram.  
Ist es möglich, die Rückmeldung in einer Variable zu speichern und sie potenziell mit Sonos oder anderen zu verwenden?

Kennt jemand eine Möglichkeit, ein Video zu analysieren, um die Informationen an Gladys (MQTT, REST oder andere) zu senden?

---

<div class="post-metadata">

**Author:** ![pierre-gilles](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/pierre-gilles/32/5886_2.png) [@pierre-gilles](https://community.gladysassistant.com/u/pierre-gilles)\
**Post date:** [1. November 2024 um 15:44 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/8 "2024-11-01T15:44:13Z")

</div>

> [@spenceur](#):
>
> Kann man die Rückgabe in einer Variable speichern und sie potenziell mit Sonos oder anderen nutzen?

Klar, @Terdious hatte denselben Wunsch 🙂 Ich würde mich über einen Feature-Request freuen!

> [@spenceur](#):
>
> Kennt jemand eine Möglichkeit, ein Video zu analysieren, um die Infos an Gladys (MQTT, REST oder anderes) zu senden?

Was möchtest du genau machen?

---

<div class="post-metadata">

**Author:** ![spenceur](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/spenceur/32/1961_2.png) [@spenceur](https://community.gladysassistant.com/u/spenceur)\
**Post date:** [1. November 2024 um 15:58 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/9 "2024-11-01T15:58:27Z")

</div>

Mein Auslöser, der es mir ermöglicht, diese Funktion genau zu starten 🙂

---

<div class="post-metadata">

**Author:** ![pierre-gilles](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/pierre-gilles/32/5886_2.png) [@pierre-gilles](https://community.gladysassistant.com/u/pierre-gilles)\
**Post date:** [1. November 2024 um 16:29 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/10 "2024-11-01T16:29:06Z")

</div>

Ah, ich verstehe, du kannst entweder einen Bewegungssensor verwenden oder Frigate nutzen:

> **[Frigate NVR](https://frigate.video/)**
>
> NVR with realtime local object detection for IP cameras

Das ist ein Open-Source-NVR, das an Kamerastreams angeschlossen werden kann und dir die Erkennung von Bewegungen ermöglicht.

Allerdings brauchst du für den Machine-Learning-Teil einen TPU, sonst ist es auf der CPU zu langsam und beansprucht alle Ressourcen deines Rechners: [Google Coral USB Edge TPU ML Accelerator Coprocessor for Raspberry Pi and Other Embedded Single Board Computers: Amazon.de: Computer & Accessories](https://www.amazon.de/Google-Coral-Accelerator-Coprocesseur-Ordinateurs/dp/B07R53D12W)

Anschließend veröffentlicht Frigate MQTT-Nachrichten, die du in Gladys abhören kannst:

```auto
frigate/<camera_name>/detect/state

```

Dokumentation: [MQTT | Frigate](https://docs.frigate.video/integrations/mqtt)

---

<div class="post-metadata">

**Author:** ![GBoulvin](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/gboulvin/32/10006_2.png) [@GBoulvin](https://community.gladysassistant.com/u/GBoulvin)\
**Post date:** [1. November 2024 um 16:32 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/11 "2024-11-01T16:32:39Z")

</div>

Gibt es jetzt Freitags Releases von Gladys?!  
Zu ungeduldig?  
Danke für die Arbeit! Das klingt super!  
Gerade wird das Wetter ja auch trüber… 😇

---

<div class="post-metadata">

**Author:** ![spenceur](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/spenceur/32/1961_2.png) [@spenceur](https://community.gladysassistant.com/u/spenceur)\
**Post date:** [2. November 2024 um 00:24 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/12 "2024-11-02T00:24:59Z")

</div>

Ok, beim nächsten Kauf die Coral USB, um Frigate auf meinem 918+ hinzuzufügen  
Danke

---

<div class="post-metadata">

**Author:** ![guim31](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/guim31/32/4840_2.png) [@guim31](https://community.gladysassistant.com/u/guim31)\
**Post date:** [2. November 2024 um 08:41 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/13 "2024-11-02T08:41:33Z")

</div>

Ich wollte dich gerade fragen, was dein Gladys antreibt, denn mit aktuellen Intel-CPUs kann man auch OpenVIno nutzen, das Coral ersetzt (etwas weniger effizient, aber nichts zusätzlich zu kaufen).  
Aber im Rahmen eines Synology macht das natürlich Sinn, zumal du mit einem einzigen Coral wirklich viele Erkennungsströme verwalten kannst 👍

---

<div class="post-metadata">

**Author:** ![guim31](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/guim31/32/4840_2.png) [@guim31](https://community.gladysassistant.com/u/guim31)\
**Post date:** [2. November 2024 um 08:52 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/14 "2024-11-02T08:52:51Z")

</div>

Ich mache ein paar Tests… Aber ich erreiche nicht das erwartete Ergebnis.

In einer Szene, die durch das Öffnen meines Tores ausgelöst wird, habe ich den folgenden Prompt:

```auto
Führe die Szene „Bild von der Portal-Kamera senden“ aus.
Anschließend, wenn du einen schwarzen Volkswagen T-Cross oder einen schwarzen Volkswagen Touran siehst, der durch das Tor einfährt, dann schicke mir eine Nachricht, um mir mitzuteilen, dass Sophie oder Guilhem zu Hause sind.
Falls diese Autos geparkt sind, dann schicke eine Nachricht, um mir das mitzuteilen.
Falls es sich um ein anderes Auto handelt, warne mich, dass ein unbekanntes Auto gesehen wurde.

```

Das Ergebnis ist folgendes:

 ![1000009402](https://gladys-assistant-community.b-cdn.net/uploads/default/original/3X/3/5/3529414f76de4311a389566edbea8a386e8e294e.jpeg)

Er hat die Szene tatsächlich gestartet, ich habe meine Aufnahme… Aber er hat nicht analysiert, noch nicht einmal auf meinen Prompt geantwortet.

Irgendeine Idee, warum? Zu viele Dinge in einem einzigen Prompt?

---

<div class="post-metadata">

**Author:** ![Prof\_Techno](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/prof_techno/32/19038_2.png) [@Prof\_Techno](https://community.gladysassistant.com/u/Prof_Techno)\
**Post date:** [2. November 2024 um 08:54 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/15 "2024-11-02T08:54:16Z")

</div>

das Problem ist, dass ich denke, er weiß nicht, dass er das Bild, das er gerade aufgenommen hat, zur Analyse zurückschicken muss

---

<div class="post-metadata">

**Author:** ![guim31](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/guim31/32/4840_2.png) [@guim31](https://community.gladysassistant.com/u/guim31)\
**Post date:** [2. November 2024 um 08:58 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/16 "2024-11-02T08:58:49Z")

</div>

Ich habe doch das Kamerabild angehängt.

 ![Screenshot_20241102095841](https://gladys-assistant-community.b-cdn.net/uploads/default/original/3X/7/3/73c81ee9c0d9ce9d27896b6a08fd17617cc9eb68.jpeg)

---

<div class="post-metadata">

**Author:** ![Prof\_Techno](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/prof_techno/32/19038_2.png) [@Prof\_Techno](https://community.gladysassistant.com/u/Prof_Techno)\
**Post date:** [2. November 2024 um 09:00 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/17 "2024-11-02T09:00:06Z")

</div>

> [@guim31](#):
>
> urtant joint l’image de la

In diesem Fall versuche zunächst, ihm eine Aufforderung zu geben, in der du ihn fragst, was er auf dem Bild sieht

um das Problem zu zerlegen und zu sehen, wo es hakt

---

<div class="post-metadata">

**Author:** ![guim31](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/guim31/32/4840_2.png) [@guim31](https://community.gladysassistant.com/u/guim31)\
**Post date:** [2. November 2024 um 09:10 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/18 "2024-11-02T09:10:28Z")

</div>

Letztendlich denke ich, dass es daran liegt, dass er eine Szene auslösen soll + eine andere Aktion ausführen, die blockiert. Ich habe es in 2 Schritte aufgeteilt und es funktioniert!! 😁 👍

---

<div class="post-metadata">

**Author:** ![pierre-gilles](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/pierre-gilles/32/5886_2.png) [@pierre-gilles](https://community.gladysassistant.com/u/pierre-gilles)\
**Post date:** [2. November 2024 um 09:15 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/19 "2024-11-02T09:15:44Z")

</div>

> [@guim31](#):
>
> Ich mache ein paar Tests… Aber ich erreiche nicht das erwartete Ergebnis.

Derzeit kann es nur eine einzige „Aktion“ pro „IA fragen“-Block geben.

Daher ist die „stärkste“ Aktion deiner Anfrage, die Szene zu starten, also startet er die Szene, kann dir aber nicht antworten.

Ich würde dir empfehlen, die Szene einfach in einer „Szene starten“-Aktion zu starten, wenn es nicht bedingt ist, und dann im „IA fragen“-Block nach Informationen zu fragen.

---

<div class="post-metadata">

**Author:** ![guim31](https://gladys-assistant-community.b-cdn.net/user_avatar/community.gladysassistant.com/guim31/32/4840_2.png) [@guim31](https://community.gladysassistant.com/u/guim31)\
**Post date:** [2. November 2024 um 09:23 UTC](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153/20 "2024-11-02T09:23:11Z")

</div>

Jetzt verstehe ich besser 👍  
Es funktioniert perfekt, aber ich muss herausfinden, wie ich das Ganze mit anderen Kriterien verfeinern kann, um das Auto zu erkennen, denn bei Nacht kann mir ChatGPT nicht sagen, ob das Auto schwarz ist ^^

 ![1000009404](https://gladys-assistant-community.b-cdn.net/uploads/default/original/3X/9/2/92a3c1b0a6d5ebbdc91edb6324e06274049163dd.jpeg)

[Nächste Seite](https://community.gladysassistant.com/t/gladys-assistant-4-48-lia-proactive-debarque-dans-gladys-assistant/9153.md?page=2)
