Nouvelle architecture IA : Gladys devient un vrai agent IA 🤖

[pierre-gilles]

Salut à tous,

Depuis que j’ai intégré l’IA dans Gladys, la promesse était là mais la réalité restait limitée : vous posiez une question, l’IA répondait. Une entrée, une sortie. Pas de réflexion intermédiaire, pas d’autonomie réelle.

Ce que je vous annonce aujourd’hui change ça en profondeur !!

Gladys peut maintenant « réfléchir » avant de répondre

Vous connaissez peut-être Claude Code, l’agent de développement d’Anthropic qui, face à un problème complexe, décompose, itère, utilise des outils, s’adapte… jusqu’à trouver la solution. C’est exactement ce modèle que j’ai appliqué à Gladys.

Désormais, quand vous posez une question à Gladys, elle ne cherche plus juste à formuler une réponse. Elle agit. Elle peut enchaîner plusieurs appels d’outils à la suite pour arriver à ses fins :

• Quel est le niveau de Co2 actuel dans le salon ?
• Allume les lumières du salon et coupe le ventilateur
• Montre moi ma consommation d’énergie sur le dernier mois
• Créé une scène qui tous les matins à 7h, m’envoie un message avec le niveau de CO2 dans le salon, la cuisine, et les états de mes portes.
• Créé une scène qui, quand il y a un mouvement dans mon garage, envoie à l’IA une photo de ma caméra, et regarde si la voiture est bien ma Tesla Model 3 rouge. Si oui, l’IA ne doit pas me répondre, sinon l’IA doit me prévenir qu’une voiture inconnue est là.

Des requêtes qui auraient nécessité plusieurs manipulations manuelles, ou qui tout simplement ne fonctionnaient pas avant !

Ce travail s’appui en partie sur le serveur MCP développé par @bertrandda, que j’ai intégré dans cette nouvelle architecture ! Merci à lui !

Une interface repensée pour être vraiment utilisable

J’en ai profité pour refondre complètement l’interface de chat. Plus claire, plus fluide, réellement utilisable sur mobile.

Chaque appel d’outil est affiché de façon lisible dans la conversation, pour que vous compreniez ce que Gladys est en train de faire, et que vous puissiez diagnostiquer facilement si quelque chose ne se passe pas comme prévu.

Telegram, Nextcloud Talk : ça marche aussi

Vous utilisez Gladys en mobilité via Telegram ou Nextcloud Talk ? L’agent amélioré est disponible sur ces canaux également. Vous avez donc accès à toute cette puissance depuis votre téléphone, sans ouvrir l’interface web.

Essayez maintenant, c’est gratuit

Tout d’abord, mettez à jour Gladys en v4.76.0 !

Ensuite, il vous faut Gladys Plus. Et je vous offre 1 mois d’essai complet, sans carte bancaire

Chaque compte dispose de 3 000 requêtes par mois + 500 requêtes d’analyse d’images.

C’est largement suffisant pour explorer ce que l’agent sait faire, et je suis curieux de lire vos retours sur ce qui marche, ce qui surprend, et ce que vous aimeriez voir ensuite !!

Pour le modèle d’IA, j’ai atteint avec cet outil les limites de Mistral Small 3.2, et pour l’instant je suis passé à Gemma 4, toujours chez Scaleway, hébergé en France, avec vos données entièrement privées

Bien-sûr, il peut y avoir des bugs et je suis preneur de vos retours

[pierre-gilles]

C’est live chez moi, tout roule

[guim31]

Alors ÇA c’est de la news !!! Il me tarde de tester !!

[b3n.0]

ENNNNOOOOOOOOORME

Vraiment top ! Merci je suis grand fan. Je viens de tester et je crois que je vais multiplier les scènes, toutes celles que j’imaginais et que j’avais la flemme de faire !

[pierre-gilles]

Si vous trouvez ça stylé, on peut enrichir la liste « d’outils » que l’IA peut utiliser, pour l’instant les outils disponibles sont :

• ‹ camera.get-image ›
• ‹ scene.create ›
• ‹ scene.start ›
• ‹ device.get-state ›
• ‹ device.turn-on-off ›
• ‹ device.get-history ›

Mais franchement tout est possible, et ça s’ajoute très facilement.

Je me base sur le travail de @bertrandda sur le serveur MCP + la nouvelle action scene.create que j’ai créé moi

[jparbel]

Merci @pierre-gilles je viens de tester, ça marche super. Bravo pour toutes les nouveautés de ces derniers mois, ça ne chôme pas . Merci également à @bertrandda

[pierre-gilles]

Merci @jparbel ça fait plaisir

[guim31]

Boudiou c’est très sympa !

Petit ratage par contre lors de la création d’une scène de mon côté :

[pierre-gilles]

Pour les ratés de création de scène, ça arrive et je pense que beaucoup d’entre vous vont avoir des ratés sur ce premier jet.

Ce que tu m’as partagé c’est parfait, j’essaierai de voir où l’IA se prend les pieds dans le tapis. J’affinerai ensuite le prompt et le schéma pour que ça passe !

[guim31]

Je lui ai redemandé avec exactement le même « prompt » et la scène a bien été créée !!

Par contre, au lieu du bloc « Envoyer un message » il a utilisé un bloc « Demander à l’IA »

[McFlyPartages]

Salut @pierre-gilles

Cela semble très très prometteur.

Quelques interrogations :

@pierre-gilles

Créé une scène qui tous les matins à 7h, m’envoie un message avec le niveau de CO2 dans le salon, la cuisine, et les états de mes portes.

Ça veut dire qu’il est capable de créer les scènes dans Gladys tout seul ? Ou c’est directement une scène ou il garde ta demande ? Car dans ce cas il faut lui ajouter quand même un déclencheur ?

J’ai eu ma réponse dans un sujet du dessus.

@pierre-gilles

Pour le modèle d’IA, j’ai atteint avec cet outil les limites de Mistral Small 3.2, et pour l’instant je suis passé à Gemma 4, toujours chez Scaleway, hébergé en France, avec vos données entièrement privées

Je ne suis pas un champion de l’IA mais je ne comprend pas cette phrase. L’IA tourne sur le serveur scaleway ? Ou les requêtes par seulement par ce serveur. Car dans ce cas ça tape bien vers le cloud de l’opérateur IA donc pas vraiment privée ?

En tous cas c’est du très bon boulot.