L'IA OpenAI GPT-3 disponible dans Gladys Assistant 🤯

[jparbel]

Les réponses sont un peu approximatives, c’est le moins qu’on puisse dire !

On en a arrêté 6 en 3 mn !!

[guim31]

C’est tout bêtement car ce n’est pas le domaine de competences de ce système.
L’intérêt est de montrer la compréhension de choses complexes : des données dans un contexte particulier, du langage très compréhensible et pertinent.

Demandes lui de t’expliquer un concept : qu’est ce que la guerre / qu’est-ce que l’inflation / etc…
Les réponses sont quasi systématiquement TRÈS pertinentes et très claires.
Ensuite tu lui demandes de te ré-expliquer comme si tu étais un enfant… Et là c’est bluffant !

[jparbel]

@guim31
Je suis bien d’accord avec toi, mais je voulais en effet tester les limites du système.
Ce qui me « dérange » c’est qu’on apporte une réponse malgré tout, même fausse, plutôt que de répondre ‹ je ne sais pas ›

[cce66]

Bref cet IA est prête a se jeter dans la politique…ou peut-être écrit-elle déjà les discours de ceux qui nous gouvernent !!

[jparbel]

@cce66
Tu veux dire qu’on est en plein ultracrepidarianisme ?

[cce66]

@jparbel

ultracrepidarianisme

tout à fait et qui serait surement mâtiné de logorrhée verbale sil elle avait en plus la parole

[tiboys]

@jparbel

ultracrepidarianisme

C’est pas faux !

[pierre-gilles]

Merci à tous d’avoir testé, j’espère que cette intégration vous plait !

J’ai une question pour tout le monde ici par rapport à la prochaine étape de ce développement.

Pour moi la prochaine étape, c’est d’ajouter le contrôle des appareils dans l’intégration.

Quelles commandes voulez-vous dans cette intégration ?

Les commandes peuvent-être pour faire une action dans Gladys, ou demander une information venant de Gladys.

Dans le cas d’une demande d’information venant de Gladys, je ferais un bouton d’autorisation clair pour que l’utilisateur autorise, si il le veut, cette intégration a utiliser des informations venant de Gladys (par exemple si l’utilisateur dis « donne moi la température du salon », il faut bien que l’information vienne de quelque part, je parle de ce genre d’infos)

@jparbel

On en a arrêté 6 en 3 mn !!

Les données ne sont pas « live », GPT-3 a été entrainé sur un dataset fixe datant de 2021.

Rien de lié à l’actualité / ou d’informations étant très variable comme là ne sortira bonne de GPT-3 (du moins, la version actuelle de GPT-3. Peut-être qu’avec GPT-4… )

Après, pour notre usage dans Gladys: compréhension de textes et classification de commandes domotiques + « discussion basiques » + « questions simple du quotidien » + « question historique/philosophique », je trouve que c’est formidable !

[tiboys]

Très bon boulot.

Pour moi ce seraient des commandes de commutateurs, déclenchements de scènes, prises d’infos ( valeur device, température, caméra, …).

Couplé avec telegram, ce serait pratique.
Merci pour tout ce travail

[Terdious]

Tout d’abord, merci @pierre-gilles pour cette intégration. Je pense que nous étions au moins quelques un à penser à cette possibilité, mais pas que ça arriverait aussi rapidement sans même avoir eu le temps d’en parler ^^ Bravo.

@pierre-gilles

Quelles commandes voulez-vous dans cette intégration ?

Pour la 1ère étape :

• Commandes,
• Informations venant de Gladys. l’autorisation par bouton me semble bien, il faut seulement que tout soit clair pour celles et ceux qui, a raison, se méfient ou souhaitent gérés pleinement leurs informations personnelles. De ton côté il ne faut pas que ça puisse te créer de soucis à l’avenir par contre, comme le dis @Phil

@Phil

mais quid de l’envoi de données personnelles vers un système informatique non hébergé en France / Europe. Si un utilisateur demande l’application du RGPD (oui je me fait l’avocat du diable, mais ce sont des questions qu’il vaut mieux se poser avant) … et demande donc toutes les données personnelles détenus par glady …

• Informations externes passées.

Pour une possible 2nde étape :

• Déclencher des scènes comme le proposait @tiboys.

Pour une possible 3ème ou 5ème étape ^^ :

• Garder un contexte personnalisé si possible (en base de donnée ?) pour remplacer les « Groupes » façon Alexa. Je m’explique par exemple :
  • 'La « chambre1 » appartient aux groupes « RdC », « Chambres » et « Pièces non humides » ’ et qu’il l’intégre d’office sans rien de plus.
  • Le jour ou tu as besoin de modifier :
    • 'Peux-tu me dire à quels groupes appartient la pièce « Chambre1 » ',
    • réponse : ’ « chambre1 » appartient aux groupes « RdC », « Chambres » et « Pièces non humides » ',
    • demande : 'Ok modifie tout ces groupes en ajoutant la « Chambre2 » ’
• Effectuer des actions de paramètrage dans Gladys (avec un message conseillant de faire un backup avant ^^), par exemple la création ou la modification de scènes comme le proposait @guim31.

Questions :

• lorsque nous engageons une discussion, est-ce que comme dans chatGPT notre discussion rentre dans le contexte ? Ou à chaque demande, les réponses précédentes sont omises et ne reste que le contexte que tu lui as donné ?
• Actuellement les discussions passées sont effacées automatiquement (je ne sais pas la temporalité). Est-ce que ce sera toujours le cas ? Peut-on envisager un bouton d’effacement de l’historique ? Peut-on envisager plusieurs salons de discussion avec du coup un contexte différent ?

[cce66]

Pour moi le coté POC c’est bien, après voir l’utilité que cela peut avoir au sein de Gladys c’est autre chose !
Je pense qu’il serait plus important de développer autour de ce qui peut attirer plus de monde c’est à dire l’intégration de matériel (j’ai soumis l’idée d’une intégration http par exemple pour ppouvoir créer comme dans MQTT des objets controlables par commande http), ce qui m’attires avec Gladys c’est la facilité de mise en oeuvre mais et surtout la confidentialité des données et l’utilité d’intégration de chose comme Alexa est secondaire et le développement ou l’intégration d’une solution de reconnaissance vocale et TTS (Text to speech) comme dans Gladys 3 devrait être prioritaire ! Ce qui serait bien serait d’avoir un module qui permettent d’installer désinstaller plus facilement le docker nodered car avec lui il y a des modules de reco vocale et TTS autonome « facilement » interfaçable avec Gladys sans que l’on soit obligé de passer pas des solutions tierces pas forcement pérennes sous la même forme et pas avares de nos données (Alexa ChaGpt, homekit etc)
Mais ce n’est que mon avis !

[jparbel]

Merci @pierre-gilles pour tes précisions concernant la validité des réponses de GPT-3, je comprends mieux maintenant.
Dans le cadre de Gladys, GPT-3 peut, en effet, être utile pour effectuer une synthèse particulière de notre domotique, ou apporter des réponses qui ne sont pas directement accessibles à partir de Gladys.

Pour les autres domaines « généralistes », ça peut permettre à Gladys de se démarquer par rapport à la concurrence, et apporter un véritable plus (si on sait poser les bonnes questions !!!).

Après, chacun sa sensibilité, et on peut comprendre que certains ne souhaitent pas l’utiliser dans le cadre de leur domotique personnelle, d’où l’utilité de pouvoir souscrire à différents plans.

Bravo, en tout cas, @pierre-gilles pour toutes ces nouveautés.

[Phil]

@pierre-gilles
FYI : OpenAI launches ChatGPT Plus, starting at $20 per month • TechCrunch

[pierre-gilles]

Si je récapitule les différentes demandes :

• Contrôler des commutateurs/lumières (On/Off)
• Déclencher une scène
• Demander la température d’une pièce
• Récupérer l’image de caméra d’une pièce

@Terdious

lorsque nous engageons une discussion, est-ce que comme dans chatGPT notre discussion rentre dans le contexte ?

Oui il y a du contexte ! Si tu lui parles d’un même sujet, Gladys garde l’historique et se souvient de quoi tu parles Exemple:

@Terdious

Actuellement les discussions passées sont effacées automatiquement (je ne sais pas la temporalité). Est-ce que ce sera toujours le cas ?

C’est juste quand tu quittes la page et reviens, c’est dû à la nature de cette démo « temporaire » dans Gladys. Ca sera pas le cas quand ça partira dans l’onglet « Discussion »

@Terdious

Peut-on envisager plusieurs salons de discussion avec du coup un contexte différent ?

On peut à la limite se garder l’intégration « temporaire » qui te permet d’avoir un contexte frais à chaque fois, mais bon à voir si c’est si utile que ça ^^

@Terdious

Garder un contexte personnalisé si possible (en base de donnée ?) pour remplacer les « Groupes » façon Alexa. Je m’explique par exemple :

On est hors contexte là Si on veut des groupes d’appareils dans Gladys, on peut coder des groupes, mais je pense pas que ça n’ait de rapport avec GPT-3.

[elfedagger]

Bonsoir,
Et la parole est ce envisageable?

[pierre-gilles]

@elfedagger C’est un tout autre sujet

[pierre-gilles]

Petite preview de ce qui vous attend très vite dans Gladys

La prochaine version de Gladys intègrera une version plus avancée de cette intégration OpenAI :

• Intégration disponible dans le vrai chat et dans Telegram
• Contrôle des lampes on/off
• Lancement de scènes ( Une première!! )
• Images de caméras
• Température d’une pièce

Cette deuxième itération sera activable en un clic pour ceux le souhaitent :

Au vu des commandes actuelles, cette intégration n’envoie aucunes informations sur votre instance à GPT-3, les réponses pour la température par exemple sont générés localement.

Si on veut améliorer la qualité des réponses, on pourra dans une prochaine itération transmettre des informations de capteurs si l’utilisateur le souhaite (probablement via un toggle).

J’ai hâte de vous mettre ça entre les mains

[Bruno94]

Et tout ça en lançant " OK GLADYS " ?

[pierre-gilles]

C’est que textuel

[guim31]

Génial, j’adore bravo Pierre-Gilles