Problème de RAM - Gladys ne réagit plus

Configuration
1

Bonjour,

Cela fait quelques jours que j’ai énormément de problèmes avec mon instance Gladys, depuis la dernière mise à jour environ. Surement un hasard…

Je m’explique : mon Gladys prend de plus en plus de temps à charger les pages jusqu’à saturation. Il finit par ne plus répondre au ping et je suis obligé de le redémarrer physiquement.

Je possède un Raspberry PI 4 avec une carte SD et je n’ai pas de souci avec les autres containers (sauf quand la machine ne répond plus au ping évidemment).

En regardant un peu les stats, je constate que ma mémoire gonfle très rapidement :

image
image940×159 6.32 KB

Si je redémarre en faisant un stop + start le container Gladys, la mémoire repart à 0 et continue à gonfler continuellement jusqu’à saturation.

Au niveau des logs Gladys, les quelques dernières lignes sont les suivantes :

Limite de 33 000 caractères sur le message du forum
c6e3b76b2ee4','hourly','ba4e30b3-bb76-4e8b-a61a-feaa42c53cf7',6176.74,'2023-03-03 11:50:25.428 +00:00','2023-03-03 11:50:25.428 +00:00'),('12a018e2-de2b-4064-bc43-37dad72d4418','hourly','ba4e30b3-bb76-4e8b-a61a-feaa42c53cf7',6176.74,'2023-03-03 11:50:49.622 +00:00','2023-03-03 11:50:49.622 +00:00'),('d028d2a3-ae03-4894-8f56-1a75b6bc9f7b','hourly','ba4e30b3-bb76-4e8b-a61a-feaa42c53cf7',6176.75,'2023-03-03 11:50:49.900 +00:00','2023-03-03 11:50:49.900 +00:00'),('00b54221-d81c-4ba1-95ca-f435d5c62f64','hourly','ba4e30b3-bb76-4e8b-a61a-feaa42c53cf7',6176.75,'2023-03-03 11:50:53.704 +00:00','2023-03-03 11:50:53.704 +00:00'),('287dac16-70bf-4d72-b44c-e3fefba1b122','hourly','ba4e30b3-bb76-4e8b-a61a-feaa42c53cf7',6176.77,'2023-03-03 11:50:56.318 +00:00','2023-03-03 11:50:56.318 +00:00'),('93b65da7-7ea2-49e6-a797-8c715b169425','hourly','ba4e30b3-bb76-4e8b-a61a-feaa42c53cf7',6176.77,'2023-03-03 11:51:09.528 +00:00','2023-03-03 11:51:09.528 +00:00'),('a68474c1-0118-4580-88a8-a1a0298dc5db','hourly','ba4e30b3-bb76-4e8b-a61a-feaa42c53cf7',6176.79,'2023-03-03 11:51:10.957 +00:00','2023-03-03 11:51:10.957 +00:00'),('13a8eb25-0bb3-44c7-a541-7fd7ccd66c82','hourly','ba4e30b3-bb76-4e8b-a61a-feaa42c53cf7',6176.79,'2023"..
2

En continuant de feuilleter et rechercher sur le forum, j’ai l’impression que ça ressemble un peu à ça :

Dans mes souenirs, j’ai fait ceci ces derniers temps :

  • Ajouter des éléments MQTT pour afficher des prix par rapport à ma consommation/production d’énergie
  • Modifier un élément MQTT car le nom du topic n’était pas bon
  • Supprimer 2 graphiques car je pensais que c’était la cause de ma lenteur
  • Effectué un nettoyage (impossible de savoir s’il s’est correctement terminé vu que 24h après, plus d’accès
3

Je pense que le souci vient de ma DB de plus de 14Go. J’ai eu la mauvaise idée de tout enregistrer.
C’est en faisant des erreurs qu’on apprend.

Par contre, étant donné que le système est directement dans les choux, comment modifier la DB manuellement pour supprimer les données dans t_device_feature_state pour commencer ?
J’ai exporté la DB et utilisé DB Browser sur Windows mais possible de stopper le container et ensuite manuellement faire la manipulation sur la DB ?
Je suis un novice en SQLite et encore plus dans un container :confused:

4

Personne pour m’expliquer comment lancer des commandes SQL directement dans Docker ? :frowning:
La commande SQlite3 n’existe pas. Il fait installer le package ?

5

Désolé @Kevin pour le silence… Malheureusement je n’ai aucune idée de comment on fait :confused:

6

Bonjour,

Effectivement, sqlite3 est installé uniquement dans le container gladys mais faire les manipulations alors que le container est démarré est une mauvaise idée.

Le mieux (et plus simple si tu n’es pas familier avec les lignes de commande) est de:

  • stopper le container Gladys
    docker stop gladys
  • faire un backup de la base de données
    cp /var/lib/gladysassistant/gladys-production.db /var/lib/gladysassistant/gladys-production.db.backup
  • copier le fichier /var/lib/gladysassistant/gladys-production.db sur une autre machine
  • utiliser un éditeur comme DBBrowser
  • faire tes manipulations (pense bien à Enregistrer les modifications)
  • recopier la nouvelle base de données dans /var/lib/gladysassistant/
  • démarrer Gladys
    docker start gladys
7

Hello,

Je te remercie pour ta réponse détaillée :slight_smile:

Je n’ai aucun souci avec les lignes de commandes, j’étais DEV en C# .NET mais j’avais plutôt l’habitude des manipulations de procédures stockées, transactions et autre sur des instances SQL serveurs avec SSMS… Et n’ayant pas d’expérience avec Docker ni SQLite, j’étais un peu perdu et j’avais besoin d’un tout petit guide de démarrage :smiling_face:

J’ai déjà récupéré la DB après avoir arrêté le container Gladys. Et je fais quelques manipulations via DB Browser. Par contre, j’avais deux fichiers (***.DB-SHM, ***.DB-WAL) en plus de la DB (cache, queue , … ?) et je me demande s’il faut forcer un merge ou autre ? Ou je peux simplement faire abstraction de ces fichiers sans corrompre ma DB si je remets ma future DB modifée par la suite ?

Encore merci pour ton aide @cicoub13 ! :slightly_smiling_face:

@guim31 : Pas grave, merci quand même d’avoir répondu :slight_smile:

8

Aucun souci avec ces fichiers, tu peux les ignorer. Lorsque Gladys va redémarrer, le SHM repartira de zéro. Le WAL contient les procédures de rollback en cas d’erreur. Mais là, on a éteint la connection à la base de manière propre.

9

Ok, parfait. Merci pour ce complément d’information. Je vais procéder de la sorte.

10

Euh non je suis pas d’accord

Normalement si tu stoppe bien Gladys, ces fichiers doivent disparaitre (ils n’existent que quand un programme SQLite accède à la DB). Il faut bien s’assurer que c’est le cas avant de copier le fichier de DB, ou alors copier les 3 fichiers.

Si jamais tu copie une nouvelle DB SQlite à côté d’anciens fichiers db-shm / db-wal, tu risques la corruption de base de donnée.

11

Pour ma part, cela a fonctionné en ignorant ces fichiers. Est-ce le hasard ? Je ne sais pas. Après, Gladys était correctement éteint mais vu les 14Go, je suppose qu’il n’a pas réussi à faire le nécessaire avec les deux autres fichiers.