aboutsummaryrefslogtreecommitdiff
diff options
context:
space:
mode:
authorQuentin Dufour <quentin@deuxfleurs.fr>2022-03-28 11:59:37 +0200
committerQuentin Dufour <quentin@deuxfleurs.fr>2022-03-28 11:59:37 +0200
commitce36e7e09b8c77d0b91cba98db3aa4f96f558241 (patch)
tree5fab2a712fd780304a01a6ae4e9bbb0197e38730
parent68607d567c5e7292dfa3a069a3b6aada6c86a106 (diff)
downloadinfrastructure-ce36e7e09b8c77d0b91cba98db3aa4f96f558241.tar.gz
infrastructure-ce36e7e09b8c77d0b91cba98db3aa4f96f558241.zip
Ajout coupure élec + SSD lent
-rw-r--r--op_guide/postmortem/2021-07-12-synapse-bdd-rempli-disque.md3
-rw-r--r--op_guide/postmortem/petits-incidents.md2
2 files changed, 5 insertions, 0 deletions
diff --git a/op_guide/postmortem/2021-07-12-synapse-bdd-rempli-disque.md b/op_guide/postmortem/2021-07-12-synapse-bdd-rempli-disque.md
index 89d1c3c..8514016 100644
--- a/op_guide/postmortem/2021-07-12-synapse-bdd-rempli-disque.md
+++ b/op_guide/postmortem/2021-07-12-synapse-bdd-rempli-disque.md
@@ -2,10 +2,13 @@
Todo: finir ce blog post et le dupliquer ici https://quentin.dufour.io/blog/2021-07-12/chroniques-administration-synapse/
+Le WAL qui grossissait à l'infini était également du à un SSD défaillant dont les écritures était abyssalement lentes.
+
Actions mises en place :
- Documentation de comment ajouter de l'espace sur un disque différent avec les tablespaces
- Interdiction de rejoindre les rooms avec une trop grande complexité
- nettoyage de la BDD à la main (rooms vides, comptes non utilisés, etc.)
+ - Remplacement du SSD défaillant
Actions à mettre en place :
- Utiliser les outils de maintenance de base de données distribuées par le projet matrix
diff --git a/op_guide/postmortem/petits-incidents.md b/op_guide/postmortem/petits-incidents.md
index 06d0b3d..bcf8ce4 100644
--- a/op_guide/postmortem/petits-incidents.md
+++ b/op_guide/postmortem/petits-incidents.md
@@ -1,3 +1,5 @@
+- **2021-07-27** Panne de courant à Rennes - 40 000 personnes sans électricité pendant une journée - nos serveurs de prod étant dans la zone coupée, deuxfleurs.fr est dans le noir - https://www.francebleu.fr/infos/faits-divers-justice/rennes-plusieurs-quartiers-prives-d-electricite-1627354121
+
- **2021-12:** Tentative de migration un peu trop hâtive vers Tricot pour remplacer Traefik qui pose des soucis. Downtime et manque de communication sur les causes, confusion généralisée.
*Actions à envisager:* prévoir à l'avance toute intervention de nature à impacter la qualité de service sur l'infra Deuxfleurs. Tester en amont un maximum pour éviter de devoir tester en prod. Lorsque le test en prod est inévitable, s'organiser pour impacter le moins de monde possible.