Avis d'incident

Incident majeur DME Omnimed
2024-04-26 07:00 EDT · 6 heures, 30 minutes, 20 secondes

État de la situation

Analyse rétrospective

Nous désirons revenir sur les instabilités et la panne survenues le vendredi 26 avril dernier. Nous comprenons que toute interruption de service a un impact significatif sur vos opérations.

Dans la nuit de jeudi à vendredi, des travaux en lien avec les mécanismes de la recherche de patients ont été réalisés. Malheureusement, il y a eu une problématique au niveau de la réplication de l’index de recherche de patients, qui a entraîné des instabilités dans le système. La problématique n’a pu être détectée que tôt vendredi matin. Notre équipe a rapidement travaillé à reconstruire l’index de recherche. La transition vers ce nouvel index a ensuite provoqué une erreur de système généralisée. Le redémarrage du système et la validation des correctifs ont entraîné une panne de 35 minutes au début de l’heure du dîner (11 h 59 à 12 h 34).

Au cours des derniers mois, l’équipe de développement a entrepris une refonte majeure du système de recherche patient pour en améliorer l’architecture ainsi que retirer les contraintes de connectivité à l’origine de cette panne. Ces travaux seront finalisés dans les semaines à venir, ce qui devrait prévenir que de tels problèmes surviennent à nouveau. Entretemps, nous avons documenté cet incident et en avons tiré des leçons pour pouvoir diagnostiquer et résoudre ce type de problème plus rapidement à l’avenir.

Nous tenons à vous remercier de votre confiance et de votre compréhension.

avril 30, 2024 · 13:19 EDT
Résolu

L’incident est maintenant résolu. Tous les systèmes sont revenus à la normale.

L’historique de la situation est disponible ci-dessous.

Nous nous excusons pour les inconvénients que cet incident a occasionnés.

avril 26, 2024 · 13:25 EDT
Sous surveillance

L’incident est maintenant résolu. Tous les systèmes sont revenus à la normale et la recherche patient fonctionne normalement incluant les derniers patients créés. Nous continuons à monitorer le système pour nous assurer que tout se passe bien.

L’historique de la situation est disponible ci-dessous.

Nous nous excusons pour les inconvénients que cet incident a occasionnés.

avril 26, 2024 · 12:53 EDT
Mise à jour

L’application est de retour en ligne. Nous poursuivons nos travaux pour que la recherche de patient puisse trouver les patients nouvellement créés.

Nous nous excusons pour les inconvénients que cet incident a occasionnés.

avril 26, 2024 · 12:37 EDT
Mise à jour

Nos serveurs ont dû être arrêtés d’urgence.

L’investigation se poursuit afin de rétablir le service. L’application sera de retour dans quelques minutes.

Nous sommes désolé de la situation et travaillons activement à rétablir le tout.

avril 26, 2024 · 12:15 EDT
Mise à jour

L’application sera de retour dans quelques minutes. Nos serveurs ont dû être arrêtés d’urgence.

L’investigation se poursuit afin de rétablir le service. Nous estimons que l’application sera de retour d’ici 5 minutes.

Nous sommes désolé de la situation et travaillons activement à rétablir le tout.

avril 26, 2024 · 12:01 EDT
Mise à jour

Un ajustement a été apporté. La recherche de patients fonctionne à nouveau. Cependant les nouveaux patients ne sont pas indexés et ne peuvent être recherchés.

L’investigation se poursuit afin de rétablir complètement le service.

Impacts : Un nouveau patient créé n’est pas retrouvé par la recherche de patients.

Un état de situation sera publié dès que le tout sera rétablit.

avril 26, 2024 · 09:00 EDT
En investigation

Nous éprouvons présentement des intermittences dans le DME

Nous tentons de corriger la situation le plus rapidement possible. Le temps de résolution de l’incident est maintenant estimé à 1 heures.

Ce message sera mis à jour dès que de nouveaux détails seront disponibles.

Merci de votre compréhension.

avril 26, 2024 · 08:11 EDT

← Retour