Incident sur les médias Manage Mardi 10th janvier 2023 09:30:00


Un incident est actuellement en cours sur la disponibilité des Médias dans Manage MyCity et dans le CMS MyCity. 

Nous avons repéré une anomalie sur l’un de nos serveurs de stockage causant la non disponibilité de certains fichiers de Manage, notamment quelques médias.

Nous effectuons actuellement une restauration des fichiers impactés depuis notre sauvegarde de cette nuit. Ceci a pour conséquence que les fichiers sont inaccessibles tant qu’ils n’ont pas été restaurés.
Nous estimons que la restauration durera jusqu’à ce soir, car il y a de grosses quantités de médias.

Afin de protéger les sites, nous avons bloqué leur mise en production. Cette restriction devrait pouvoir être levée en début d'après-midi. (update la restriction est maintenant levée)

Soyez assurés qu’aucune perte de donnée ni de piratage n’est à signaler. Ceci est dû à une défaillance dans un processus interne et toutes les données sont sauvegardées, le délai actuel est uniquement pour copier les données depuis le système de sauvegarde.

Nous vous tenons régulièrement informés de l'avancement via l'actualité dans le SSO et sur status.mycity.travel, vous pouvez donc consulter la suite des évènements là.

Au nom de toute l'équipe, nous tenons à nous excuser pour cette indisponibilité imprévue et soyez sûrs que nous mettons tout en oeuvre afin que cette situation ne se reproduise plus.

Suivi de l'incident :

10.01.23
09h43 - Détection de l'incident, certains médias sont indisponibles.
10h01 - Cause de l'incident trouvé
10h28 - Incident en cours de résolution, restauration de la sauvegarde en cours.
11h41 - Le CRM est restauré et opérationnel
11h43 - La mise en production des sites CMS est à nouveau disponible
11h46 - Les sites sont maintenant complètement restaurés
13h31 - Un problème persistant avec les fichiers d'assets (static.mon-site.ch) sur le CMS et les sites provoquant des erreurs 500 a été identifié et corrigé
15h10 - La restauration des fichiers est toujours en cours
17h05 - La restauration des fichiers est toujours en cours mais prend plus longtemps que prévu, elle devrait être terminée durant la nuit.
11.01.23
09h00 - La restauration des fichiers est toujours en cours et bientôt terminée, la majorité des destinations devraient avoir tous les fichiers restaurés
16h24 - Tous les médias Manage ont été restaurés et la situation est pratiquement totalement rétablie.
21h35 - Tous les fichiers ont été restaurés et la situation est complètement rétablie