Nous allons effectuer une maintenance d'urgence sur des unités de stockage dans la nuit du lundi 9 au mardi 10 Juin 2014.

Cette maintenance impactera les services suivants :

  •  www.gandi.net : accès a vos interfaces d'administration, possibilité de passer des commandes,
  • mail.gandi.net : IMAP(s), POP(s), SMTP(s), webmail (consultation et envoi)
  • redirections Web/HTTP(s)
  • Basekit / Sitemaker
  • approvisionnement zones DNS
  • groups / wiki
  • console d'urgence / résolveurs DNS hébergement in Paris
  • SimpleHosting (PaaS) approvisionnement virtualhost

La fenêtre de maintenance sera de 4 heures, entre 11:00 PM et 03:00 AM CEST (Paris).

Veuillez nous excuser de la gêne occasionnée par cette maintenance.

 

Détail :

 23:00 CEST : début de la maintenance.

 23:17 CEST : correction de la date dans l'intitulé de la maintenance.

 23:47 CEST : fin de la maintenance.



Nous rencontrons actuellement un problème de routage qui rend inaccessible une partie de notre réseau depuis certains endroits.
Notre équipe technique est en train d'analyser le problème afin de le corriger dès que possible.
Nous vous tiendrons au courant de l'évolution de ce problème dans les plus brefs délais.

 

UPDATE 05h15 : la mise en production d'une nouvelle configuration réseau a perturbé une partie de nos équipements. Veuillez nous excuser pour la gêne occasionnée.

Retour sur les évènements qui ont entrainés l'indisponibilité des VM pour certains de nos clients.

  • 10:25 CEST : Premier incident : 12 nodes raccordés à un  switch rencontrent une erreur rendant les machines injoignables. Plus de 200 VMs sont impactées et donc injoignables.
  • 10:40 CEST : Les nodes sont de nouveau démarrées et sont accessibles, les VMs sont disponibles.
Nos équipes investiguent mais ne trouvent rien de probant.
  • 14:01 CEST : Nouvel incident  : 8 nodes rencontrent de nouveau une erreur rendant les machines injoignables. ~180 VMs sont impactées.
  • 14:09 CEST: Les nodes sont de nouveau démarrées et sont accessibles, les VMs sont disponibles.
Nous avons mis en place des mesures afin de collecter plus d'informations sur le problème.
  • 16:56 CEST : Nouvel incident : 10 nodes impactés deviennent injoignables contenant 321 VMs.
  • 17:10 CEST : Toutes les VMs sont démarrées et sont accessibles.
Des informations précises ont été collectées. Elles devraient nous permettre de régler ce dysfonctionnement aussi vite que possible.

 


Le service Gandimail subit actuellement des perturbations, notre équipe technique travaille actuellement à résoudre le problème.

 

Mise à jour 12h40 : la situation est stabilisée, mais nous continuons de travailler à résoudre le problème.


 

Un incident sur notre infrastructure de bases de données à provoqué des dysfonctionnements sur notre service de messagerie Gandi Mail et le provisioning DNS
Impacts Gandi Mail :
- Difficultés pour consulter les emails à cause de problèmes d'authentification aléatoires
- créations des nouvelles boites mails suspendues 
Impact génération/provisioning des zones dns :
- le provisionning dns n'était plus effectué jusqu'à 19h CEST
Timeline :
- 07:00 CEST : un bug dans nos infrastructures ralenti nos bases de données jusqu'à rendre certaines opérations non effectives.
- 09:00 CEST : à cause d'une défaillance humaine le problème n'est pris en compte qu'à partir de cette heure là.
- 10:00 CEST : Gandi Mail en mode dégradé à cause des problèmes d'authentification
- 19:00 CEST : provisionning dns rétabli
- 20:43 CEST : rétablissement complet du service Gandi Mail
 
Veuillez nous excuser pour la gêne occasionnée.

Un incident impatctant note infrastrucuture de mail est en cours

Nos équipes travaillent à la résolution du problème.

Edit:
L'incident est résolu du coté de l'infrastructure de mail.
La génération des zones va prendre du retard

Information pour les utilisateurs touchés :

Aucune perte d' emails ne sera observée notez cependant que le trafic sera légèrement

différé.

 


16:57 : Une erreur humaine a entraîné un problème de connectivité sur une partie de notre infrastructure mail.

17:00 : Communication faite sur le site

17:06 : Rétablissement de la connectivité physique. Néanmoins, la machine ne répond toujours pas.

17:23 : Rétablissement complet de la connectivité.
Les serveurs de mail répondent de nouveau correctement

Impact :
Impossibilité de consulter et d'envoyer des emails pour 15975 adresses entre 16h57 et 17h23
Il n'y a eu aucune perte de données.

Veuillez nous excuser pour la gêne occasionnée.

Des machines physiques IaaS sont injoignables suite à un problème dont nous cherchons la cause.

Nous corrigeons et redémarrons les VMs sur d'autres machines physiques le plus rapidement possible.

Merci de ne pas faire d'opération sur votre serveur virtuel le temps que notre maintenance d'urgence soit complète.

Si, à l'issue de la maintenance, votre serveur virtuel ne répondait pas, merci de contacter le support hébergement par email en ticket 'serveur bloqué'.

 

Navré pour la gêne occasionnée par ce problème.

 

UPDATE 12h20 : la situation est de retour à la normale, nous continuons l'analyse des journaux et métriques.


Une maintenance sera effectuée sur notre infrastructure hébergement à Baltimore (USA) et Bissen (Luxembourg).

Les services suivants seront interrompus durant quelques minutes à partir du 2014-04-29 05h00 UTC (2014-04-29 06h00 CEST) :

  • Nouvelles sessions SFTP/GIT
  • Résolution DNS inverse des IPs clients
  • Opérations sur les serveurs et instances Simple Hosting

Veuillez nous excuser par avance de la gêne occasionnée.


Page   1 2 312 13 14
Change the news ticker size