Incidents sur nos serveurs

Nos sites ont subi quelques perturbations ce week-end et ces derniers jours lors des périodes d'affluence.

Après plusieurs heures d'investigations nous avons trouvé l'origine du problème et avons enfin corrigé le souci.

Pour information, 10 nouveaux serveurs seront installés sur Paris d'ici la fin du mois.

Skool et Yota finalisent leur configuration.

Le parc de serveurs de Motion-Twin sera donc porté de 31 à 41 machines.

Nous annoncerons la date exacte de l'installation des nouveaux serveurs à l'avance sur les sites et sur ce blog. L'ensemble des sites devraient être fermés pendant quelques heures. Nous étudions différentes méthodes qui nous permettront de limiter la durée d'intervention.

Pour les détails techniques du dernier incident (pour ceux qui s'y intéressent) :

Nous utilisons une version personnalisée de libgc (garbage collector) adaptée aux besoins de notre machine virtuelle neko.

Cette version de libgc est moins gourmande en mémoire que la version installée par défaut sur les systèmes linux / debian ce qui nous permet de supporter plus d'utilisateurs sur nos sites.

Sur 6 de nos serveurs web cette version personnalisée a été écrasée par la version debian lors d'une mise à jour. Ces serveurs ont alors eu une consommation mémoire anormale et sont tombés brutalement.

Les serveurs restant ont eu du mal à supporter la charge utilisateur ce qui a ralenti l'ensemble des sites Motion-Twin.

Les 10 nouveaux serveurs devraient améliorer la stabilité du système (moins de risque en cas de plantage de ce genre) et augmenter en même temps le nombre d'utilisateurs que nous pourrons supporter !

Toutes nos excuses pour ces perturbations, nous continuerons à vous tenir informés des améliorations de nos serveurs.

yota