Le 16 janvier dernier, Funio prenait en charge la gestion des syst\u00e8mes, des infrastructures et du service \u00e0 la client\u00e8le.\u00a0 Encore aujourd’hui, cette transition qui n’est pas de toujours simple, se poursuit.\u00a0 Nous avons fait face \u00e0 plusieurs d\u00e9fis durant le dernier mois, mais notre \u00e9quipe s’est acharn\u00e9e \u00e0 reprendre le dessus sur le retard accumul\u00e9e d\u00fb \u00e0 un niveau de demande tr\u00e8s \u00e9lev\u00e9 et nous voyons aujourd’hui que nos efforts portent fruits.<\/p>\n
Voici donc le 2i\u00e8me article d’une s\u00e9rie de 3 articles qui comprend un post mortem des activit\u00e9s du dernier mois ainsi qu’une description sommaire de certains projets sur lesquels nous continuerons de travailler dans les prochaines semaines.\u00a0 Vos commentaires sont appr\u00e9ci\u00e9s et nous aideront \u00e0 prendre les bonnes d\u00e9cisions.<\/p>\n
Depuis les derniers mois, nous avons v\u00e9cu quelques situations probl\u00e9matiques sur nos infrastructures.\u00a0 Dans un premier temps, de nouveaux exploits des failles de s\u00e9curit\u00e9 sur les \u00a0CMS (WordPress, Joomla et autres) ont \u00e9t\u00e9 la cible de pirates sur nos serveurs.\u00a0 La premi\u00e8re cons\u00e9quence est que plusieurs sites de client ont donc \u00e9t\u00e9 affect\u00e9s et de nombreuses restaurations de copie de sauvegarde ont \u00e9t\u00e9 n\u00e9cessaire pour remettre le contenu des sites correctement.\u00a0 Cette op\u00e9ration n\u00e9cessite souvent la restauration d’une grande quantit\u00e9 de donn\u00e9es et il n’est alors pas possible de restaurer le contenu de plusieurs sites en m\u00eame temps sur le serveur de sauvegarde.\u00a0 C’est ce qui explique des d\u00e9lais de restauration plus long qu’\u00e0 l’habitude.<\/p>\n
Une deuxi\u00e8me cons\u00e9quence est que la majorit\u00e9 des pirates utilisent l’exploitation de ces failles de s\u00e9curit\u00e9 pour envoyer du pourrie via des scripts, ce qui nous m\u00e8ne \u00e0 la deuxi\u00e8me situation probl\u00e9matique.\u00a0 Lorsque du “spam” est envoy\u00e9, les serveurs sont identifi\u00e9s par les organismes anti-spam comme comportant des activit\u00e9s malveillantes, ce qui cause de nombreux probl\u00e8mes.\u00a0 Entre autre, les organismes anti-spam en question “blacklistent” automatiquement les adresses IPs utilis\u00e9es pour l’envoi de ces pourriels ce qui se traduit, pour certains clients sur le serveur en question, par l’incapacit\u00e9 occasionnelle d’envoyer certains emails \u00e0 certains destinataires.\u00a0 Nous intervenons toujours rapidement sur ces probl\u00e8mes et avons une bonnes collaboration avec ces organismes qui savent tr\u00e8s bien que nous d\u00e9non\u00e7ons les activit\u00e9s de spam, mais le processus prend parfois quelques jours avant que l’adresse IP soit “d\u00e9list\u00e9e”.<\/p>\n
Une troisi\u00e8me cons\u00e9quence de ce ces \u00e9pisodes de “piratage” est une grande utilisation de l’espace disque.\u00a0 Les pirates utilisent les espaces du compte pirat\u00e9 pour y mettre une multitude de fichiers qui peuvent ensuite \u00eatre t\u00e9l\u00e9charg\u00e9s de plusieurs sources diff\u00e9rentes.\u00a0 Une tr\u00e8s grande quantit\u00e9 de fichiers est alors t\u00e9l\u00e9vers\u00e9 en tr\u00e8s peu de temps et l’espace disponible sur les disques est alors rempli tr\u00e8s rapidement, ce qui emp\u00eache nos clients l\u00e9gitimes de t\u00e9l\u00e9verser\/t\u00e9l\u00e9charger leur fichier correctement le temps que le pirate soit cibl\u00e9 et que les fichiers en question soient effac\u00e9s.<\/p>\n
Finalement, une quatri\u00e8me cons\u00e9quence est une d\u00e9gradation des performances des serveurs.\u00a0 Habituellement, lorsqu’un client abuse des ressources du serveur, nous intervenons rapidement et cette intervention passe inaper\u00e7u la majorit\u00e9 du temps.\u00a0 Dans ces cas-ci, lorsqu’un client utilise trop de ressource, le serveur a plus de difficult\u00e9 a l’assumer car il est sollicit\u00e9 \u00e0 plusieurs niveaux et les interventions de l’\u00e9quipe sont plus nombreuse.\u00a0 Lorsque les ressources d’un serveur sont tr\u00e8s sollicit\u00e9es, le premier service qui en \u00e9cope est le service de courriels.\u00a0 C’est la raison pour laquelle, durant les derni\u00e8res semaines, le chargement sur les serveurs a connu des ralentissement et que les services de courriels ont rencontr\u00e9s des interruptions intermittentes durant les p\u00e9riodes les plus achaland\u00e9es de la journ\u00e9e.<\/p>\n
<\/p>\n
Outre les interventions habituelles, 3 projets d’am\u00e9lioration et stabilisation sont en cours pour pr\u00e9venir ce genre de situation.<\/p>\n
En premier lieu, notre \u00e9quipe a install\u00e9 “mod-security” sur certains serveurs.\u00a0 Ce logiciel permet de pr\u00e9venir certains probl\u00e8mes mentionn\u00e9s ci-dessus en bloquant une grande partie des attaques de pirates sur nos serveur, m\u00eame sur les CMS (WordPress, Joomla et autres) des clients qui ne sont pas \u00e0 jour.\u00a0 Nous savons que cette installation aura un impact tr\u00e8s positif sur la diminution des tentatives de piratage et nous gagnerons \u00e0 coup s\u00fbr en stabilit\u00e9 des serveurs et en performance. Par contre, nous savons aussi que cette installation pourrait bloquer certains scripts l\u00e9gitimes de nos clients et nous tentons toujours d’intervenir rapidement pour corriger ces cas, l’objectif n’\u00e9tant \u00e9videmment pas de couper des fonctionnalit\u00e9s, mais bien d’am\u00e9liorer la stabilit\u00e9 des infrastructures pour tous les clients sur le serveur.<\/p>\n
Ensuite, nous pr\u00e9voyons habituellement une certaine quantit\u00e9 de ressource “libre” sur le serveur (espace disque, RAM, CPU), pour \u00eatre en mesure d’assumer les p\u00e9riode de pointes qui ne doivent pas consomm\u00e9es plus d’une certaine quantit\u00e9 des ressources totales.\u00a0 Nous allons augment\u00e9 cette quantit\u00e9 de ressource libre en ajoutant des serveurs et en migrant certains clients vers ces nouveaux serveurs.\u00a0 Des serveurs sont ajout\u00e9s r\u00e9guli\u00e8rement \u00e0 notre infrastructure, mais ces nouveaux serveurs seront utilis\u00e9 uniquement pour diminuer la charge sur les autres serveurs de notre parc.\u00a0 De plus, nous avons identifi\u00e9 que le i\/o des disques \u00e9taient \u00e0 l’origine de certains probl\u00e8mes de performance, donc ces nouveaux serveurs seront \u00e9quip\u00e9es d’une carte RAID et de disque plus rapide ce qui devrait, selon les tests effectu\u00e9s, nous permettre de gagner en performance.<\/p>\n
Finalement, nous utilisons pr\u00e9sentement “CloudLinux” sur nos serveurs.\u00a0 Cette plateforme a un grand potentiel qui n’avait pas \u00e9t\u00e9 exploit\u00e9 jusqu’\u00e0 aujourd’hui.\u00a0 Nous travaillons donc pr\u00e9sentement en \u00e9troite collaboration avec les sp\u00e9cialistes de CloudLinux pour mettre en place des configurations qui nous permettrons d’avoir plus de contr\u00f4le sur la sur-utilisation des ressources par certains clients ainsi que de mettre en place des processus de pr\u00e9vention pour am\u00e9liorer notre pro-activit\u00e9 dans la r\u00e9solution de probl\u00e8me.<\/p>\n
L’objectif est de mettre en place ces modifications et ajouts d’ici le d\u00e9but du mois d’avril.\u00a0 D\u00e9ja, depuis la derni\u00e8re semaine, nous constatons une nette am\u00e9lioration des performances avec le d\u00e9but de l’implantation de certaines de ces mesures.\u00a0 Nous sommes confiant que la stabilit\u00e9 des infrastructures atteindra de nouveau sommet une fois ces projets compl\u00e9t\u00e9s.<\/p>\n
Le prochain article paraitra dans les prochains jours au sujet de:\u00a0Post-mortem et am\u00e9lioration de notre service \u00e0 la client\u00e8le<\/p>\n