Vols annulés chez Alaska Airlines suite à une panne matérielle

La panne qui a cloué au sol les vols d'Alaska Airlines pendant trois heures dimanche dernier n'était pas le résultat d'une cyberattaque, mais d'une défaillance matérielle dans l'un des centres de données de la compagnie. Dans un email, l’entreprise a expliqué à notre confrère Network World qu'un « matériel à redondance multiple, fabriqué par un tiers », avait subi une « panne inattendue » qui avait affecté plusieurs de ses systèmes. Les premières hypothèses estimaient qu'il s'agissait d'un incident de sécurité, d'autant plus que Hawaiian Airlines, rachetée par Alaska Airlines en septembre dernier, avait été victime d'une cyberattaque en juin. De plus, cette panne est survenue alors que Microsoft mettait en garde contre des « attaques actives » visant ses serveurs SharePoint sur site et que les cybercriminels s'intéressaient de plus en plus au secteur de l'aviation.

Cette panne souligne le fait que même les systèmes informatiques à redondance multiple ne sont pas infaillibles et peuvent tomber en panne en cascade. « Je pense qu'ils ont mis l'accent sur la redondance pour montrer clairement qu'ils estiment avoir investi de manière appropriée dans la solution : « Nous avions anticipé cela avec des systèmes redondants et nous avons quand même été touchés ! », a commenté Jeremy Roberts, directeur principal du contenu et de la recherche chez Info-Tech Research Group.

Une panne matérielle immobilise les vols pendant 3 heures

Vers 20 h, heure du Pacifique, le dimanche 20 juillet, Alaska Airlines a annoncé qu'une panne informatique affectait ses opérations et avait entraîné « l'immobilisation au sol de tous ses vols ». Cette mesure a été levée trois heures plus tard, à 23 h. La compagnie aérienne a déclaré à Network World que lorsque l'élément critique de ce qu'elle a décrit comme « du matériel tiers à redondance multiple » est tombé en panne de manière inattendue, « cela a eu un impact sur plusieurs de nos systèmes clefs qui nous permettent d'exécuter diverses opérations ». La société travaille actuellement avec son fournisseur pour remplacer l'équipement défectueux dans le centre de données. La compagnie aérienne a annulé plus de 150 vols depuis dimanche soir, dont 64 lundi. La compagnie a déclaré que d'autres perturbations de vols étaient à prévoir, car elle devait réorganiser ses avions et ses équipages sur l'ensemble de son réseau. Alaska Airlines a souligné que la sécurité de ses vols n'avait à aucun moment été compromise et que « la panne informatique n'était liée à aucun autre événement actuel, ni au récent incident de cybersécurité chez Hawaiian Airlines ». La compagnie aérienne n'a pas fourni d'informations supplémentaires à Network World sur les détails de la panne. Plusieurs membres du sous-groupe Reddit r/AlaskaAirlines et des forums tech/aviation évoquent une défaillance subite d’un composant pourtant redondé (probablement un élément de commutation d'alimentation), suggérant un point de bascule unique, non dupliqué, dans l’architecture réseau/énergie.

« Il existe de nombreux composants redondants qui peuvent tomber en panne », a déclaré M. Roberts, soulignant qu'il pouvait s'agir d'un simple système RAID (qui combine plusieurs composants physiques de stockage de données en une ou plusieurs unités logiques). Ou, du côté du réseau, il pouvait s'agir d'une panne d'une paire d'équilibreurs de charge. « Il est intéressant de noter que la redondance ne les a pas sauvés », a déclaré M. Roberts. « Peut-être que plusieurs éléments matériels ont été affectés par le même problème, comme une mise à jour du micrologiciel. Ou peut-être ont-ils simplement joué de malchance. » Bien qu'Alaska Airlines n'ait pas communiqué le coût total de cette panne (et ne l'ait probablement pas encore déterminé), « il se chiffre facilement en millions de dollars », a déclaré M. Roberts. Bien sûr, a-t-il ajouté, il n'y aura pas de réponse définitive tant qu'Alaska Airlines n'aura pas publié son rapport d'analyse rétrospective (si tant est qu'elle le fasse).

Redondance, redondance, redondance

Investir dans la redondance est une pratique commerciale essentielle, et l'incident d'Alaska Airlines souligne l'importance que les entreprises doivent accorder à la spécification, à la gestion et à la maintenance de leurs équipements informatiques. « La redondance est (ou devrait être) omniprésente », a déclaré M. Roberts. « En gros, il ne devrait pas être possible d'exploiter un service d'entreprise sans une forme de redondance à tous les niveaux de la pile. » Selon lui, plusieurs commutateurs, équilibreurs de charge et connexions Internet sont la norme lorsqu'une entreprise doit maintenir un certain niveau de service. « En gros, si le système est critique, vous devez disposer d'une configuration active/active afin de pouvoir basculer en temps réel. »

Il a souligné que c'est grâce à la redondance que le site web n'a pas été interrompu lorsque Elon Musk, frustré par la lenteur du transfert d'un centre de données, a commencé à débrancher les serveurs de Twitter. Certaines entreprises testent activement leurs systèmes à redondance multiple. Netflix, par exemple, utilise et met en open source un outil appelé Chaos Monkey qui tue aléatoirement des instances de production afin de s'assurer que les systèmes sont tolérants aux pannes. En fin de compte, comme le prouve Alaska Airlines, « les enjeux sont considérables », conclut M. Roberts.