Dix-sept ingénieurs alertés en quinze secondes pour SAMA Consulting
SAMA Consulting maintient les systèmes Infor ERP d’industriels de l’aéronautique, de l’automobile et des équipements lourds. Quand une ligne de production s’arrête, chaque minute coûte des millions à son client, et la réparation commence par le bon ingénieur qui se réveille. Joe alerte désormais les 17 en même temps, sur WhatsApp, par appel vocal et par email, en moins de 15 secondes, à toute heure.
L’entreprise, en bref.
SAMA Consulting, basé à San Jose, fait une seule chose: l’ERP Infor pour l’industrie lourde. Implémentations, intégrations et support managé pour des industriels de l’aéronautique, de l’automobile, de la construction et des équipements lourds, les systèmes qui font tourner les lignes de production de leurs clients.
Un support comme celui-là n’a pas d’heure de fermeture. SAMA garde des ingénieurs éveillés sur tous les fuseaux horaires pour que quelqu’un soit toujours de garde, parce que les systèmes qu’ils surveillent ne tombent pas poliment en panne entre 9h et 17h.
Ce qu’ils avaient en face.
Quand un incident touche une ligne de production surveillée, les deux minutes suivantes décident de tout. Une ligne à l’arrêt coûte des millions au client, et le chrono de la réparation ne démarre que quand un ingénieur travaille activement sur le problème. La chaîne d’alerte était le maillon faible: un message à une personne peut tomber sur un téléphone en silencieux, un groupe peut rester non lu, un email peut attendre le matin. Chaque canal seul, et chaque personne seule, est un point de défaillance qu’on découvre pendant l’incident.
Des minutes facturées en millions
Une ligne arrêtée brûle de l’argent jusqu’à ce que quelqu’un de compétent travaille dessus. Le délai entre la détection et l’engagement d’un ingénieur était la seule partie de la réponse que SAMA ne contrôlait pas entièrement.
Un canal seul est un point de défaillance unique
Un téléphone en silencieux, une panne WhatsApp, un filtre email: chacun pouvait absorber l’alerte sans bruit. Le mode de défaillance était invisible jusqu’au moment exact où il devenait catastrophique.
Les relais humains ne tiennent pas à 3h du matin
Réveiller l’équipe à la main, c’est une personne qui appelle dix-sept numéros, un par un, sur plusieurs fuseaux. Cette personne devient le goulot d’une réponse qui se mesure en secondes.
Le travail, en moins pour eux.
D’habitude, Joe répond aux conversations que les clients démarrent. SAMA l’a embauché pour le travail inverse: en démarrer une, partout à la fois. Dès qu’un incident est détecté, Joe déclenche messages WhatsApp, appels vocaux et emails vers les 17 personnes de la liste d’escalade simultanément, en mélangeant les canaux pour qu’aucune panne, aucun téléphone en silencieux, aucune boîte pleine ne puisse étouffer l’alarme. Un jour normal, le système ne dit rien du tout.
Trois canaux par personne, en même temps
Chaque ingénieur de la liste reçoit un message WhatsApp, un appel vocal et un email au même instant, 51 contacts simultanés par incident. Un canal tombe, deux sonnent encore.
Moins de quinze secondes, jour et nuit
De l’incident détecté aux premiers téléphones qui s’allument: moins de 15 secondes, à 15h comme à 3h du matin. L’équipe est répartie sur plusieurs fuseaux, donc parmi les dix-sept, quelqu’un d’éveillé répond toujours.
Silencieux jusqu’à ce que ça compte
L’objectif est zéro notification. Joe n’envoie rien un jour normal, donc quand il sonne, personne n’a appris à l’ignorer. Une alerte de Joe veut dire une ligne à l’arrêt, maintenant.
Une installation, pas un projet.
Branché le flux d’incidents sur Joe
Les systèmes de supervision qui surveillent les lignes de production transmettent désormais chaque incident détecté directement à Joe par API, avec le contexte dont un ingénieur a besoin pour commencer à travailler.
Écrit la liste d’escalade une seule fois
Dix-sept personnes, leurs numéros, leurs adresses, leurs fuseaux, au même endroit. Une seule liste pilote les trois canaux: la tenir à jour, c’est une modification, pas trois.
Mélangé les canaux volontairement
WhatsApp, voix et email partent ensemble, pas en séquence. Le système part du principe que n’importe quel canal peut tomber au pire moment, et fait en sorte que cette panne ne coûte rien.
Une liste d’escalade, trois canaux, une règle: le silence tant qu’une ligne tourne.
Ta version de cette histoire commence cet après-midi.
Recrute Joe. La première conversation reçoit sa réponse ce soir.
400 crédits offerts pendant 7 jours pour décider s’il garde le job.