Il est des jours ou internet ne fonctionne plus correctement... Le 28 février ou aujourd'hui dimanche 26 mars par exemple ! Mais ce blackout nous permet de savourer une des fonctions de base de Google !
Depuis environ 10H00 (heure de paris) ce dimanche matin, Redbus Interhouse Paris, un des maillons de Redbus, sorte d'hébergeur des hébergeurs internet vu sa taille et son reseau, est en panne. Du coup pas mal de sites web français ne répondent plus (nos confrères de WRI par exemple sont touchés). Le problème est d'assez grande envergure puisque de nombreux autres hébergeurs sont directements dépendants de Redbus... Le problème viendrait d'une coupure de courant, tout comme lors de l'incident du mois dernier... Du coup les caricatures pleuvent (alors que Redbus était considéré jusqu'alors comme une des solutions les plus fiables), et l'utilisation du cache de Google lors des recherches est parfois la seule solution pour visualiser un site web !
PS : Zorgloob fonctionne, notre hébergeur étant américain, mais le forum est actuellement indisponible pour des raisons techniques. Nous vous prions de nous en excuser.
Effectivement, WRI est hébergé par SIVIT qui sont chez Redbus.
Voici un message que j'ai reçu de SIVIT ce matin :
Très Cher Client,
Je n'arrive pas à croire que je doit vous faire de nouveau part de cette information.
Redbus vient de connaitre un nouvel incident électrique généralisé, entrainant l'arret brutal et total de la fourniture électrique de tous leurs clients, parmis lesquels Sivit et des dizaines d'autres hébergeurs, qui font confiance à ce site pour l'installation de leur data center.
De ce fait, l'immeuble ayant été totalement éteint, nous nous retrouvons à nouveau avec plus de 1300 serveurs et équipements à redémarrer, ce qui est en cours, tout le staff Sivit ayant répondu présent et s'étant jetté dans la bataille.
Le courant a été coupé vers 10h45, et est revenu vers 12 heures.
Nous n'avons à l'heure actuelle aucune information sur ce nouvel incident, et nous concentrons sur le redémarrage de toutes vos machines.
Nous vous tiendrons bien évidemment informé en temps réel, au fur et à mesure que des informations nous parviendront.
Il devrait embauche des jeunes en CPE pour les faire pedaler et quand ils snt hs ils les virent sans justification :-)
Ecrit par Anonyme
Peut-être que c'est pas Redbus. Chez mon prestataire Ikoula, mon site a disparu seulement 1 heure ! Car les techos Ikoula sont à seulement quelques centaines de mètres !
Je copie :
"Cher client,
Ce matin une panne EDF à toucher tout l'ouest parisien, impactant pendant 48 minutes le Data Center de Redbus InterHouse à Courbevoie. Les équipements constituant votre solution d'hébergement sont situés dans ce bâtiment et, ont été affectés par cette panne.
Les systèmes avancés de gestion de l'électricité (onduleurs, générateurs) de Redbus aurait du prendre le relais. Nous n'avons aucun communiqué quant à savoir pourquoi l'interruption a été aussi longue.
Immédiatement après le retour de l'électricité, tous nos équipements sont remontés. Tout est à cette heure 100% en fonction.
Nous vous tiendrons informés dès que nous aurons plus d'informations.
Cordialement"
De même Caro !
Ecrit par Caro !
Toujours Caro !
Par contre, bien que mon serveur ait redémarrer rapidement, je m'apercois que j'ai perdu 2/3 de visiteurs aujourd'hui ! Sans doute à cause des prestataires pas trop réactifs ! Et hop 20 $ évaporé ! Ah ces liens croisés !
Ecrit par Caro !
A 20 h 25 mn ! 1/4 des 25 sites de liens externes (qui m'envoient 30 % de visites) sont dehors ! Sale journée ! Vais reprendre mon point de croix ce soir !
Caro !
Ecrit par Caro !
Dernier mail récapitulatif de Sivit qui confirme un peu ce que disait Caro :
Très Cher Client,
nous vous recontactons afin de faire un point sur les incidents de ce jour.
- 1er incident électrique Redbus: 10h45->12h00: L'alimentation EDF a lâché, le groupe de secours n'a pas pris le relais. - 2e incident électrique Redbus: 14h30->16h30: Lors du branchement des batteries UPS de secours, le groupe électrogène de secours a tout simplement cessé de fonctionner - 3e incident électrique Redbus: 17h00->18h10: Même incident, durant la tentative de rebranchement des batteries UPS, le groupe électrogènes de secours a cessé de fonctionner
Durant ces interruptions électriques, l'immeuble ayant été totalement éteint, nous nous retrouvons à nouveau avec plus de 1300 serveurs et équipements à redémarrer par 3 fois, ce qui est en cours, tout le staff Sivit ayant répondu présent et s'étant jetté dans la bataille.
A l'heure actuelle l'électricité est devenue stable sur les installations Redbus, alimentées par les groupes électrogènes.
Nous attendons un retour de redbus pour la remise en service de l'arrivée EDF qui aura lieue demain et le diagnostic UPS. En attendant plus aucune intervention électrique n'aura lieue, afin de garder une stabilité électrique.
Nous nous concentrons sur le redémarrage de toutes vos machines. Soyez assurés que SIVIT met tout en oeuvre pour rétablir le service au mieux le plus rapidement possible.
Nous vous tiendrons bien évidemment informé en temps réel, au fur et à mesure que des informations nous parviendront.
Support Ikoula Autres options 20:33 (il y a 2 minutes) ************** English Version at the end **************
Cher client,
Redbus Interhouse, Data Center où sont situés nos équipements dont votre solution d'hébergement a connu aujourdh'ui une crise électrique majeure.
- 10h55 : Une coupure EDF touche tout l'ouest parisien dont le bâtiment de Redbus Interhouse à Courbevoie. Tout le monde est dans le noir. - 10h15 : L'équipe Ikoula d'astreinte sur site est renforcée. Effectif à 100% pour parrer à toute éventualité - 11h54 : L'électricité revient. Tous les équiprements d'Ikoula, dont votre service, remontent immédiatement. Tout est 100% fonctionnel.
Redbus n'a pas encore expliqué le temps anormal de coupure d'une heure.
- 14h32 : 2e coupure électrique générale - 15h16 : L'électricité revient mais, la situation est instable
Conséquences des incidents : - Le bâtiement fonctionne sur deux générateurs (le 3e est apparement cassé) - Les onduleurs sont vides - Le dijoncteur principal (EDF) est cassé, rendant la bascule sur le courant EDF impossible - Une bascule sur le courant EDF engendrera une nouvelle coupure - La situation est extrêment instable
Ikoula a pris la décision de ne pas rallumer ses équipements. Les machines supportent très mal les coupures électriques brutales. Le risque de dommage est élevé. Un disque dur cassé peut signifier la perte de données et des heures pour que vous puissiez le remettre opérationnel à 100%. Nous avons pris le parti de privilégier vos données et votre temps plutôt que de remonter aussi vite que possible pour gagner quelques minutes.
Nous avons eu raison.
- 17h01 : 3e coupure générale - 17h05 : L'électricité revient - 18h00 : Redbus nous informe que l'intervention sur le dijoncteur principal n'aura pas lieu ce soir. La situation est cependant plus stable - 18h30 : Nous rallumons tous nos équipements dont votre solution d'hébergement L'équipe Ikoula est toujours au complet pour vosu aider à remonter vos services à la normal si besoin.
ATTENTION : L'intervention sur le dijoncteur aura lieu demain. Afin de préserver les machines, vos données et votre travail, nous éteindrons tous nos équipements avant celle-ci. Nous vous préviendrons avant bien entendu. D'ici là, nous vous engageons à procéder à toutes les sauvegardes nécessaires.
Nous vous présentons nos excuses pour la gêne occasionnée et vous remercions pour votre confiance. Nous vous tiendrons informé de l'évolution de la situation.
While I can't read French, a picture is worth a thousand words. Thanks for the laugh :)
R
Ecrit par Anonyme
6 ans que je suis basé en Suisse, tant Infomaniak, tant Nexlink, jamais une seule panne, jamais une seule coupure, rien, même pas un problème mineur...
Ah les suisses
Ecrit par Anonyme
Vive la suisse !!!! Moins de pannes informatiques, de la weed pour les bains.... que demander de plus ???
J'vai habiter en Suisse....
Ecrit par Anonyme
eh CoolNiak, t'aurais pas déjà mis les pieds à l'IUT de Lens par hasard ? ;)
"Importantes perturbations sur les sites Internet français dimanche LEMONDE.FR | 27.03.06 | 08h12 ? Mis à jour le 27.03.06 | 09h33 Augmentez la taille du texte Diminuez la taille du texte Imprimez cet article Envoyez cet article par e-mail Recommandez cet article Citez cet article sur votre blog Classez cet article Réagissez à cet article
Une panne de courant électrique a affecté, dimanche 26 mars, le fonctionnement d'un important centre hébergeur Internet en banlieue parisienne, perturbant le fonctionnement d'un grand nombre de sites français.
La société Redbus Interhouse, dont dépendent un nombre considérable de sites en France, a subi des coupures d'alimentation d'énergie dans la journée à son entrepôt de Courbevoie, indique une responsable de la société.
Redbus n'était pas en mesure de préciser l'ampleur de la panne, affirmant juste qu'un nombre "énorme" de sites Internet avaient été perturbés au cours de la journée. La société Redbus Interhouse est en France l'un des leaders des hébergeurs physiques d'hébergeurs de sites Internet, selon plusieurs observateurs du secteur. Il leur fournit des espaces pour installer leur matériel informatique.
PLUSIEURS COUPURES EDF
"C'est un gros hébergeur d'hébergeurs, avec de la clientèle en cascade, et c'est difficile d'apprécier le nombre de clients touchés", explique André Tanti, chargé des problèmes de sécurité auprès du ministère de l'économie, des finances et de l'industrie. L'entrepôt a subi "plusieurs coupures EDF dans la journée", et les "délais de mise en route" des groupes électrogènes ont perturbé les clients, a-t-on précisé à la société. M. Tanti a confirmé que plusieurs coupures de courants avaient eu lieu.
"Nous avons identifié un incident sur un transformateur à Courbevoie vers 10 h 45 dimanche, mais les clients ont été rétablis dans un délai qui va de quelques minutes à moins d'une heure", a déclaré une porte-parole du groupe EDF. "Nous n'avons pas identifié d'autres coupures", a-t-elle ajouté. Des informations techniques devaient être fournies par Redbus lundi matin, selon la société. Avec AFP"
Ecrit par Caro !
Voici ce qui est dit chez NFrance (mon hébergeur) : ################################## Redbus Interhouse, le datacenter qui héberge nos serveurs a subi plusieurs coupures électriques générales d'une grande gravité dans la journée de dimanche 26 Mars 2006.
1ère coupure :
Début de la panne aux alentours de 10h50. Cette première coupure serait liée à un dysfonctionnement du disjoncteur du circuit EDF chez RedBus.
Fin de la coupure aux alentours de 11h30. Les équipements étaient alors alimentés en 220V grace aux onduleurs et à deux groupes électrogènes de secours. Les services NFrance ont pu etre alors relancés peu à peu par nos équipes techniques après toutes les vérifications de disques nécessaires.
2 ème coupure :
Début de la panne aux alentours de 14h30. La totalité du datacenter était alors alimentée depuis la première coupure par 2 groupes lorsque l'un des groupes électrogène a mal fonctionné. Les onduleurs qui n'avaient pas eu le temps de se charger totalement depuis la première coupure n'ont pas pu faire leur travail le temps de la mise en route du troisième groupe de secours.
Fin de la coupure aux alentours de 14h40. Meme si la fourniture en 220V a pu etre rétablie grace au troisième groupe de secours, les onduleurs étant hors circuit, il a été difficile d'obtenir une tension stable. La tension pouvait varier de façon trop importante. Afin de ne pas endommager inutilement le matériel, NFrance a décidé sur les conseils de Redbus de ne pas remettre en ligne les serveurs jusqu'à ce que la fourniture soit assez stable pour les équipements.
3 ème coupure :
Début de la panne aux alentours de 17h00. La coupure serait cette fois liée à la remise en route des onduleurs pour satisfaire une fourniture en 220V stable.
Fin de la coupure aux alentours de 17h05. La fourniture en 220V a pu etre rétablie de manière stable. L'équipe technique NFrance a pu alors relancer peu à peu une partie des serveurs selon les recommandations de RedBus a limiter aux maximum la consommation électrique. Nos techniciens ont relancés la majorité du service WEB mutualisé, les packs revendeurs ainsi que les Giga-Web. Les services mails ainsi que les serveurs dédiés n'ont pas pu etre relancés avant 18h.
A partir de 18h jusqu'à l'heure qu'il est (22H00), les équipes techniques NFrance s'affèrent a remettre en route la totalité des services. Cette remise en route nécessite une vérification de l'intégrité des données présentes sur les disques durs des serveurs.
NFrance vous communiquera plus de détails dans la journée de demain. Nous vous prions de nous excuser pour la gene occasionnée par ces différentes pannes indépendantes de notre volonté. ###################################
"Intervention Redbus 27/03/06 à 20h Boîte de réception
Support Ikoula Autres options 17:10 (il y a 37 minutes) ************** English Version at the end **************
Cher Client,
Redbus operera la maintenance suivante sur le site de Courbevoie :
- Maintenance corrective du Disjoncteur normal TGBT - Reconnexion des UPS sur les générateurs - Passage de la charge Clients sur les UPS
Afin de prévenir tout choc electrique nous vous invitons à eteindre vos machines pour 19h30 impérativement. A 19h45 nous dijoncterons l'ensemble de nos arrivees electriques pour isoler nos équipements du reseau d'énergie de Redbus et eviter des redemérrages et coupures successives.
Les dijoncteurs seront remis en place uniquement quand nous aurons la garantie que le courant sera stable.
Cette démarche a pour but de limiter les chocs éléctriques sur les équipements et protéger les données clients.
Cordialement,
Arnaud Tayac Relation Client"
Caro !
Ecrit par Caro !
de 19h à l'heure où j'écris ces lignes, il n'y a eu aucune nouvelle coupure sur mon site :)
J'ai essayé de vous contacter par email, mais sans succès :
Delivery to the following recipient failed permanently:
mail@zorgloob.com
Technical details of permanent failure: PERM_FAILURE: SMTP Error (state 9): 554 The IP Address of the sender (64.233.166.183) was found in a DNS blacklist database and was therefore refused.
Bref, voici le contenu de mon email :
Bonjour,
Je suis l'auteur de l'image qui illustre votre article :
Suite à l?incident électrique du 26 mars 2006, nous devrions obtenir de Redbus Interhouse l?application des SLA (Service Level Agreement) indiqués à note contrat.
En anticipation et, même si au regard de vos contrats, nous ne sommes redevables d?aucune pénalité, nous avons pris la décision de redistribuer le double de l?intégralité des dédommagements que l?on nous verserait à l?ensemble de nos clients.
Cette somme se traduit par un crédit de deux jours ajouté à toutes les prestations d?hébergement en cours à la date de l?incident. L?ajout sera visible sur votre Espace Client d?ici 15 jours.
En plus de ces reversements, les coûts induits par ces incidents sont importants pour Ikoula (matériel, mobilisation de personnel, image, chiffres, etc?). Cependant, ces coûts exceptionnels ne doivent pas amputer notre investissement dans le développement et le renforcement de services. Il en va de votre sécurité, de votre pérennité, de votre tranquillité.
Nous concevons notre métier de sorte que SLA et dédommagements ne sont jamais censés être utilisés. Ils ne doivent être que des indicateurs d?une réalité de moyens mis en ?uvre.
C?est pourquoi, au regard des derniers évènements, nous avons grandement renforcé les ressources allouées au poste Data Center.
Ils ont contribué :
David Herrgott
Sylvain Briant
Lifetec
Romain Boyer
Cédric Magnin
Cyril Slucki
Mael Le Hir
Alexis Berger
Stéphane Rangaya
Patrick Tacchini
Etienne Deparis
Bertrand Pautrot
mon site refonctionne à l'instant, mais c loin d'être le cas pour tout le monde !
