HOSTBLOGGER.de

Nicht, dass meine vergangene Woche langweilig gewesen wäre. Offenbar sah Herr Murphy das jedoch anders als ich. Denn er bescherte uns am vergangenen Samstag etwas, was man eigentlich nie erleben möchte.

Unser gesamtes Rechenzentrum ist ja durch mehrere USV-Anlagen sowie ein Diesel-Aggregat abgesichert. Aus Sicherheitsgründen gibt es für einzelne Abschnitte jeweils getrennte USV-Anlagen. Eine dieser USV-Anlagen stellte am vergangenen Samstag aus noch nicht geklärten Gründen bei der permanenten Selbst-Überprüfung eine Fehlfunktion fest. An sich ist das noch nichts "Schlimmes", denn das mehrstufige Sicherheitskonzept unserer Anlagen sieht für genau diesen Fall eine Umschaltung in einen Bypass-Modus vor, welcher zu diesem Zeitpunkt automatisch ausgelöst wurde.

Und genau hier schlug Herr Murphy gnadenlos zu: Es kam zeitgleich zu einem weiteren, internen Defekt an einer Sicherung, wodurch der Bypass-Modus nicht aktiviert werden konnte. Es kam somit zu einer kurzzeitigen Unterbrechung der Stromversorung für etwa 1 Sekunde, bis die dritte Sicherheitsstufe greifen konnte (ein anderer Bypass-Modus, der allerdings nur mit Unterbrechung möglich ist). Somit waren alle Geräte und Server, die von dieser USV-Anlage versorgt werden, für etwa 1 Sekunde stromlos. Betroffen waren unter anderem alle Server, die für unsere Webhosting-Produkte zuständig sind sowie ein Teil unserer Serverhousing- und Rootserver-Server (unsere DSL-Kunden waren hiervon nicht betroffen).

Der Hersteller der Anlage ist bereits bei der Fehlersuche (vor allem bzgl. des ursprünglichen Fehlers), die Anlage läuft zwischenzeitlich wieder einwandfrei (und lief auch zu keinem Zeitpunkt nicht mehr als USV, bei einem reinen Stromausfall hätte die Anlage korrekt gearbeitet). Darüber hinaus suchen wir derzeit nach weiteren Möglichkeiten, derartigen Fällen vorzubeugen.

Wir waren das ganze Wochenende damit beschäftigt, Server wieder "hoch" zu bringen, die entweder nicht korrekt konfiguriert waren, insbesondere Kunden-eigene Server, die kein "Auto-On" nach einem Stromausfall haben, oder bei denen das deaktiviert war, oder Server, bei denen das Betriebssystem z.B. keinen automatischen Datei-Systemcheck macht, oder auf Eingaben beim Laden von SSL-Zertifikaten wartet etc.

Selbstverständlich bleiben alle Arbeiten von uns, die in diesem Rahmen nötig waren (auch Remote Hands) kostenlos. Desweiteren werden wir uns für unsere Server-Kunden eine Entschädigung einfallen lassen, wir werden diesbezüglich im Laufe dieser Woche auf unsere Kunden zukommen.

Ich möchte mich an dieser Stelle persönlich für die entstandenen Unannehmlichkeiten sowie für evtl. bei Euch entstandeneb Arbeitsaufwand entschuldigen.