Was war mit dem Forum los?

[Andre Peschke]

Es gab bei unserem Host einen Stromausfall, ausgelöst durch die Schneefälle in Bayern.

Sollte jetzt wieder laufen, aber sie kämpfen wohl noch den Rest des Tages.

Andre

[Mauswanderer]

Wird Zeit für eine Gamespodcastaußenstelle auf den Bahamas. Natürlich nur der Georedundanz wegen.

[Maestro84]

Da musste der arme Andre aber mächtig strampeln am Fahrrad, um genug Strom zu erzeugen. Mit sowas rechne ich ja eher bei Falko als bei Andre. Aber gut: Schnei Anfang Dezember kann sogar das mächtige Bayern lahmlegen. Da schneit es sonst ja nur alle hundert Jahre - auf bayerische umgerechnet zwanzig Söderle. Solange Jochen nicht mit dem Hundeschlitten Hilfsgüter - Müllermilch, Kaffee, Bier - anrücken muss.

[Desotho]

Wenn man in so unsicheren Ländern wie Bayern hostet

[Kesselflicken]

Wenn man in so unsicheren Ländern wie Bayern hostet

Selbst Schuld! Fiel auf, aber dann hab ich die Fahrt halt mal aus dem Fenster geblickt. Mit Schnee kann ja in Deutschland auch niemand mehr rechnen!

[Desotho]

Also passieren kann halt immer was, ich vermute der Hoster hat auch Georedundanz aber wird ggf. manuell switchen müssen. Und es ist ja nur ein Forum, wo auch nix Schlimmes passiert wenn es mal paar Stunden down ist.

[Heretic]

Der Epic-Launcher scheint auch eingeschneit zu sein, der will gerade auch nicht mehr.

[Andre Peschke]

Es gab nun eine Erklärung unseres Hosters zum Ausfall. Anders als damals vom Kundensupport berichtet, hatte es mit Schneefall wohl doch weniger zu tun (was echt ok ist, wenn der arme Hotline-Dude in den ersten zwei Stunden noch falsche Infos oder Annahmen berichtet):

Wir möchten Ihnen in aller Transparenz die Ereignisse schildern, die zu diesem Vorfall geführt haben.
Ursächlich für den Ausfall waren geplante und auch rechtzeitig kommunizierte Wartungsarbeiten am Stromnetz des Rechenzentrums, von denen wir in keinster Weise erwarten konnten, dass sie Auswirkungen auf unseren Betrieb haben würden.

Die Beschreibung der durchzuführenden Maßnahmen erhielt einen expliziten Hinweis darauf, dass unsere Infrastruktur nicht beeinflusst werden würde.
Entgegen diesen Ankündigungen wurden jedoch unmittelbare Trennungen der Stromzufuhr vorgenommen, die im Fortlauf zu einem Ausfall eines Großteils unserer Server führen mussten. Obwohl wir über redundante Anbindungen und Notstromsysteme verfügen, griffen diese Maßnahmen in diesem unerwarteten Szenario nicht wie erwartet, schließlich wurden diese Handlungen ja geplant unternommen.

Die Stromunterbrechung hatte durch diese Konstellation weitreichende und erhebliche Auswirkungen auf Server- und Datenbankeinstellungen.
Unser Technikteam arbeitete in der Folge unermüdlich rund um die Uhr, um die Server so schnell wie möglich wiederherzustellen.
Trotz aller Anstrengungen hat es bedauerlicherweise in einigen Fällen länger als erwartet gedauert, bis die Server wieder vollständig betriebsbereit waren.

Wir bedauern zutiefst die dadurch entstandenen Unannehmlichkeiten und möchten uns aufrichtig dafür entschuldigen.

Um die Qualität unserer Dienstleistung zu verbessern und Ihre Zufriedenheit sicherzustellen, haben wir bereits Maßnahmen ergriffen:
• Tiefgehende Analyse und enge Kommunikation mit dem Rechenzentrumsbetreiber für alle zukünftigen Wartungsmaßnahmen
• Verfeinerung und Erweiterung unseres Redundanzkonzeptes
• Verifizierung und Optimierung unserer Notfallpläne
• Verbesserung interner und externer Kommunikationsmaßnahmen um zeitnaher informieren zu können

[Lurtz]

Obwohl wir über redundante Anbindungen und Notstromsysteme verfügen, griffen diese Maßnahmen in diesem unerwarteten Szenario nicht wie erwartet, schließlich wurden diese Handlungen ja geplant unternommen.

Hm...

[Teddybär]

Das war auch mein Gedanke, Lurtz.

[HerrReineke]

Dito. Aber man kann es ja mal versuchen

[Vinter]

Gut, dann bin nicht nur ich darüber gestolpert

[Desotho]

Ich fand die Stelle auch interessant. Aber am Ende: Shit happens und die Welt überlebt auch sehr gut mal paar Stunden ohne das Forum.

[Rick Wertz]

Ich telefoniere schon mit meiner Bank, um Anteilig eine Rückerstattung für die Ausfallzeit zu erhalten. Was eine Klage für Wiedergutmachung des erlittenen Schaden betrifft (Schmerzensgeld & entgangener Gewinn durch nicht erhaltene wertvolle Informationen durch Lesen des Forums während der Ausfallzeit) hört ihr von meinem Anwalt.

[Chilisidian]

Obwohl wir über redundante Anbindungen und Notstromsysteme verfügen, griffen diese Maßnahmen in diesem unerwarteten Szenario nicht wie erwartet, schließlich wurden diese Handlungen ja geplant unternommen.

Hm...

Ein NOTstrom ist halt nur so lange gut, wie es nicht zu einem NOTfall kommt. Konnte ja keiner ahnen, dass plötzlich der Strom weg ist und dann auch noch das dafür gemachte Notstromaggregat nicht anspringt.

[Azralex]

Aus genau solchen Gründen reichen wir selbst unscheinbare Wartungsankündigungen immer transparent an unsere Kunden weiter.

Die armen Schweine die das wieder ausbaden mussten...

[Jon Zen]

Zum Glück gibt's Liveaufnahmen, die zeigen, wie die Wartungsarbeiten so eskalieren konnten:
https://youtu.be/SeeVJg1jmtA?si=_DZhEb74clTeEKzQ

[Guthwulf]

Zum Glück gibt's Liveaufnahmen, die zeigen, wie die Wartungsarbeiten so eskalieren konnten:
https://youtu.be/SeeVJg1jmtA?si=_DZhEb74clTeEKzQ

Der Chef hat noch auf dem Bahnsteig auf den Zug gewartet:
https://www.youtube.com/watch?v=V-Cb9x70gYQ

[GoodLord]

Obwohl wir über redundante Anbindungen und Notstromsysteme verfügen, griffen diese Maßnahmen in diesem unerwarteten Szenario nicht wie erwartet, schließlich wurden diese Handlungen ja geplant unternommen.

Hm...

Ein NOTstrom ist halt nur so lange gut, wie es nicht zu einem NOTfall kommt. Konnte ja keiner ahnen, dass plötzlich der Strom weg ist und dann auch noch das dafür gemachte Notstromaggregat nicht anspringt.

So blöd das im ersten Moment klingt, aber es macht schon Sinn. Aus Sicht des Wartungspersonals muss es natürlich ne Möglichkeit geben die Serverschränke vollständig stromlos zu machen. Salopp formuliert: Wenn du den Notaus drückst (nicht, dass ich hier davon ausgehe, dass jemand den Notaus gedrückt hat) willst du auch nicht, dass es dauert bis das USV leer ist bevor dein Kollegy aufhört zu zucken.

[Jon Zen]

Als Laie, der sich damit überhaupt nicht auskennt, hatte ich gedacht, dass als Notstrom ein Generator dient (mit Diesel/Gas/etc.), der anspringt, sobald es keinen Strom mehr vom Netz gibt?