Ausfall deutscher Dienste

Nachdem unsere Dienste nun wieder online sind, sind einige Schwachstellen in unserer Infrastruktur deutlich zutage getreten. Der plötzliche Stromausfall und der darauf folgende Stromstoß bei der Wiederherstellung der Stromversorgung führten zu Spannungsspitzen in den Netzteilen älterer Server, die von den betroffenen USV-Anlagen nicht mehr vollständig abgefedert werden konnten. Dies führte zu Hardwareausfällen bei einer großen Anzahl von Servern, insbesondere als die Festplatten nach der Wiederherstellung der Stromversorgung gleichzeitig neu starteten. Das Problem betrifft einen Großteil der älteren Host-Systeme; betroffen sind die folgenden: col1-compute-amd-1 bis col1-compute-amd-1003: Diese älteren Modelle verfügten über Netzteile und Controller, die aufgrund ihres Alters anfälliger waren und infolgedessen massive Festplattenausfälle erlitten. col1-compute-amd-1004 bis col1-compute-amd-2005: Diese moderneren Server verfügen über verbesserte Schutzschaltungen und haben den Vorfall unbeschadet überstanden. col1-compute-intel-1 bis col1-compute-intel-25041: Die Intel-Systeme sind mit einer anderen Stromversorgungs- und Stromverteilungsarchitektur ausgestattet, die gegen diese spezifischen Einschaltstromspitzen immun war. Wir entschuldigen uns aufrichtig für die dadurch entstandenen Unannehmlichkeiten. Kunden mit einer aktiven Backup-Option sind von diesem Datenverlust nicht betroffen, da unsere Backups auf externen Systemen gespeichert sind und unversehrt geblieben sind. Gemäß unseren Allgemeinen Geschäftsbedingungen sind Backups für reine Hosting-Systeme standardmäßig nicht enthalten. Da wir insgesamt mehr als 5 PB Speicher verwalten, ist dieser Service kostenintensiv und nicht Teil des Standardpakets. Entsprechende Backup-Optionen können dem Server jederzeit gegen einen Aufpreis von 20 % hinzugefügt werden. Aufgrund des Problems wurden einige Server gelöscht. Jeder Server, der bis morgen um 22:00 Uhr (deutsche Zeit) nicht wieder erscheint, war leider von diesem Datenverlust betroffen, und alle betroffenen Cloud-Server werden im Dashboard nicht mehr angezeigt. Um den Betrieb der Dienste aufrechtzuerhalten, werden alle Kunden auf temporäre Server umgestellt, die dann morgen ersetzt werden. Infolgedessen kommt es zu einer kurzen Ausfallzeit von etwa 2–4 Stunden. Den genauen Zeitpunkt werden wir morgen mindestens 4 Stunden vor Beginn der Migration bekannt geben. Sie können morgen neue Server bestellen und Ihre Daten aus Ihren eigenen Backups wiederherstellen. Ihre bisherigen IP-Adressen bleiben 48 Stunden lang in Ihrem Konto reserviert und können über den Support Ihren neuen Servern zugewiesen werden. Selbstverständlich entstehen Ihnen keine Kosten für die Ausfallzeit, und wir erlassen den betroffenen Kunden alle Server-Betriebskosten für Juli 2026 (dies wird auf Ihrer Rechnung vom 1. August 2026 ausgewiesen). Hinweis: Die neuen Server werden höchstwahrscheinlich auf unseren Intel-Servern wiederhergestellt, da diese von dem Ausfall nicht betroffen sind.

Die meisten Server sind nun wieder vollständig erreichbar. Einige Server waren aufgrund gleichzeitiger Erstellungen vorübergehend nicht erreichbar und haben eine neue IP-Adresse erhalten. Bitte wenden Sie sich an unseren Support, falls Ihnen eine neue IP-Adresse zugewiesen wurde. Alle alten Adressen bleiben noch 48 Stunden lang mit Ihrem Konto verknüpft.

Alle internen Dienste sind nun wieder vollständig verfügbar. Wir arbeiten derzeit daran, die Host-Systeme der Cloud wieder in Betrieb zu nehmen, wobei SLA-Kunden für uns oberste Priorität haben. Dieser Vorgang wird einige Zeit in Anspruch nehmen, da wir die Hardware jedes einzelnen Servers gründlich überprüfen – ein plötzlicher Stromausfall kann zu schwerwiegenden Fehlern führen.

Wir haben soeben die Information erhalten, dass die Stromversorgung nun wiederhergestellt wird; wir behalten alles im Auge, um so schnell wie möglich alles wieder in Betrieb zu nehmen.

Nach einem kleineren Rechtsstreit mit der Stadt wurde uns versichert, dass wir das Gebäude diese Woche wieder betreten könnten und dass die Stromversorgung wiederhergestellt würde.

Leider haben wir von den Behörden noch immer keine offiziellen Informationen zu dem Ausfall erhalten, sodass uns weiterhin die Hände gebunden sind. In Zusammenarbeit mit unserem Internetdienstanbieter OVH ist es uns nun gelungen, unsere Website wieder online zu bringen, aber Bilder werden nicht geladen, und leider können wir aufgrund des Ausfalls auch unseren VPS nicht verwalten.