Problems with power supply - Probleme mit der Stromversorgung
Incident Report for plusserver
Resolved
The relocation of the IT systems from the Strasbourg data center to the plusserver data center in Cologne and the commissioning of the relocated IT systems has been officially completed. All affected customers have been informed via our customer portal.
If you receive error messages, please open the relevant tickets via the customer portal so that we can provide you with targeted support.

--

Der Umzug der IT-Systeme aus dem Datacenter Strassburg in das plusserver Datacenter Köln sowie die Inbetriebnahme der umgezogenen IT-Systeme ist offiziell abgeschlossen. Alle betroffenen Kunden wurden über unser Kundenportal informiert.
Sollten Sie Fehlermeldungen erhalten, bitten wir Sie über das Kundenportal entsprechende Tickets zu öffnen, so dass wir Sie gezielt unterstützen können.
Posted Mar 26, 2024 - 15:31 CET
Update
Wir können Ihnen heute mitteilen, dass wir die Phase Rack & Stack abgeschlossen haben. Sämtliche Server aus Straßburg wurden in unser Datacenter in Köln integriert.

95% der aus Straßburg umgezogenen IT-Systeme sind bereits wieder im Betrieb. Damit dürfen wir Ihnen mitteilen, dass es uns gelingen wird, sämtliche umgezogenen Systeme im Laufe des heutigen Abends wieder in Betrieb zu nehmen. Die Information dazu erhalten Sie wie gehabt über das Kundenportal.

Sollten Sie Fehlermeldungen erhalten, bitten wir Sie über das Kundenportal entsprechende Tickets zu öffnen, so dass wir Sie gezielt unterstützen können.

Wir bedanken uns an dieser Stelle für Ihre Geduld und die vielen positiven Rückmeldungen zum laufenden Prozess.

--

We are pleased to inform you today that we have completed the Rack & Stack phase. All servers from Strasbourg have been integrated into our data center in Cologne.

95% of the IT systems moved from Strasbourg are already back in operation. We are therefore pleased to inform you that we will be able to bring all of the relocated systems back into operation this evening. As usual, you will receive information about this via the customer portal.

If you receive error messages, please open the relevant tickets via the customer portal so that we can provide you with targeted support.

We would like to take this opportunity to thank you for your patience and the many positive responses to the ongoing process.
Posted Mar 25, 2024 - 17:06 CET
Update
Unsere Teams sind kurz davor einen weiteren Meilenstein zu erreichen: In der nächsten Stunde wird die pluscloud VMware Region (FR-1) wieder live sein. Betroffene Kunden dieser shared Umgebung werden über das Kundenportal asap informiert. Ebenso stehen die ersten Private Cloud-Umgebungen wieder zur Verfügung. Auch hier wurden bereits die Kunden informiert.

Aktuell gehen wir davon aus, dass wir mit sämtlichen Systemen bis Mittwoch EOB wieder online sind. Sobald Ihr System online ist, teilen wir Ihnen dies über das Kundenportal mit.

--

Our teams are about to reach another milestone: In the next hour, the pluscloud VMware region (FR-1) will be live again. Affected customers of this shared environment will be informed asap via the customer portal. The first private cloud environments are also available again. Here, too, customers have already been informed.

We currently assume that we will be back online with all systems by Wednesday EOB. As soon as your system is online, we will let you know via the customer portal.
Posted Mar 24, 2024 - 18:20 CET
Update
Unsere Teams arbeiten konsequent an den gestern kommunizierten Maßnahmen. Aus Gründen der Transparenz wollen wir Ihnen Stand heute mitteilen, dass trotz sämtlicher Bemühungen die Inbetriebnahme der Systeme einige Tage in Anspruch nehmen kann. Die Gründe liegen hierfür primär in der Komplexität der individuellen Umgebungen.

Wir halten Sie selbstverständlich auf dem Laufenden, möchten Ihnen dennoch diesen Einblick für Ihre weitere Planung und interne Kommunikation geben.

Eine weitere Kommunikation planen wir für den frühen Abend - bei positiven Entwicklungen auch früher.

Sobald Ihr individuelles System verfügbar ist, erfahren Sie dies über das Kundenportal.

--

Our teams are working consistently on the measures communicated yesterday. For the sake of transparency, we would like to inform you that, despite all our efforts, it may take a few days for the systems to go live. This is primarily due to the complexity of the individual environments.

We will of course keep you up to date, but would still like to give you this insight for your further planning and internal communication.

We are planning further communication for the early evening - earlier if there are positive developments.

You will be informed via the customer portal as soon as your individual system is available.
Posted Mar 24, 2024 - 11:48 CET
Update
The last lorries have now arrived at the plusserver data centre in Cologne and are currently being unloaded. Our shift teams are continuing to work flat out to integrate all systems into the data centre, re-establish connectivity and then activate the systems.

We are making good progress in replicating and integrating the basic infrastructure from Strasbourg in our data centre in Cologne. At the same time, we are activating customer after customer as described.

The complexity is very high and it is certainly understandable that many individual components (we are talking about thousands here) have to be reassembled. All this takes time and concentration. Please understand and be patient - you can be sure that we are working flat out to activate your systems.

--

Die letzten LKWs sind nun am plusserver Datacenter in Köln angekommen und werden gerade ausgeladen. Unsere Teams im Schichtbetrieb arbeiten weiter mit Hochdruck daran, sämtliche Systeme in das Rechenzentrum zu integrieren, die Konnektivität wieder herzustellen, um dann die Systeme zu aktivieren.

Wir machen gute Fortschritte die Basisinfrastruktur aus Straßburg in unserem Rechenzentrum in Köln nachzubilden und zu integrieren. Parallel nehmen wir wie beschrieben Kunde für Kunde in die Aktivierung.

Die Komplexität ist sehr hoch und es ist sicherlich nachvollziehbar, dass hier sehr viele EInzelkomponenten (wir sprechen hier von Tausenden) wieder zusammengesetzt werden müssen. All dies kostet Zeit und höchste Konzentration. Bitte haben Sie Verständnis und Geduld - Sie können sich sicher sein, dass wir mit Hochdruck an der Aktivierung Ihrer Systeme arbeiten.
Posted Mar 23, 2024 - 20:02 CET
Update
Weitere LKWs sind bereits in unserem plusserver Datacenter Köln eingetroffen und werden ausgeladen. Unser Team hat im Schichtbetrieb die Arbeit aufgenommen, um sämtliche Systeme wieder in den Betrieb zu nehmen.

Wir bedanken uns an dieser Stelle bei unseren Kunden und Partnern für das zahlreiche Verständnis, welches uns in der Kunden-Hotline entgegengebracht wurde.

Was haben bereits erreicht:
- Wir sind aktuell im Rack & Stack Modus
- Erste Kundensysteme sind bereits wieder live und stehen für den internen Kundenzugriff zur Verfügung.
- Wie angekündigt arbeiten wir mit Hochdruck an der Inbetriebnahme aller Kundensysteme. Sobald entsprechende Systeme übergeben werden können, informieren wir proaktiv über das Kundenportal.
- Unser Kundenportal steht wie gewohnt zur Verfügung.

Jedes System wird mit maximaler Sorgfalt in Betrieb genommen, insbesondere unter Einhalt der Sicherheitsanforderung unseres Datacenters.

Natürlich ist uns bewusst, dass Sie wissen möchten, wann Sie mit der Inbetriebnahme rechnen können. Aufgrund dieser Ausnahmesituation und der hohen Sicherheitsanforderungen, welchen wir verpflichtet sind, ist es uns aktuell nicht möglich individuelle Zeitangaben anzugeben. Im Moment gilt der volle Fokus unserer Mitarbeitenden der Inbetriebnahme der IT-Services.

Sobald wir einen erneuten Status haben, erhalten Sie über diese Seite ein zügiges Update.

--

More trucks have already arrived in our plusserver Datacenter in Cologne and are being unloaded. Our team has started working in shifts to get all systems up and running again.

We would like to take this opportunity to thank our customers and partners for all the understanding they have shown us on the customer hotline.

What we have already achieved:
- We are currently in rack & stack mode
- The first customer systems are already live again and are available for internal customer access.
- As announced, we are working flat out to get all customer systems up and running. As soon as the relevant systems can be handed over, we will provide proactive information via the customer portal.
- Our customer portal is available as usual.

Each system will be put into operation with the utmost care, in particular in compliance with the security requirements of our data center.

Of course, we are aware that you would like to know when you can expect the system to go live. Due to this exceptional situation and the high security requirements to which we are committed, it is currently not possible for us to provide individual timescales. At the moment, our employees are fully focused on getting the IT services up and running.

As soon as we have a new status, you will receive a prompt update via this page.
Posted Mar 23, 2024 - 11:29 CET
Update
We can provide the following status at this time:

1. the relocation of the systems from Strasbourg to Cologne is in full swing

2. the first systems are just arriving at the plusserver data center in Cologne

3. our teams are ready and will soon start with the installation, cabling and commissioning.

The availability of individual systems cannot currently be predicted. Affected customers will be actively informed by us once their systems have been commissioned.

--

Wir können zum jetzigen Zeitpunkt folgenden Status übermitteln:

1. Der Umzug der Systeme von Straßburg nach Köln ist im vollen Gange

2. Die ersten Systeme erreichen gerade das Kölner plusserver Rechenzentrum

3. Unsere Teams stehen 24/7 bereit und beginnen in Kürze mit Aufbau, Verkabelung sowie Inbetriebnahme.

Die Verfügbarkeiten von individuellen Systemen ist aktuell nicht konkret vorhersagbar. Betroffene Kunden werden nach der Inbetriebnahme ihrer Systeme aktiv von uns informiert.
Posted Mar 22, 2024 - 19:58 CET
Update
We received the following information about the current status of the data center in Strasbourg from our data center provider:

"On the morning of March 21, one of GoDaddy's datacenters experienced a small fire in a battery-backup room. The fire was quickly contained, everyone is safe and damage is limited. To keep everyone safe and avoid additional damage, power was cut to a portion of servers, including plusserver. The GoDaddy team is working to get services restored as quickly as possible within the limits of local authorities."

For this reason, and in order to be able to go live again as quickly as possible and regardless of status feedback from the data center operator, we at plusserver have decided to move all servers to our own data center in Cologne.

We are continuously planning the reconstruction and commissioning with our teams in 24/7 mode in Cologne.

The availability of individual systems is currently unpredictable.

Affected customers will be actively informed by us after the commissioning of their systems.

--

Über unseren Rechenzentrumsprovider haben wir folgende Information zum aktuellen Status des Datacenters in Straßburg erhalten:

"On the morning of March 21, one of GoDaddy's datacenters experienced a small fire in a battery-backup room. The fire was quickly contained, everyone is safe and damage is limited. To keep everyone safe and avoid additional damage, power was cut to a portion of servers, including plusserver. The GoDaddy team is working to get services restored as quickly as possible within the limits of local authorities."

Aus diesem Grunde und um so schnell wie möglich und unabhängig von Statusrückmeldungen des Rechenzentrumsbetreiber den Betrieb wieder live stellen zu können, haben wir seitens plusserver entschieden, sämtliche Server in unser eigenes Datacenter nach Köln umzuziehen.

Wir planen den Wiederaufbau und die Inbetriebnahme mit unseren Teams im 24/7 Modus kontinuierlich in Köln.

Die Verfügbarkeiten von individuellen Systemen ist aktuell nicht konkret vorhersagbar.

Betroffene Kunden werden nach der Inbetriebnahme ihrer Systeme aktiv von uns informiert.
Posted Mar 22, 2024 - 14:51 CET
Update
Our data center operator of the data center in Strasbourg confirmed that there are currently problems in the battery room. For safety reasons, the power has been switched off in parts of the data center.

Our employees are of course already on site to ensure that the systems are restarted as soon as access to the data center and power are available again.

More precise information cannot be reliably provided at this time. We are deliberately refraining from speculation.

As soon as we receive new information from the data center operator, we will publish this information again on the status page.

--

Unser Rechenzentrumsbetreiber des Datacenters in Straßburg bestätigte, dass es aktuell Probleme im Batterieraum gibt. Zur Sicherheit wurde der Strom in Teilen des Rechenzentrums abgeschalten.

Unsere Mitarbeitenden sind selbstverständlich bereits vor Ort, um einen kurzfristigen Wiederanlauf der Systeme zu gewährleisten, sobald Zugang zum Rechenzentrum und Strom wieder verfügbar sind.

Genauere Angaben sind zum jetzigen Zeitpunkt nicht zuverlässig möglich. Von Spekulationen nehmen wir bewusst Abstand.

Sobald uns durch den Rechenzentrumsbetreiber neue Informationen vermittelt werden, werden wir diese Informationen auf der Statusseite erneut veröffentlichen.
Posted Mar 22, 2024 - 07:47 CET
Update
Due to current problems with the power supply, we are experiencing outages at the data center in Strasbourg. The data center operator and our teams are in close contact and are working on troubleshooting.

As soon as we receive information from the data center operator, we will inform you again on this status page.

We regret the inconvenience and apologize for this situation.

--

Aufgrund aktueller Probleme mit der Stromversorgung verzeichnen wir Ausfälle im Datacenter in Straßburg. Der Rechenzentrumsbetreiber sowie unsere Teams befinden sich im engen Austausch und arbeiten an der Entstörung.

Sobald uns Informationen vom Rechenzentrumsbetreiber vorliegen, informieren wir erneut auf dieser Statusseite.

Wir bedauern die Unannehmlichkeiten und entschuldigen uns für diese Situation.
Posted Mar 21, 2024 - 20:50 CET
Update
Unfortunately, we still have no new information to share and therefore cannot provide you with any further details. We are sorry for any inconvenience this may cause you and apologize for this situation.

Our teams are working hard to find a solution and we will inform you as soon as the situation changes or we receive further information.

--

Leider haben wir keine neuen Informationen zu teilen und können Ihnen daher keine weiteren Details bereitstellen. Wir bedauern die Unannehmlichkeiten, die Ihnen dadurch entstehen, und entschuldigen uns für diese Situation.

Unsere Teams setzen alles daran, eine Lösung zu finden, und wir werden Sie umgehend informieren, sobald sich die Lage ändert oder wir weitere Informationen erhalten.
Posted Mar 21, 2024 - 17:17 CET
Identified
Due to current problems with the power supply, we are experiencing failures in the data center in Strasbourg. Our teams are on site to assist the data center operator with the troubleshooting.

We cannot present a precise timetable for recovery at the moment. Preliminary estimates indicate that the failure is expected to last until the evening hours.

For regular updates, please visit our status pages (https://status.plusserver.com/incidents/s6lzkwsc3tbj)
--

Aufgrund aktueller Probleme mit der Stromversorgung verzeichnen wir Ausfälle im Datacenter in Straßburg. Unsere Teams sind vor Ort und unterstützen den Rechenzentrumsbetreiber bei der Entstörung.

Einen genauen zeitlichen Rahmen für die Wiederherstellung können wir zum jetzigen Zeitpunkt nicht abbilden. Erste Einschätzungen ergaben, dass der Ausfall sich voraussichtlich bis in die Abendstunden ziehen wird.

Für ein stetiges Update bitten wir Sie, unsere Statusseiten (https://status.plusserver.com/incidents/s6lzkwsc3tbj) zu besuchen.
Posted Mar 21, 2024 - 13:37 CET
Update
We are continuing to investigate this issue.
Posted Mar 21, 2024 - 12:31 CET
Update
Dear customers,

We would like to inform you about the current status of the technical issue affecting some of our services. Our team is working tirelessly to identify and resolve the issue.

However, we do not have any new information at this time. We assure you that resolving this issue is our top priority. We will continue to keep you regularly informed of any developments.

--

Sehr geehrte Kunden,

wir möchten Sie über den aktuellen Stand in Bezug auf die technische Störung informieren, die einige unserer Services beeinträchtigt. Unser Team arbeitet unermüdlich daran, das Problem zu identifizieren und zu beheben.

Zum gegenwärtigen Zeitpunkt liegen uns jedoch noch keine neuen Informationen vor. Wir versichern Ihnen, dass die Behebung dieser Störung unsere oberste Priorität hat. Wir werden Sie weiterhin regelmäßig über jegliche Entwicklungen auf dem Laufenden halten.
Posted Mar 21, 2024 - 12:10 CET
Investigating
Dear customers,

We would like to inform you that there is currently a partial network disruption. Some areas of our network are currently affected.

We are working at full speed to rectify the fault as quickly as possible and ask for your understanding that there may be restrictions in the use of our network in the meantime.

We will keep you informed about the progress of the repair work and hope that the network will soon be fully available again.

Thank you for your patience.

Yours sincerely
--
Sehr geehrte Kunden,

wir möchten Sie darüber informieren, dass es im Moment zu einer partiellen Netzwerkstörung gekommen ist. Betroffen sind derzeit einige Bereiche unseres Netzwerks.

Wir arbeiten mit Hochdruck daran, die Störung schnellstmöglich zu beheben und bitten um Ihr Verständnis, dass es in der Zwischenzeit zu Einschränkungen in der Nutzung unseres Netzwerks kommen kann.

Wir werden Sie über den Fortschritt der Reparaturarbeiten auf dem Laufenden halten und hoffen, dass das Netzwerk bald wieder vollständig zur Verfügung stehen wird.

Vielen Dank für Ihre Geduld.

Mit freundlichen Grüßen
Posted Mar 21, 2024 - 10:58 CET
This incident affected: SXB DataDock (inactive) and Services (Network, Power).