Dear customers,
Due to a continuously increasing demand for storage resources (in the pluscloud open region prod1 [DE-WEST-1] and plusserver Kubernetes Engine region prod1 [DE-WEST-1]), we see the expansion of our Ceph capacity as a necessary measure. This expansion is also a reaction to the recent impairments that have occurred. This expansion is also a reaction to the recent disruptions.
As part of this maintenance measure, additional hard disks will be integrated into the existing Ceph cluster in order to increase the total available capacity.
In preliminary tests, we successfully integrated new hard disks and additional hosts into the cluster. These measures were stable and without incident.
For this maintenance, we use an adapted procedure based on current best practices and experience from previous incidents.
In order to minimize the impact on the system load, we will carry out the expansion in smaller, controlled batches. This cautious approach will require an extended maintenance window, but will allow for significantly reduced data movement during the rebalancing process.
Date: Monday, July 7 - Start 10:00 a.m. to - End approx. Friday, July 11, 2025, 5:00 p.m. (CEST)
Reference ticket: PCO-1998
Impact: Once the new hard disks have been installed, a rebalancing process automatically begins in the cluster. Placement groups (PGs) are reorganized and distributed evenly across all available storage devices - including the newly added hard disks. During this process, there may be an increased load on the storage system, which may have a temporary effect on performance. However, data availability is guaranteed at all times.
We thank you for your understanding and patience while we carry out this important measure to ensure the future performance and stability of our storage system.
If you have any further questions about this process, please do not hesitate to contact us via the channels known to you.
Yours sincerely
--
Sehr geehrte Kunden,
aufgrund eines kontinuierlich steigenden Bedarfs an Speicherressourcen (in der pluscloud open Region prod1 [DE-WEST-1] sowie plusserver Kubernetes Engine Region prod1 [DE-WEST-1]) sehen wir die Erweiterung unserer Ceph-Kapazität als notwendige Maßnahme an. Diese Erweiterung ist auch eine Reaktion auf die jüngst aufgetretenen Beeinträchtigungen.
Im Rahmen dieser Wartungsmaßnahme werden zusätzliche Festplatten in das bestehende Ceph-Cluster integriert, um die verfügbare Gesamtkapazität zu erhöhen.
In vorab durchgeführten Tests haben wir erfolgreich neue Festplatten und zusätzliche Hosts in den Cluster eingebunden. Diese Maßnahmen verliefen stabil und ohne Zwischenfälle.
Für diese Wartung verwenden wir ein angepasstes Verfahren, das sich an aktuellen Best Practices orientiert und auf den Erfahrungen aus vorherigen Zwischenfällen basiert.
Um die Auswirkungen auf die Systemlast zu minimieren, werden wir die Erweiterung in kleineren, kontrollierten Chargen durchführen. Dieses vorsichtige Vorgehen wird ein verlängertes Wartungszeitfenster erfordern, ermöglicht jedoch eine deutlich reduzierte Datenbewegung während des Rebalancing-Prozesses.
Datum: Montag, dem 7. Juli - Start 10:00 Uhr bis - Ende circa Freitag, dem 11. Juli 2025, 17:00 Uhr (MESZ)
Referenz-Ticket: PCO-1998
Auswirkungen: Nach dem Einbau der neuen Festplatten beginnt automatisch ein sogenannter Rebalancing-Prozess im Cluster. Dabei werden Platzierungsgruppen (Placement Groups, PGs) reorganisiert und gleichmäßig auf alle verfügbaren Speichergeräte verteilt – einschließlich der neu hinzugefügten Festplatten. Während dieses Vorgangs kann es zu einer erhöhten Last im Speichersystem kommen, was sich unter Umständen temporär auf die Performance auswirken kann. Die Datenverfügbarkeit bleibt jedoch durchgehend gewährleistet.
Wir danken für Ihr Verständnis und Ihre Geduld während der Durchführung dieser wichtigen Maßnahme zur Sicherstellung der zukünftigen Leistungsfähigkeit und Stabilität unseres Speichersystems.
Haben Sie weitere Fragen zu diesem Vorgang, so stehen wir Ihnen über die Ihnen bekannten Kanäle zur Verfügung.
Mit freundlichen Grüßen
Posted Jul 04, 2025 - 13:38 CEST