Hosted Exchange

Wir erhalten Meldungen von Kunden, dass importierte Kalender Einträge eine Stunde in der Zukunft liegen.

Das Problem wird aktuell untersucht.

-----

We receive reports from customers that imported calendar entries are one hour in the future.

The problem is currently being investigated.

Status Update:

• 80% der Daten sind exportiert
• 50% der Daten sind wieder impotiert

Wir gehen davon aus, dass bis Mittag 100% der Daten exportiert sind und bis am Abend 100% der Daten importiert sind.

------*

Status update:

• 80% of the data are exported
• 50% of the data are reimpoted

We assume that 100% of the data will have been exported by midday and 100% of the data will have been imported by the evening.

Status Update:

• Die eingehenden Warteschlangen wurden bis Mittag verarbeitet, alle Mails sind zugestellt.
• Alle betroffenen Mailboxen sind seit 10 Uhr heute morgen wieder verfügbar und erhalten neue E-Mails / können E-Mails versenden.
• Der Export der Daten verläuft gut, wir haben bereits 25% der Daten exportiert und importieren diese umgehend in die Mailboxen

Wir arbeiten weiter kontinuierlich die Daten schnellstmöglich zur Verfügung zu stellen.

-----

Status update:

• The incoming queues were processed by midday and all emails were delivered.
• All affected mailboxes have been available again since 10 a.m. this morning and are receiving new emails/can send emails.
• The export of the data is going well, we have already exported 25% of the data and are importing it into the mailboxes immediately

We continue to work continuously to make the data available as quickly as possible.

Das Reparieren der betroffenen Datenbank ist fehlgeschlagen, deshalb werden wir nun folgendes umsetzen:

• Alle betroffenen Kunden wurden auf eine neue Datenbank verschoben und erhalten leere Mailboxen.
• Alle nicht zugestellten eingehenden Mails werden nun an diese neuen Mailboxen zugestellt, dies dauert aktuell noch an.
• Wir arbeiten mit Hochdruck daran, die Daten aus der Datenbank zu extrahieren und in die neue Datenbank zu importieren. Aufgrund der Datenmengen dauert dies mehrere Tage. Wir arbeiten 24/7 um die Daten schnellstmöglich verfügbar zu machen, die Verarbeitung benötigt aber seine Zeit.

Bitte nutzen Sie das Webmail via https://cas.hostedsolution.ch oder http://hostedsolution.ch , dort haben Sie die neusten Daten verfügbar in Echtzeit.

Wir aktualisieren diesen Incident sobald weitere Informationen zur Verfügung stehen. Bitte sehen Sie von einem Anruf an unsere Hotline ab, damit wir die personellen Ressourcen für das Recovery einsetzen können.

Dieser Artikel wird auch laufend ergänzt: https://docs.serverbase.ch/v1/docs/informationen-zum-teilweisen-ausfall-vom-6-mai-2024

-----

Repairing the affected database failed, so we will now implement the following:

• All affected customers have been moved to a new database and are receiving empty mailboxes.
• All undelivered incoming emails will now be delivered to these new mailboxes, this is currently ongoing.
• We are working hard to extract the data from the database and import it into the new database. Due to the amount of data, this takes several days. We work 24/7 to make the data available as quickly as possible, but processing takes time.

Please use webmail via https://cas.hostedsolution.ch or http://hostedsolution.ch, where you have the latest data available in real time.

We will update this incident as more information becomes available. Please refrain from calling our hotline so that we can use resources for recovery.

Die nächsten Schritte nehmen 6 Stunden in Anspruch, deshalb erfolgt der nächste Status Update um 09:00 Uhr.

Wir arbeiten aktuell mit dem Hersteller Support zusammen um die korrupte Datenbank zu reparieren.

Gleichzeitig werden bereits Daten aus der Datenbank exportiert, sollte die Reparatur nicht erfolgreich sein, können wir Daten über Umwege wieder importieren.

Aufgrund der enormen Datenmengen dauern die Tasks jeweils mehrere Stunden.

Betroffen von diesem Problem sind 10% der Hosted Exchange Kunden, wir arbeiten mit Hochdruck an einer Lösung.

Die Reparatur der Datenbank zeigt leider nicht die gewünschte Wirkung, aktuell werden verschiedene Optionen geprüft.

Wir haben in unseren Docs weitere Informationen zu diesem Incident aufgeschaltet:
https://docs.serverbase.ch/v1/docs/informationen-zum-teilweisen-ausfall-vom-6-mai-2024

Wir sehen, das eine Datenbank im “Dirty Shutdown” Status ist, dies wurde auf alle Server repliziert.

Betroffene Kunden bitten wir aktuell um Geduld, es sind “All hands on deck” und die Reparatur der betroffenen Datenbank schnellstmöglich durchzuführen. Aufgrund der Datenmengen benötigt dies jedoch Zeit, weshalb wir aktuell keinen ETA nennen können.

-------

We see that a database is in “dirty shutdown” status, this has been replicated to all servers.

We are currently asking affected customers to be patient, it is “all hands on deck” and the affected database needs to be repaired as quickly as possible. However, due to the amount of data, this takes time, which is why we cannot currently provide an ETA.