Liebe Kundinnen und Kunden,
am 20. Mai 2025 kam es zwischen 09:20 Uhr und 12:34 Uhr zu einer erheblichen Einschränkung unserer Systeme. In dieser Zeit waren die Dienste in vielen Fällen gar nicht erreichbar, was die schwerwiegendste Beeinträchtigung bei Stackfield seit über 6 Jahren darstellte.
Was ist passiert?
Der Grund dafür lag in Problemen mit den Datenbanken. Zur Optimierung von Datenzugriffen setzen Datenbanken auf sogenannte Indizes, die manuell angelegt und gepflegt werden müssen. Diese Indizes dienen dazu, Abfragen schnell und effizient auszuführen. Bei besonders großen Datenmengen kann es jedoch in Ausnahmefällen zu Anomalien kommen.
In diesem Fall führten fehlerhafte Interpretationen von Ausführungsplänen sowie unzureichende Indizes dazu, dass Datenbankabfragen plötzlich nicht mehr in Millisekunden, sondern in mehreren Sekunden verarbeitet wurden. Dieser Performanceverlust hatte einen Kaskadeneffekt zur Folge, der letztlich zur Überlastung unserer Systeme führte.
Trotz redundanter Systeme, die eigentlich für Ausfallsicherheit sorgen, breitete sich das Problem aufgrund der Spiegelung und somit identischer Konfigurationen aller Instanzen über alle Systeme hinweg aus.
Nachdem die Ursache festgestellt wurde, ließ sich das Problem in kurzer Zeit beheben.
Wir möchten an dieser Stelle ausdrücklich betonen, dass
zu keinem Zeitpunkt eine Gefahr für die Integrität oder Sicherheit Ihrer Daten bestand. Alle Informationen waren und sind vollständig erhalten.
Unsere nächsten Schritte:
Wir arbeiten aktuell an der Optimierung unseres Monitorings, um Performance-Anomalien dieser Art künftig noch früher und präziser erkennen zu können. Dieses neue Überwachungsverfahren wird im Laufe dieser Woche vollständig implementiert sein.
Auch wenn solche Vorfälle sehr selten sind, nehmen wir das Thema intern sehr ernst und entschuldigen uns aufrichtig für die damit verbundenen Unannehmlichkeiten.
Vielen Dank für Ihr Verständnis und Vertrauen.
Cristian Mudure
CEO - Stackfield
PS: Den aktuellen Status unserer Systeme können Sie jederzeit hier einsehen:
https://status.stackfield.com