DIVERA 24/7 - Alle Status-Hinweise

Es konnte um 11:54 Uhr ein Update eingespielt werden, dass die vollständige Funktionsfähigkeit des Alarmservers + KatSys wiederherstellt. Wir entschuldigen uns für die entstandenen Probleme.

Um 11:37 Uhr wurde die IT darüber informiert, dass unerwartet teilweise "Alle" statt eine adressierte Gruppe über den Alarmserver alarmiert wurden. Ebenfalls erfolgten teilweise keine korrekten Auswertungen gemäß der konfigurierten Vorlage. Das Problem hing mit einer Datenbank-Migration um 10:05 Uhr zusammen, wodurch die Auswertung von RICs durch den Alarmserver fehlschlug.

Am 08.04. gegen 11:10 Uhr wurde die Änderung von uns zurückgenommen, sodass jetzt alle Einsätze wieder wie erwartet übertragen werden.
Hintergrund war, dass wenn keine Einsatznummer angegeben wurde, die interne Alarm-ID von uns übertragen wird. Diese wurde durch einen Fehler aber nicht mehr im richtigen Format an RescueTablet übermittelt.

Am 05.04. haben wir ein Update durchgeführt, das bei der Übertragung zu RescueTablet als Einsatznummer auch die in DIVERA 24/7 hinterlegte Einsatznummer als Einsatznummer in RescueTablet übertragen wird. Das hatte ungeplanter Weise zur Folge, dass wenn keine Einsatznummer hinterlegt war, die Übertragung zu RescueTablet fehlschlug.

Das Dashboard (SPA) hat ein Update erhalten, sodass bei abgebrochener Live-Aktualisierung die Auswirkungen für den Nutzer noch geringer sind. Zusätzlich wird gerade das Update 1.1.2 der Monitor-App ausgerollt, um das regelmäßige Neuladen des Bildschirms auf ca. 5min zu reduzieren.

Das Dashboard (SPA) hat ein Update erhalten, sodass bei abgebrochener Live-Aktualisierung die Auswirkungen für den Nutzer noch geringer sind. Zusätzlich wird gerade das Update 1.1.2 der Monitor-App ausgerollt, um das regelmäßige Neuladen des Bildschirms auf ca. 5min zu reduzieren.

Wir haben die Ursache eingegrenzt und seit ca. 11 Uhr läuft der Websocket stabil. Für weitere Diagnosen um die konkrete Ursache zu finden, werden wir bewusst die Verbindung zeitweise erneut kurzzeitig unterbrechen.

Die Monitor-App lädt fälschlicherweise die Seite regelmäßig neu, obwohl die Verbindung sofort wieder aufgebaut wurde. Wir bereiten zeitnah ein Update vor, um dieses Fehlverhalten zu beheben.

Unserer Untersuchung zu Folge, hat dies keinen merkbaren Einfluss auf die Live-Aktualisierung der Monitore. Bei Abbruch der Verbindung wird sie innerhalb von 1s wieder neu aufgebaut. Wir arbeiten an der Behebung.

Unser Monitoring meldet keine Fehler beim Upload von Anhängen mehr. Das Öffnen von Dateianhängen war dauerhaft fehlerfrei.

Unsere Logs melden, dass das Hinzufügen von neuen Anhängen zu Alarmierungen, Mitteilungen und Terminen aktuell gestört ist. Der Zugriff auf die Dateien ist weiterhin möglich.

Wir arbeiten daran, dass das Hinzufügen von Anhängen wieder ermöglicht wird. Konfigurationen des hochverfügbaren Storages müssen dazu angepasst werden, um den Speicher zu erweitern.

Die Beeinträchtigungen sind vollständig behoben und fanden zwischen 09:06 Uhr und 09:32 Uhr statt. Seit 09:32 Uhr laufen alle Schnittstellen wieder stabil, ebenfalls werden wieder die aktuellsten RICs im Alarmserver verwendet.

Unser Provider hat uns bestätigt, dass es sich um einen Ausfall des Netzwerk-Kopplungssystems handelte, welches alle 3 Redundanzen betraf.

Die Probleme im Netzwerk der Schnittstellen-Server sind behoben, wir monitoren und testen nun die Services.

Ersten Untersuchungen zu Folge besteht die Störung seit 09:06 Uhr und wurde durch unseren Provider verursacht.

Die Schnittstellen POID, KatSys + ERIC-Pager sind aktuell ohne Funktion.
Zusätzlich werden Änderungen an RICs, Alarmvorlagen u.ä. nicht mehr auf die Alarmserver synchronisiert und somit der Datenbank-Zustand von 09:06 Uhr für E-Mail Auswertungen verwendet.

Wir haben bereits unseren Provider kontaktiert.