28 maja zaczęły się problemy ze storage DDN, z któego korzysta usługa Manila ZFS. Po próbach przywracania dostępności i odbudowach grup raidowych 1 czerwca wyłączono macierz i wymieniono podzespoły. Macierz zainicjowała się poprawnie i wystartowała bez błędów.
26 stycznia 2023 nastapiła awaria Cepha Nitro podczas prac związanych z przebudową toru zasilania dla poziomu 0 w BST. Po godz. 16:00 udało się naprawić Cepha na tyle, by zaczęły być obsługiwane żądania dostępu do wolumenów.
26 stycznia nadal brak stabilności w działaniu Cepha. Operacje obsługi wolumenów i maszyn wirtualnych są uniemożliwione.
Po godz. 22:00 storage zaczął stabilizowac działanie, jednakże rebuild powoduje duży ruch na klastrze.
10:00 Zaczyna się maintenance. Mogą nastąpić niedostępności poszczególnych API usług Openstacka oraz sieci wewnętrznych i publicznych.
12:30 Upgrade zakończony. Niedostępność sieci publicznych - prace na network nodach.
13:30 Restart compute nodów i maszyn wirtualnych.
16:30 Wszystkie usługi są dostępne
Od wczoraj wieczorem zaobserwowano duże spadki wydajności sieci/storage w strefach Inula. Problem został w pewnym stopniu usunięty. 28 stycznia będziemy pracować nad ulepszeniem wydajności w trakcie okna serwisowego od godz. 18:00.