Numer : PIONIER.20071101-1 Właściciel : PIONIER IP NOC Status : CLOSE Typ : nieplanowane Dotyczy : węzeł Foundry rtr.krakow Nadawca : Tomasz Berner Początek zdarzenia : 2007-11-01 15:30:00 Koniec zdarzenia : 2007-12-05 15:21:00 Bilet otwarty : 2007-11-01 16:22:00 Bilet zamknięty : 2007-12-05 15:24:00 *** Opis problemu: Od godz 15:30 występują problemy na jednym z interfejsów urządzenia Foundry w Krakowie. *** Działanie: 2007-11-14 10:35:00 (0,0) Piotr Goczał Karta została wymieniona. Przeprowadzone zostaną testy sprawdzające poprawność jej działania. *** Przewidywany czas zakończenia: nieznany *** Zakończenie zdarzenia: Przełącznik xmr-krakow działa poprawnie od około 10:10 14.11.2007 po wymianie uszkodzonego modułu nr1 na urządzeniu. W najbliższym możliwym czasie konieczna będzie jednak jeszcze aktualizacja oprogramowania gdyż obecna zawiera błąd związany z RSVP. O planowanej aktualizacji poinformujemy w osobnym tickecie. *** Historia: 2007-11-01 16:22:00 (1,0) Witold Bogacki Awaria powoduje brak łączności do zasobów w Cyfronecie. 2007-11-01 19:57:00 (0,0) Witold Bogacki Przyczyna awarii jest niestabilna praca XMRa w Krakowie. Wystąpiły problemy na obu łączach w kierunku Bielska. Na pozostałych interfejsach mimo poprawnego działania i wyników testów diagnostycznych ruch nie byl obsługiwany poprawnie. Wyłączone zostały interfejsy w kierunku Bielska i XMR został zrestartowany. Po tej operacji przywrócona została łączność z Cyfronetem. 2007-11-01 20:00:00 (0,0) Witold Bogacki Ponownie występują problemy z interfejsami 10GE na obu kartach. Ruch obecnie odbywa się łączem przez Rzeszów. 2007-11-01 20:51:00 (0,0) Witold Bogacki Obie karty 10GE zostały wyłaczone. 2007-11-02 10:54:00 (0,0) Jerzy Grzenda W celach testowych na ADVA w Bielsko-Białej zostały wyłączone interfejsy dla kanałów 1 i 2 do Krakowa. 2007-11-02 11:26:00 (0,0) Jerzy Grzenda Od godz. 10:44 do 11:12 wystąpił brak połączenia do przełącznika XMR oraz sieci miejskiej w Krakowie. 2007-11-02 11:48:00 (0,0) Jerzy Grzenda Przyczyną ostatniego braku połączenia było zawieszenie się przełącznika w Krakowie podczas testów. 2007-11-02 14:14:00 (0,0) Jerzy Grzenda Na potrzeby utworzenia połączeń zapasowych, w Krakowie zostanie uruchomiony przełącznik typu BlackDiamond i podłączony na kanale 1 do Kielc. 2007-11-02 17:52:00 (0,0) Jerzy Grzenda Przełącznik BlackDiamond został podłączony. Obsługuje on ruch znajdujący się dotychczas na porcie 16/15 XMRa. XMR Kraków pracuje nadal i obsługuje ruch do Rzeszowa (przez slot 16) oraz jedną lambdą do Kielc (10Gb przez slot 3). Na porcie 1/4 XMRa w Kielcach, do którego podłączony został BlackDiamond Kraków, obserwujemy już większy ruch (rzędu 115Mbps). 2007-11-05 09:27:00 (0,0) Piotr Goczał Zgodnie z zaleceniem TAC Foundry oprogramowanie XMRa w Krakowie zostanie zaktualizowane do wskazanej wersji. Prace zostana przeprowadzone dzisiaj po uzgodnieniu z administratorami Cyfronetu. 2007-11-05 10:17:00 (0,0) Piotr Goczał Ruch Cyfronetu został przeniesiony na zapasowego BD. Aktualizacja oprogramowania na XMR Krakow zostanie rozpoczeta miedzy 10.00-10.30. 2007-11-05 11:06:00 (0,0) Piotr Goczał Aktualizacja oprogramowania zakonczyła się pomyślnie. Przeprowadzone zostaną testy poprawności działania XMRa. 2007-11-05 11:41:00 (0,0) Piotr Goczał Stwierdzono, że XMR nadal nie działa poprawnie. Trwaja prace nad ustaleniem przyczyn. 2007-11-05 16:54:00 (0,0) Piotr Goczał Zgodnie z sugestią serwisu ponownie wymieniono oprogramowanie na XMRze. Od czasu wymiany nie obserwujemy problemów z przesyłaniem ruchu. Wykryto jednak błąd w oprogramowianiu, powodujący restart urządzenia. Do czasu wyjaśnienia sprawy przez TAC Foundry urządzenie będzie testowane a ruch Cyfronetu będzie odbywać się przez łącze zapasowe (na BD). Z uwagi na awarię łącza Opole-Katowice testy poprawności działania XMRa w Krakowie zostaną wstrzymane. 2007-11-08 10:29:00 (0,0) Tomasz Berner O godzinie 09:15 został ponownie właczony interfejs e1/2. Prace maja na celu zebranie dodatkowych danych dla serwisu Foundry. 2007-11-09 17:15:00 (0,0) Jerzy Grzenda Serwis Foundry poinformował nas, że przyczyną problemów jest uszkodzony moduł nr 1 i w związku z tym będzie on wymieniony najprawdopodobniej na początku przyszłego tygodnia. Dokładniejsze terminy zostaną podane w uaktualnieniu. 2007-11-13 12:33:00 (0,0) Witold Bogacki Nowa karta dotarła do Krakowa. Wstępnie wymianę zaplanowano na jutro od godz. 9.15.