Odzyskiwanie i naprawa serwerów Linux

Serwer Linux, który przestaje się uruchamiać albo nagle wyłącza strony, to sytuacja awaryjna, zwłaszcza gdy osoby, która go konfigurowała, już nie ma. Presja każe próbować szybko, ale przypadkowe poprawki na uszkadzającym się dysku lub częściowo zepsutym systemie plików mogą zamienić sytuację do odzyskania w trwałą utratę danych. Przy każdym odzyskiwaniu serwera Linux najpierw diagnozujemy, chronimy Twoje dane i dopiero potem naprawiamy.

Awarie, którymi się zajmujemy

• Serwer, który nie startuje po aktualizacji, zmianie jądra lub utracie zasilania
• Błędy „grub rescue>” lub „no such partition” (zobacz naprawa rozruchu GRUB i MBR)
• Błędy systemu plików, główny system plików tylko do odczytu lub tryb awaryjny przy uruchamianiu
• Zdegradowane lub nieaktywne macierze mdadm RAID i uszkadzające się dyski
• Zapełnione dyski, które zatrzymały bazę danych lub serwer poczty
• Uszkodzone pakiety lub problemy z zależnościami po przerwanej aktualizacji
• Usługi, które już się nie uruchamiają: serwer WWW, baza danych, PHP-FPM lub poczta
• Utrata dostępu root i blokady SSH
• Przejęte serwery, które wymagają oczyszczenia i hardeningu przed ponownym uruchomieniem

Jak wygląda nasze podejście do odzyskiwania

1. Wstępna ocena. Zbieramy to, co można bezpiecznie zebrać: komunikaty konsoli, logi, stan dysków i RAID. Na tym etapie nic nie jest zapisywane na podejrzanych dyskach.
2. Ochrona danych. Jeśli dyski zawodzą, najpierw tworzymy ich obrazy lub kopiujemy krytyczne dane, zanim podejmiemy jakąkolwiek naprawę.
3. Ustalenie przyczyny. Program rozruchowy, jądro, system plików, pamięć masowa, konfiguracja lub incydent bezpieczeństwa.
4. Naprawa. Praca ze środowiska ratunkowego, gdy to potrzebne: odbudowa programu rozruchowego, naprawa systemów plików, ponowna synchronizacja RAID, naprawa pakietów i konfiguracji.
5. Weryfikacja. Testujemy usługi, strony i zaplanowane zadania, a dane wyrywkowo sprawdzamy razem z Tobą.
6. Zapobieganie powtórce. Krótki raport o tym, co zawiodło i co zmienić, na przykład monitoring, kopie zapasowe lub wymianę dysku.

Dla kogo jest odzyskiwanie systemów Linux w Los Angeles

Dla firm z serwerami Linux obsługującymi strony, sklepy internetowe, udziały plików, centrale telefoniczne lub wewnętrzne aplikacje; dla programistów i agencji, których serwer klienta ma kłopoty; i dla każdego, kto został zablokowany na serwerze, od którego zależy.

Co obejmuje odzyskiwanie systemów Linux w Los Angeles

• Diagnoza źródła awarii
• Ochrona danych przed naprawą (obraz dysku lub kopia krytycznych danych)
• Naprawa awarii rozruchu, systemu plików, RAID, pakietów i usług
• Testy po przywróceniu systemu i pisemne podsumowanie incydentu
• Zalecenia i opcjonalny stały monitoring

Najczęściej zadawane pytania o odzyskiwanie systemów Linux w Los Angeles

Czy możecie odzyskać dane z serwera, który się nie uruchamia?

W większości awarii programowych tak: dane nadal są na dyskach i można je skopiować z systemu ratunkowego. Fizycznie uszkodzone dyski mogą wymagać wyspecjalizowanego laboratorium odzyskiwania danych i powiemy Ci, jeśli tak będzie.

Czy powinienem ciągle restartować serwer?

Unikaj wielokrotnych restartów i nie uruchamiaj narzędzi do naprawy systemu plików na dysku, który może się psuć, bo każda taka próba może utrudnić odzyskanie danych. Zapisz wszystkie komunikaty o błędach i skontaktuj się z nami.

Czy mój serwer został zhakowany, czy po prostu się zepsuł?

Oznaki włamania to nieznani użytkownicy lub klucze SSH, nieoczekiwane procesy obciążające CPU, nowe zaplanowane zadania i wychodzący spam. Jeśli znajdziemy dowody włamania, zabezpieczamy logi, czyścimy lub odbudowujemy system i zamykamy furtkę, którą wszedł intruz.

Opisz objawy, dystrybucję i miejsce hostowania serwera przez formularz kontaktowy. Więcej: wskazówki dotyczące administracji Linuksem.

Co przygotować, gdy serwer nie działa

Im szybciej zobaczymy maszynę, tym mniej zgadywania. Zanim się z nami skontaktujesz, zbierz to, co możesz, bez wprowadzania dalszych zmian:

• Dostęp do konsoli. W przypadku serwera hostowanego: dane logowania do konsoli ratunkowej lub KVM dostawcy; dla sprzętu w Twoim biurze: dane IPMI, iDRAC lub iLO, jeśli serwer je ma.
• Podstawowe informacje. Dystrybucja i wersja, co serwer obsługuje i gdzie przechowywane są jego kopie zapasowe.
• Ostatnia zmiana. Aktualizacja, nowy dysk, wyłączenie zasilania, edycja konfiguracji albo, o ile wiesz, nic.
• Komunikaty o błędach. Zdjęcia lub zrzuty ekranu konsoli, wraz z ostatnimi liniami przed zatrzymaniem.

Diagnostyka Linuksa, gdy serwer działa, ale nie tak, jak trzeba

Nie każda sprawa jest awarią. Diagnostyka Linuksa dla firm w Kalifornii obejmuje także problemy, które pojawiają się i znikają: przypadkowe restarty, procesy zabijane przez mechanizm out-of-memory killer, dyski zapełniające się w nocy, zegar tracący synchronizację albo strona, która zwalnia codziennie o tej samej godzinie. Zostawiają one ślady w dzienniku systemowym, komunikatach jądra i danych monitoringu, a znalezienie wzorca jest pożyteczniejsze niż restartowanie usług, aż objaw zniknie.

Odzyskiwanie serwerów hostowanych i lokalnych

Serwery hostowane, w Kalifornii lub gdziekolwiek indziej w USA, zwykle da się odzyskać zdalnie przez konsolę i system ratunkowy dostawcy. W przypadku naprawy Linuksa w Long Beach i szerszej okolicy Los Angeles, gdy maszyna stoi w Twoim biurze lub serwerowni, przed rozpoczęciem prac ustalamy najlepszy sposób dostępu do sprzętu. Gdy serwer znów działa, podpowiadamy, co zmienić, a czasem uczciwą odpowiedzią jest to, że wysłużony serwer lepiej wycofać z użytku, niż naprawiać go po raz drugi.

Powiązane usługi: kopie zapasowe i odzyskiwanie po awarii, wycofanie serwerów z eksploatacji dla maszyn, których nie warto naprawiać, oraz bezpieczne niszczenie wymienionych dysków.