Восстановление и ремонт Linux-серверов

Linux-сервер, который перестал загружаться или внезапно отключил сайты, — это аварийная ситуация, особенно если человека, который его настраивал, больше нет рядом. Хочется быстрее что-то попробовать, но случайные исправления на выходящем из строя диске или наполовину разрушенной файловой системе могут превратить поправимую ситуацию в безвозвратную потерю данных. При каждом восстановлении Linux-сервера мы сначала проводим диагностику, защищаем ваши данные и только потом ремонтируем.

С какими сбоями мы работаем

• Сервер не загружается после обновления, смены ядра или отключения питания
• Ошибки «grub rescue>» или «no such partition» (см. восстановление загрузки GRUB и MBR)
• Ошибки файловой системы, корневая файловая система только для чтения или аварийный режим при запуске
• Деградировавшие или неактивные массивы mdadm RAID и выходящие из строя диски
• Переполненные диски, остановившие базу данных или почтовый сервер
• Повреждённые пакеты или проблемы с зависимостями после прерванного обновления
• Сервисы, которые больше не запускаются: веб-сервер, база данных, PHP-FPM или почта
• Утраченный root-доступ и блокировка доступа по SSH
• Скомпрометированные серверы, которые нужно очистить и усилить, прежде чем возвращать в работу

Как мы подходим к восстановлению

1. Первичная оценка. Мы собираем то, что можно получить безопасно: вывод консоли, журналы, состояние дисков и RAID. На этом этапе на подозрительные диски ничего не записывается.
2. Защита данных. Если диски выходят из строя, мы сначала создаём их образы или копируем критически важные данные, и только потом пробуем ремонт.
3. Поиск первопричины. Загрузчик, ядро, файловая система, хранилище, конфигурация или инцидент безопасности.
4. Ремонт. При необходимости работаем из среды восстановления: пересоздаём загрузчик, исправляем файловые системы, пересинхронизируем RAID, чиним пакеты и конфигурацию.
5. Проверка. Тестируем сервисы, сайты и запланированные задания, а данные выборочно проверяем вместе с вами.
6. Предотвращение повторения. Короткий отчёт о том, что вышло из строя и что стоит изменить, например мониторинг, резервное копирование или замену диска.

Кому подходит восстановление Linux-систем в Лос-Анджелесе

Компаниям с Linux-серверами, на которых работают сайты, интернет-магазины, файловые хранилища, телефонные системы или внутренние приложения; разработчикам и агентствам, у которых возникли проблемы с сервером клиента; и всем, кто потерял доступ к важному для них серверу.

Что входит в восстановление Linux-систем в Лос-Анджелесе

• Диагностика сбоя
• Защита данных перед ремонтом (образ диска или копия критически важных данных)
• Устранение сбоев загрузки, файловой системы, RAID, пакетов и сервисов
• Проверка после восстановления и письменное описание инцидента
• Рекомендации и, по желанию, постоянный мониторинг

Часто задаваемые вопросы о восстановлении Linux-систем в Лос-Анджелесе

Можно ли восстановить данные с сервера, который не загружается?

В большинстве программных сбоев — да: данные по-прежнему на дисках, и их можно скопировать из системы восстановления. Физически повреждённым дискам может понадобиться специализированная лаборатория восстановления данных, и если это так, мы вам об этом скажем.

Стоит ли продолжать перезагружать сервер?

Избегайте повторных перезагрузок и не запускайте средства исправления файловой системы на диске, который может выходить из строя: каждая такая попытка может затруднить восстановление. Запишите все сообщения об ошибках и свяжитесь с нами.

Мой сервер взломали или он просто сломался?

О компрометации говорят неизвестные пользователи или SSH-ключи, неожиданные процессы, нагружающие процессор, новые запланированные задания и исходящий спам. Если мы находим следы вторжения, мы сохраняем журналы, очищаем или пересоздаём систему и закрываем точку входа.

Опишите симптомы, дистрибутив и место размещения сервера через контактную форму. Ещё по теме: советы по администрированию Linux.

Что подготовить, когда сервер не работает

Чем раньше мы увидим машину, тем меньше будет догадок. Прежде чем связаться с нами, соберите то, что можно, не внося никаких дополнительных изменений:

• Консольный доступ. Для размещённого сервера — вход в консоль восстановления или KVM у провайдера; для оборудования в вашем офисе — данные IPMI, iDRAC или iLO, если они есть на сервере.
• Основные сведения. Дистрибутив и версия, что работает на сервере и где хранятся его резервные копии.
• Последнее изменение. Обновление, новый диск, отключение питания, правка конфигурации или, насколько вам известно, ничего.
• Сообщения об ошибках. Фотографии или снимки экрана консоли, включая последние строки перед остановкой.

Диагностика Linux, когда сервер работает, но не так, как нужно

Не каждая задача — авария. Диагностика Linux для компаний в Калифорнии охватывает и проблемы, которые то появляются, то исчезают: случайные перезагрузки, процессы, завершённые механизмом out-of-memory killer, диски, заполняющиеся за ночь, уходящие вперёд или назад часы или сайт, замедляющийся каждый день в один и тот же час. Они оставляют следы в системном журнале, сообщениях ядра и данных мониторинга, и найти закономерность полезнее, чем перезапускать сервисы, пока симптом не исчезнет.

Восстановление серверов: размещённых и локальных

Размещённые серверы, в Калифорнии или в любом другом месте США, обычно можно восстановить удалённо через консоль и систему восстановления провайдера. Для ремонта Linux в Лонг-Бич и в более широком районе Лос-Анджелеса, когда машина стоит в вашем офисе или серверной комнате, мы заранее договариваемся о лучшем способе добраться до оборудования. Когда сервер снова заработает, мы рекомендуем, что стоит изменить, и иногда честный ответ состоит в том, что стареющий сервер лучше вывести из эксплуатации, чем ремонтировать второй раз.

Связанные услуги: резервное копирование и аварийное восстановление, вывод серверов из эксплуатации для машин, которые не стоит ремонтировать, и безопасное уничтожение заменённых дисков.