Статьи о RAID, NAS и серверах
RAID Degraded и rebuild – что делать, если из массива выпал диск
В офисе всё как обычно. Файлы открываются, сотрудники работают с общей папкой. А контроллер уже показывает Degraded. Так и выглядит штатная работа RAID после выпадения диска. Массив ещё справляется, иногда чуть медленнее, но запас на случай следующего отказа уже меньше.
Что означает Degraded
Degraded означает, что RAID потерял часть или всю избыточность. Избыточность – это то, за счёт чего массив может продолжать работу без одного или нескольких дисков. В зеркале есть вторая копия. В RAID 5 и RAID 6 есть блоки чётности, по которым контроллер может вычислить недостающие данные.
Название зависит от оборудования. Один контроллер покажет Degraded, другой – Critical. Некоторые MegaRAID показывают Partially Degraded, когда из RAID 6 выпал один диск и массив ещё выдержит отказ второго.
В штатной ситуации вы увидите те же целые и актуальные данные, с которыми только что работали. Вот это и стоит проверить первым. Откройте несколько свежих файлов, с которыми точно работали сегодня. Если вместо сегодняшних версий видны вчерашние, пропали папки или файлы открываются с ошибками, разбираться нужно уже с причиной сбоя.
Когда массив становится недоступен целиком
RAID 5 работает без одного диска. Выпадает второй – весь массив становится недоступен. RAID 6 выдерживает выпадение двух дисков. После третьего недоступен весь массив.
В обычном RAID 10 данные чередуются между зеркалами. Представьте RAID 0, у которого каждый участник – пара дисков с одинаковыми данными. Если в паре выпал один диск, второй по-прежнему отдаёт её блоки. Если выпали оба, страйп потерял целого участника. Весь RAID 10 становится недоступен, даже если второе зеркало полностью исправно.

Что контроллер делает при rebuild
При rebuild одного участника контроллер записывает его восстановленное содержимое на один диск. Обычно это новый диск или заранее назначенный запасной, Hot Spare. Сколько дисков придётся прочитать, зависит от устройства массива. Как работает Hot Spare
В RAID 10 контроллер читает исправный диск той же зеркальной пары и копирует его данные на новый. По сути, он заново делает вторую копию. Второе зеркало в этой операции не участвует.

В RAID 5 контроллер читает все оставшиеся диски. Он вычисляет, что должно было лежать на месте выпавшего диска, и записывает результат на новый. В одной полосе это будет блок данных, в другой – блок чётности.

По мигающим индикаторам трудно понять, что запустилось. При rebuild RAID 5 чтение идёт со всех оставшихся дисков, а восстановленные блоки записываются на один. Инициализация – отдельная операция. В зависимости от режима она может менять служебные области и перезаписывать данные на дисках массива. Если вы не уверены, какую команду запустили, не повторяйте её наугад.
Что делать до rebuild
Данные на месте, актуальны и читаются без ошибок. Если проверенной копии нет, сначала скопируйте важное на отдельный исправный носитель. Начните с того, чего нет в резервной копии, и проверьте, что файлы открываются с нового носителя. После этого можно разбираться, какой диск выпал, в каком состоянии остальные и как выполнить штатную замену.
Файлы пропали, повреждены или вдруг оказались старыми. Остановитесь. Rebuild возвращает избыточность массива. Он не вернёт файлы, которых вы уже не видите, и не исправит повреждённый раздел. Пока причина сбоя неизвестна, не запускайте rebuild и инициализацию, не пытайтесь принудительно вернуть выпавший диск. Восстановление данных с RAID
Что делать с дисками, которые уже вынули
Пока вы не открыли актуальные данные с отдельного исправного носителя, не выбрасывайте ни одного диска из массива. Не форматируйте их, не стирайте и не ставьте в другое устройство. Вынутые диски отложите. Если знаете, из каких отсеков их сняли, подпишите. Если обращаетесь в лабораторию, привезите и вынутые диски, и те, что остались в массиве. Если rebuild уже запускали, привезите и диск, на который шла запись.
Мы не раз получали массив без одного из дисков. Его сочли ненужным и выбросили или успели использовать для другой задачи. При разборе выяснялось, что на привезённых дисках не хватает блоков, которые можно было прочитать с того самого накопителя.
В одном заказе из RAID 5 на шести дисках выпали два. Заказчик заметил оба отказа в один день, но первый диск перестал участвовать в записи гораздо раньше. Пока сервер работал дальше, данные на нём устарели. Чтобы собрать массив, нам понадобилось прочитать именно второй диск. С него сняли образ, собрали массив и отдельно восстановили повреждённую файловую систему. Вернули 6 ТБ данных. Разбор случая
