DATARC
8 (800) 200-90-06Бесплатно по России

Статьи о RAID, NAS и серверах

Восстановление данных виртуальных машин на VMFS

Опубликовано

В VMware ESXi сбой может затронуть всё хранилище, один виртуальный диск или только данные внутри машины. После отказа RAID нужно восстановить доступ к VMFS. После удаления VMDK или потери снимка приходится искать блоки конкретного диска. В обоих случаях результат зависит от того, какие блоки сохранились и в каком состоянии.

К материалу ↓
Сервер HP ProLiant DL380 G6
HP ProLiant DL380 G6. Сервер этой модели разбираем в примере восстановления VMFS с RAID 5.

Пропало хранилище, машина или данные внутри неё

  • ESXi потерял доступ к хранилищуЕсли пропал сам LUN, проверяем подключение к системе хранения и состояние массива. Если LUN виден, а VMFS недоступна, проверяем, читаются ли блоки тома и сохранилась ли файловая система.
  • Машина или её VMDK исчезли из каталогаПосле удаления ищем сохранившиеся записи о файлах и их блоки. Чем больше записывали на datastore после сбоя, тем выше риск перезаписи нужных участков.
  • ESXi видит файлы, но машина не запускаетсяПо тексту ошибки выясняем, какой виртуальный диск или снимок ESXi не смог открыть. Если файл заблокирован, проверяем, какой хост или процесс его держит. Если ошибки чтения затронули несколько машин, начинаем с их общего хранилища.
  • Машина включилась, а нужная база или папка недоступнаПроверяем разделы внутри VMDK и сами данные. Отдельно выясняем, читаются ли нужные файлы и может ли SQL Server работать с восстановленной базой.

Из чего состоит виртуальный диск и его снимки

VMFS – файловая система на хранилище ESXi. В ней лежат конфигурация машины .vmx и её виртуальные диски VMDK. В обычной конфигурации на VMFS у базового диска есть небольшой файл описания data.vmdk и файл с блоками данных data-flat.vmdk. В описании, или дескрипторе, указано, где лежат данные и как их читать. Внутри самого виртуального диска уже находятся разделы и файловые системы гостевой ОС, например NTFS.

Когда у диска есть снимок, новые записи идут в файл изменений. У этого файла свой дескриптор, который указывает на предыдущий диск в цепочке. Если снимков несколько, ESXi при чтении берёт нужный блок из самого нового звена, где он записан. Когда там блока нет, ищет его дальше, вплоть до базового диска.

Как ESXi читает диск с двумя снимками

  1. Активное звеноdata-000002.vmdkdata-000002-sesparse.vmdk
  2. Предыдущий снимокdata-000001.vmdkdata-000001-sesparse.vmdk
  3. Базовый дискdata.vmdkdata-flat.vmdk
Конфигурация машины указывает на активный дескриптор. Если нужного блока нет среди изменений, ESXi идёт к предыдущему звену. Имена файлов условные. В зависимости от формата файлы изменений могут оканчиваться на -delta.vmdk или -sesparse.vmdk.

Порядок снимков определяют ссылки в дескрипторах. В них parentCID дочернего звена должен совпадать с CID родительского. Несовпадение может означать, что родительский диск меняли после создания снимка или подложили другую его версию. Правка идентификаторов меняет только описание. Состояние блоков нужно выяснить до любых изменений.

Почему нужен промежуточный снимок

Блок A B C D E F
База A0 B0 C0 D0 E0 F0
Снимок 1 – B1 – – E1 –
Снимок 2 – – C2 – E2 –
Диск сейчас A0 B1 C2 D0 E2 F0
Блок E2 есть в последнем снимке. Актуальный блок B1 остался в первом. Если первый снимок потерян, в базе можно найти только старый B0. Так в одном виртуальном диске могут оказаться блоки из разных состояний.

Что проверить, прежде чем что-то менять

  1. Уточните масштаб. Не запускается одна машина или несколько на том же datastore? Видна ли папка и все ли нужные файлы на месте? Для диагностики пригодится точный текст ошибки. Если журнал vmware.log читается, его можно скопировать отдельно.
  2. Проверьте, есть ли резервная копия за подходящую дату. Если она есть, разверните её на другом исправном хранилище и откройте нужные файлы или базу. Возврат к снимку на исходном datastore меняет его состояние.
  3. Если проверенной копии нет и были удаление, ошибки чтения или сбой массива, остановите запись на затронутое хранилище, насколько позволяет работа системы. Оставьте существующие VMDK и снимки на месте до диагностики.

Как мы восстанавливаем данные с VMFS и VMDK

Если проблема на уровне RAID. Подключаем диски отдельно и работаем с исходными носителями на чтение. Неисправные диски сначала приводим в состояние, пригодное для считывания. При необходимости снимаем посекторные копии. Затем собираем виртуальный RAID и проверяем, читаются ли на нём VMFS, VMDK и разделы внутри виртуальных дисков.

VMFS обычно хранит сравнительно немного очень больших файлов. При подборе параметров RAID в ней может оказаться слишком мало служебных структур, по которым можно быстро проверить порядок блоков. NTFS внутри виртуальной машины даёт дополнительные ориентиры. Но её фрагменты лежат внутри VMDK, а сам VMDK может занимать разрозненные участки VMFS. Поэтому мы проверяем структуру на нескольких уровнях. Одного списка файлов для проверки сборки мало. Восстановление данных с RAID

Где проверяем результат восстановления

  1. RAID и LUNНаходим актуальные блоки и раскладку массива.
  2. VMFSОпределяем, где лежат участки файлов.
  3. VMDK и снимкиВосстанавливаем доступное состояние диска.
  4. Файлы и базыПроверяем то, что нужно заказчику.
Одна виртуальная машина может содержать несколько дисков, и у каждого может быть своя цепочка. Для отдельных файлов иногда достаточно той части виртуального диска, где они лежат.

Если удалили VMDK или часть блоков успели перезаписать. По нашему опыту, после удаления VMFS часто сохраняет недостаточно служебной информации для восстановления исходного размещения большого файла. Если поверх освободившихся блоков уже записали новые данные, прежнее содержимое этих блоков можно взять только из другой копии. Сохранившиеся участки проверяем отдельно. Иногда по остаткам метаданных внутри виртуального диска удаётся связать фрагменты с нужными файлами и вернуть часть исходной структуры папок. Восстановление данных с VMFS

Результат зависит от того, что лежало внутри. В файловом архиве документы и фотографии можно проверять по одному. Часть файлов может открыться, даже если виртуальная машина целиком не собирается. Для SQL Server нужна согласованная база. По нашей практике, после перезаписи части её блоков рассчитывать на рабочую базу целиком обычно не приходится. Иногда удаётся извлечь отдельные таблицы или записи. То, что удалось вернуть, проверяем на копии.

Из практики DATARC. Каталог читался при неверной сборке RAID

На сервере HP ProLiant с RAID 5 хранились виртуальные машины VMware ESXi. При подборе параметров массива мы видели файлы в VMFS, но ни один вариант сборки из привезённых дисков не давал правильного содержимого.

Оказалось, один диск оставили в серверной, считая его резервным. Контроллер уже успел выполнить rebuild на этот hot spare после первого отказа, и диск стал участником массива. Когда его прислали, удалось собрать RAID. Каталог файлов мы видели и до этого, а для чтения самих данных понадобился актуальный участник. Случай с HP Smart Array P410i

Если важнее всего вернуть конкретную папку, базу или несколько машин, скажите об этом сразу. От этой задачи зависит, какой виртуальный диск разбирать первым и что проверять до передачи результата. Восстановление данных виртуальных машин

Заявка на восстановление данных

Начнём с консультации

Заявка закрепит за вами скидку 10%

Оставьте номер телефона — специалист перезвонит и ответит на вопросы.

Обсудим вашу задачу

Расскажите, что случилось и какие данные нужно вернуть. Специалист подскажет следующий шаг.

Ваш город

Круглосуточная телефонная линия

Пункты приёма в других городах ↗

Заявка на восстановление данных

Получить консультацию

И закрепить скидку 10% на восстановление

Оставьте номер телефона — специалист перезвонит и ответит на вопросы.

Добавить подробности Необязательно

Обращение из любого города

Выберите ваш город

Подскажем, как передать носитель в лабораторию и получить данные.

Все города и адреса пунктов приёма ↗

Внутри лаборатории DATARC

Кадры работы с носителями, оборудования и лаборатории

Позвонить