Nano.lv официально сообщил о завершении аварийного восстановления хранилища, из-за которого с 28 по 30 августа были нарушены работа и производительность части размещённых на платформе сервисов. Проверка файловой системы завершилась 30 августа в 07:27; все восемь томов повреждённого агрегата сейчас находятся в рабочем состоянии.
Непосредственной причиной остановки стало рассогласование служебных данных файловой системы: информация о распределении пространства перестала соответствовать метаданным снимков. Система хранения остановила нормальную обработку операций, чтобы дальнейшая запись не усугубила повреждение.
Для восстановления Nano.lv использовал механизм NetApp WAFL Iron — глубокую проверку блоков, inode, карт распределения пространства, объектов файловой системы и метаданных снимков. На агрегате находилось около 29 ТБ выделенных производственных томов, поэтому операция заняла много часов. На отдельных этапах данные уже можно было сделать доступными, но скорость ввода-вывода оставалась существенно сниженной.
Это объясняет продолжительность сбоя, но пока не отвечает на главный вопрос: почему метаданные вообще пришли в несогласованное состояние. Nano.lv прямо признаёт, что исходная причина ещё расследуется. Компания изучает журналы программного обеспечения, контроллеров и кеширующей подсистемы, исторические события и жизненный цикл оборудования.
Провайдер обещает модернизировать программное обеспечение хранилища, дополнительно проверить оборудование и кеш, улучшить мониторинг и процедуры аварийного восстановления, а также пересмотреть дальнейшее использование этой платформы. При этом в уведомлении по-прежнему нет сведений о потере или повреждении пользовательских данных, количестве затронутых клиентов, работе резервных копий и соблюдении договорных показателей доступности.
Таким образом, сама файловая система восстановлена, но расследование аварии ещё не закончено. Финальный отчёт можно будет считать полным только после установления первопричины и ответа на вопрос, почему отказоустойчивая архитектура допустила длительное нарушение работы сервисов.
#nano #хостинг #сбой #net @digitaltimeslv
Original in Telegram: https://t.me/digitaltimeslv/10297