Имя пользователя:
Пароль:  
Помощь | Регистрация | Забыли пароль?  | Правила  

Компьютерный форум OSzone.net » Серверные продукты Microsoft » Windows Server 2012/2012 R2 » [решено] Hyper-V cluster DOWN

Ответить
Настройки темы
[решено] Hyper-V cluster DOWN

Новый участник


Сообщения: 17
Благодарности: 0

Профиль | Отправить PM | Цитировать


Изменения
Автор: vitabaks
Дата: 27-11-2013
На днях упал кластер на yper-v 2012 r2.
Причем положил его возможно я сам, прошу дать комментарий.

Порядок действий:
1. Был ранее созданный кластер на hyper-v 2012, обновились до R2
Делал так:
Взял новый сервер (с коробки), поставил ОС, поднял фичу failover clustering - Создал новый кластер, добавив этот сервер к качестве первой ноды.

2. Переустановил ОС на Hyper-v 2012 r2 на одном из серверов старого кластера и добавил его в новый.
(Предварительно не исключив его со старого кластера).

3. Добавил эту железку в качестве второй ноды (имя и ip не менял).

4. В итоге получаем кластер из двух нод. Кворумный диск или же шару не назначаю, так как собираюсь добавить третий сервер.

5. Чтобы добавить третий сервер (который ранее тоже был нодой старого кластера) я удаляю сам кластер.
Кластер удалился, сервер еще не успев добавить как третью ноду - минут через 10-20 лег новый кластер!!

Получается, при удалении старого кластера (ноды в списке), он грохает эту ноду и с нового кластера!!
Почему?? этот сервак ведь уже в кластере под другим именем!
'ClusterNode'
EventId 4616 (25:11:2013 11:24:22)
Termination of the cluster service during cluster node cleanup has not completed within the expected time period. Please restart this machine to ensure the cluster service is no longer running.

Журналы событий кластера:
EventId 1135 (25:11:2013 11:26:09)
Cluster node 'ClusterNode' was removed from the active failover cluster membership. The Cluster service on this node may have stopped.
EventId 1117 (25:11:2013 11:26:09)
The Cluster service is shutting down because quorum was lost. This could be due to the loss of network connectivity between some or all nodes in the cluster, or a failover of the witness disk.


Еще вопрос:
Вот упал кластер (из двух нод), как его поднять?
Пытался переустановить фичу failover clustering, не помогло.
Clear-ClusterNode и Clear-ClusterNode node4 -Force и т.п. не помогло...

Попробовал создать еще один кластер и подключить туда CSV от упавшего кластера, не получается так как диск Reserved.
Причем хозяином диска является упавшая нода. Отключал ISCSI диск в инициаторе, не помогло. Тушил сервак, не помогло, всё равно диск используется.

В итоге потратили кучу времени а помогло удаление упавшего сервера со списка серверов на этот LUN на самом хранилище.
как отобрали LUN, так и освободили диск и смогли подключить к новому кластеру и поднять VMs на нем.

Еще одна проблема:
Один LUN в порядке, а второй LUN стал RAW устройством, т.е. повредился (и опять же из за чего..)
Форматировать было нельзя, так как данные критичны.
Помогла добраться до данных в диске RAW утилита testdisk. Ито, не смогла восстановить битые сектора, а лишь дала возможность скопировать файлы с этого диска.

Коллеги,
прошу поделиться информацией по Troubleshooting/ поднятие упавших кластеров Hyper-v.

Отправлено: 19:31, 26-11-2013

 

Аватара для Denis Dyagilev

Модератор


Moderator


Сообщения: 963
Благодарности: 222

Профиль | Отправить PM | Цитировать


Вообще, человеческий способ миграции между кластерами (в том числе и кросс-версионных) описывался вот здесь. Зачем заведомо создавать себе проблемы было, не выводя узлы из кластеров — непонятно, но это ваше дело и проблемы ваши.

Новый кластер сложился потому, что не было кворума. В кластере из двух узлов без свидетеля есть два голоса, выход одно из узлов — схлопывание кластера. Возможно, это совпадение по времени.

Командлеты Clear-ClusterNode запускали с ключом /forcecleanup?
Это сообщение посчитали полезным следующие участники:

Отправлено: 13:08, 27-11-2013 | #2



Для отключения данного рекламного блока вам необходимо зарегистрироваться или войти с учетной записью социальной сети.

Если же вы забыли свой пароль на форуме, то воспользуйтесь данной ссылкой для восстановления пароля.


Новый участник


Сообщения: 17
Благодарности: 0

Профиль | Отправить PM | Цитировать


Denis Dyagilev,
Спасибо, эту статью я читал.
И некоторые другие, перед началом миграции.

Проблема произошла из за того, что я не вывел из старого кластера реинсталированый сервер, который позже добавил в новый.

Понять бы принцип "зачистки" данных с ноды (на более низком уровне) в процессе удаления кластера .
Чтобы в свою очаредь понять, почему нода попала под действия удаления старого кластера, если эта нода уже в другом кластере и "чистая" (реинсталированная).
Где распологается эта инфа в ноде, в реестре, или же системные файлы. Можно ли было поднять в упавшем кластере ноду, путем редактирования этих "затертых" данных о членстве в кластере на железке.

Проблемы возможно бы небыло, если бы я после реинсталяции еще и имя поменял на машине... но както сразу не дошло.

Цитата Denis Dyagilev:
Командлеты Clear-ClusterNode запускали с ключом /forcecleanup?

Уже не припомню. Вроде не пробовал, еще пробовал ключики реестра удалить и фиччу переустановить.
reg delete HKLM\system\CurrentControlSet\Services\ClusDisk /f
reg delete HKLM\system\CurrentControlSet\Services\ClusSvc /f
Потом надеялся прописать Add-ClusterNode.

Ниужели никакими манипуляций через powershell упавший кластер не поднять, а только создавать другой?

Последний раз редактировалось vitabaks, 28-11-2013 в 06:50.


Отправлено: 14:07, 27-11-2013 | #3


Аватара для Denis Dyagilev

Модератор


Moderator


Сообщения: 963
Благодарности: 222

Профиль | Отправить PM | Цитировать


Можете попробовать командлет Start-ClusterNode –FixQuorum

Но в Вашем случае, сдается мне, быстрее будет поднять правильно новый кластер.

Отправлено: 11:00, 28-11-2013 | #4


Новый участник


Сообщения: 17
Благодарности: 0

Профиль | Отправить PM | Цитировать


Цитата Denis Dyagilev:
Можете попробовать командлет Start-ClusterNode –FixQuorum
Но в Вашем случае, сдается мне, быстрее будет поднять правильно новый кластер. »
Именно так и сделал, как понял, что поднять не удастся.

Отправлено: 11:16, 28-11-2013 | #5



Компьютерный форум OSzone.net » Серверные продукты Microsoft » Windows Server 2012/2012 R2 » [решено] Hyper-V cluster DOWN

Участник сейчас на форуме Участник сейчас на форуме Участник вне форума Участник вне форума Автор темы Автор темы Шапка темы Сообщение прикреплено

Похожие темы
Название темы Автор Информация о форуме Ответов Последнее сообщение
[решено] Hyper-V 3.0 Cluster. Cannot access the settings vitabaks77 Windows Server 2012/2012 R2 12 03-06-2013 09:19
2008 R2 - [решено] failover cluster Cruzenshtern Windows Server 2008/2008 R2 1 06-03-2013 15:31
2008 R2 - Failover Cluster fail ffsam Windows Server 2008/2008 R2 1 09-11-2011 20:25
2008 R2 - тонкости настройки Windows HPC cluster kind_shubin Windows Server 2008/2008 R2 0 30-06-2011 23:05
Windows 2003 Cluster manjaki Microsoft Windows NT/2000/2003 8 21-06-2007 15:06




 
Переход