narga: (Default)
[personal profile] narga
Проблема отловилась следующая.
Жирные блейды HP. 256 памяти на хосте. Блейдов 10 штук, виртуалок мало, сфера рапортует, что всё хорошо и памяти до дури. По её отчетам занято максимум по 40 гб на ноде.

Короче всё красиво:



Выключаем виртуалку. Пытаемся её включить - хрен. Рапортует следующее:

An error was received from the ESX host while powering on hostname.
Heap globalCartel-1 already at its maximum size of 7869288. Cannot expand.
Could not start VMX: msg.vmk.status.VMK_NO_MEMORY

Выглядит так:



Уже хорошо. Едем дальше.
Миграция с ноды на ноду обламывается на 14% с отлупом по таймауту - Operation timed out.

Выглядит так:



Те самые 14%



При попытке подключиться консолью сферы к виртуалке через раз получаем отлуп: Unable to connect to the MKS: Failed to connect to server

И дальше. Идём на хост по ssh.
Видим либо красивую картинку /bin/sh can't fork
Либо при попытке любого действия, хоть ls - отлуп can't fork

Ещё лучше:



Мониторинг хоста показывает, что из 256 гб памяти занято 250.

Перезагрузить хост через сферу - невозможно, уходит в ребут бесконечно. Перезагрузить по ssh - аналогично, не даёт, висит со стандартной желтой картинкой esxi "я ребутаюсь".
Вывести с ноды все виртуалки и опять же хоть перезагрузить попробовать - бесполезно, память занята.
Перевод хоста в режим обслуживания и обратно - без толку. Перезагрузка хоста руками - без толку, за неделю утекает всё, что уже не занято работающими виртуалками.

Путём исключений упираемся в hp-ams.
Обновление по рекомендации до 10.x ничего не даёт. Остановка ams тоже не особо спасает.
Единственное, что помогает - удалить vib целиком.
Сначала ребут любым способом, чтобы хоть shell-ом пустило.
Потом:

/etc/init.d/hp-ams.sh stop

esxcli software vib remove -n hp-ams

Date: 2014-11-20 08:05 am (UTC)
From: [identity profile] goblinid.livejournal.com
хммм. блейды Gen 8? esxi под них кастомизирован? Вроде известная проблема....

Date: 2014-11-20 08:22 am (UTC)
From: [identity profile] boot-from-cd.livejournal.com
Проблема исключительно на тех, кто с кастомизированного esxi. Кто ставился голым и потом добит всякими тулзами - с теми всё как раз отлично.

Date: 2014-11-26 04:14 am (UTC)
From: [identity profile] goblinid.livejournal.com
ну тогда вдогонку то - на что с vmware нарвался я на этой неделе: http://goblinid.livejournal.com/107911.html Так, для общего развития - полезно.

Date: 2014-11-20 08:34 pm (UTC)
From: [identity profile] click0.livejournal.com
Самое время начать тестировать Proxmox :)

Profile

narga: (Default)
narga

January 2025

S M T W T F S
   1234
567891011
12131415161718
19202122232425
2627282930 31 

Most Popular Tags

Style Credit

Expand Cut Tags

No cut tags
Page generated Jan. 9th, 2026 03:27 pm
Powered by Dreamwidth Studios