Тормозит дисковая система на PROXMOX

VirtualBox, QEMU, ESX/ESXi и прочия
Правила форума
Убедительная просьба юзать теги [code] при оформлении листингов.
Сообщения не оформленные должным образом имеют все шансы быть незамеченными.
Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-03 14:36:25

Есть сервер виртуализации с proxmox, сам гипервизор стоит на отдельном винте. Для хранения виртуалок собрал RAID10 на 4 дисках при помощи mdadm. Скорость дискового массива получается под 300МБ/с

Код: Выделить всё

root@srv-hprv01:~# dd if=/dev/md10 of=/dev/null bs=1024k count=1024
1024+0 records in
1024+0 records out
1073741824 bytes (1.1 GB, 1.0 GiB) copied, 3.61019 s, 297 MB/s
Но, при попытке установить любую операционку, начинаются дикие тормоза при копировании установочных файлов на диск виртуалки (к примеру ставим winserver и распаковка и копирование файлов на диск занимает дикое количество времени).
Дисковый массив грузится до 70% и выше. Не удается даже выключить саму виртуальную машину, приходится перегружать сам гипервизор. Хотя, по идее на RAID10 это должно, как минимум, шустро работать, а по факту получаем производительность флешки

Хостинговая компания Host-Food.ru
Хостинг HostFood.ru
 

Услуги хостинговой компании Host-Food.ru

Хостинг HostFood.ru

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-03 15:28:32

Кое-что прояснилось. Если использовать при создании виртуального диска VirtIO SCSI контроллер, то все становится нормально.
Теперь проблема с драйвером для него под WinServer, в линуксах все есть.

Аватара пользователя
Neus
капитан
Сообщения: 1935
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-03 15:44:18

alex117 писал(а):
2018-09-03 15:28:32
Теперь проблема с драйвером для него под WinServer, в линуксах все есть.
нет там проблемы: на вики проксмокса есть ссылка на виртио для винды, качаешь исошник, подключаешь второй виртсидюк -- вуаля.
Physics is mathematics with the constraint of reality.
Engineering is physics with the constraint of money.

LOR захватили ситхи.
Добро пожаловать на светлую сторону!

Аватара пользователя
Neus
капитан
Сообщения: 1935
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-03 15:48:11

alex117 писал(а):
2018-09-03 14:36:25
Для хранения виртуалок собрал RAID10 на 4 дисках при помощи mdadm
кстати, софтрейды в проксе ансуппортед энд не рекомендед =)
Physics is mathematics with the constraint of reality.
Engineering is physics with the constraint of money.

LOR захватили ситхи.
Добро пожаловать на светлую сторону!

Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-03 16:04:28

ну не поддерживаются это да, но я добавил директорию для хранения ВМ, как каталог на диске RAID
с установкой винды разобрался вроде, можно обойтись и одним cd-rom, просто по очереди монтировать образы

Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-03 16:09:46

Аппаратный рейд есть на материнке, но proxmox его не видит, так что выбор оказался невелик.

Аватара пользователя
Neus
капитан
Сообщения: 1935
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-03 17:40:13

ну не поддерживаются это да, но я добавил директорию для хранения ВМ, как каталог на диске RAID
Неправильно Вы дядя Алекс проксмокс приготовили 8)
на md надо было LVM натянуть, а не ФС. И раздавать в виртуалку raw LV.
Или воспользоваться возможностями ZFS.
Первый -- стабильнее. У второго есть интересная фишка -- асинхронная репликация.
Physics is mathematics with the constraint of reality.
Engineering is physics with the constraint of money.

LOR захватили ситхи.
Добро пожаловать на светлую сторону!

Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-04 8:07:04

Neus писал(а):
2018-09-03 17:40:13
на md надо было LVM натянуть, а не ФС. И раздавать в виртуалку raw LV.
Может и так, что дает LV?
Я пока тестирую, поэтому могу все поменять.
WinServer2008 летает, как не летал на реальном железе.
Скорость диска на чтение близка к фактической, на скорость записи ниже примерно в 1,5-2 раза.
ZFS на линуксе пока стараюсь обходить стороной

Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-04 11:17:44

В топку этот проксмокс - постоянные глюки, связанные с блокировкой файлов при попытке выключить ВМ и пр.

Аватара пользователя
Neus
капитан
Сообщения: 1935
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-04 12:03:56

Если будешь виртуалить только винду, ставь HyperV.
Если винду и линукс ставь XCP-NG
У меня он же, но в исполнении Citrix (XenServer)
Physics is mathematics with the constraint of reality.
Engineering is physics with the constraint of money.

LOR захватили ситхи.
Добро пожаловать на светлую сторону!

Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-05 8:57:18

спасибо, а чем hyper-v для линуксов не подходит?
у меня три года крутятся несколько машин на centos на hyper-v, проблем нет

Аватара пользователя
Neus
капитан
Сообщения: 1935
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-05 9:21:20

я не говорил что не подходят.
для линуксов ксен умеет в PVH

Изображение

а это почти нативная производительность в отличии от полной виртуализации в гиперв.
Physics is mathematics with the constraint of reality.
Engineering is physics with the constraint of money.

LOR захватили ситхи.
Добро пожаловать на светлую сторону!

Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-05 11:01:30

поставил я xcp, поставил веб-консоль
его нужно вообще регистрировать, пишет, что trial

Аватара пользователя
alex117
ст. сержант
Сообщения: 377
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-05 11:07:08

сначала пробовал ставить клиентскую часть - не запускается, что-то наворотили, лог читал так и не понял в чем дело
а веб консоль - та еще гадость, куда ни ткни - все платно, снес к чертям, буду ковырять клиентскую часть

Аватара пользователя
Neus
капитан
Сообщения: 1935
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-05 16:19:07

alex117 писал(а):
2018-09-05 11:07:08
сначала пробовал ставить клиентскую часть - не запускается, что-то наворотили, лог читал так и не понял в чем дело
Microsoft .Net Framework 4.6.х ей надо
Physics is mathematics with the constraint of reality.
Engineering is physics with the constraint of money.

LOR захватили ситхи.
Добро пожаловать на светлую сторону!