[Sysadmins] Незапускается libvirtd

[Sysadmins] Незапускается libvirtd

[Васюк Максим Анатольевич]

Привет всем!
Система установлена из стартер китс
# uname -r
2.6.32-ovz-el-alt130
Система обновлена до t7

В биосе виртуализацию включил.
# egrep '^flags.*(vmx|svm)' /proc/cpuinfo
Вываливает кучу всего.

Процессор: Intel(R) Core(TM) i7-4770 CPU @ 3.40GHz

После загрузки
# lsmod | grep kvm
пусто

Пробую руками:
# modprobe kvm
# modprobe kvm_intel
# lsmod | grep kvm
kvm_intel              55496  0
kvm                   337804  1 kvm_intel

# service libvirtd restart
# service libvirtd status
libvirtd is dead, but subsystem is locked

В логах проскакивает:
May  8 10:23:56 sh02 libvirtd: libvirtd shutdown succeeded
May  8 10:23:56 sh02 kernel: [   78.522395] virbr0: starting userspace 
STP failed, starting kernel STP
May  8 10:23:56 sh02 libvirtd: libvirtd startup succeeded

Пожалуйста, помогите кто чем может!!!

# rpm -qa | grep libvirt
libvirt-daemon-driver-secret-1.0.4-alt2
libvirt-qemu-common-1.0.4-alt2
libvirt-kvm-1.0.4-alt2
libvirt-daemon-1.0.4-alt2
libvirt-daemon-driver-nwfilter-1.0.4-alt2
libvirt-daemon-driver-storage-1.0.4-alt2
libvirt-daemon-driver-qemu-1.0.4-alt2
libvirt-daemon-config-nwfilter-1.0.4-alt2
libvirt-client-1.0.4-alt2
libvirt-daemon-driver-network-1.0.4-alt2
libvirt-daemon-config-network-1.0.4-alt2
libvirt-daemon-driver-nodedev-1.0.4-alt2
python-module-libvirt-1.0.4-alt2

# rpm -qa | grep kvm
libvirt-kvm-1.0.4-alt2
kernel-modules-kvm-ovz-el-2.6.32-alt130


-- 
С уважением,
Васюк Максим

Re: [Sysadmins] Незапускается libvirtd

[Konstantin Lepikhov]

Hi!

On 05/14/15, at 01:30:21 PM you wrote:

> Привет всем!
> Система установлена из стартер китс
> # uname -r
> 2.6.32-ovz-el-alt130
> Система обновлена до t7
> 
Не уверен, что kvm вообще работает в OpenVZ ядрах. Расскажите, зачем вам
такая конфигурация?

-- 
WBR et al.

Re: [Sysadmins] Незапускается libvirtd

[Rosavitskiy Valintin]

On 14.05.2015 11:24, Konstantin Lepikhov wrote:
> Hi!
>
> On 05/14/15, at 01:30:21 PM you wrote:
>
>> Привет всем!
>> Система установлена из стартер китс
>> # uname -r
>> 2.6.32-ovz-el-alt130
>> Система обновлена до t7
>>
> Не уверен, что kvm вообще работает в OpenVZ ядрах. Расскажите, зачем вам
> такая конфигурация?
>
KVM прерасно работает в OpenVZ ядрах. У нас практически все хардноды с 
такой конфигурацией (KVM + OpenVZ), t7 или p7.

Одна из них

[root@ua120 valintinr]# lsmod | grep kvm
kvm_intel              54426  9
kvm                   322687  1 kvm_intel
[root@ua120 valintinr]#

[root@ua120 valintinr]# service libvirtd status
libvirtd is running
[root@ua120 valintinr]#

[root@ua120 syslog]# service vz status
OpenVZ is running.
[root@ua120 syslog]#

[root@ua120 syslog]# vzlist -a
       CTID      NPROC STATUS    IP_ADDR         HOSTNAME
       1002      34         running   *                      ns3.*

[root@ua120 syslog]# virsh list --all
  ID    Имя                         Статус
----------------------------------------------------
  7     test_windows                   работает


[root@ua120 valintinr]# rpm -qa | grep libvirt
python-module-libvirt-1.0.4-alt2
libvirt-daemon-driver-network-1.0.4-alt2
libvirt-daemon-driver-nodedev-1.0.4-alt2
libvirt-daemon-config-nwfilter-1.0.4-alt2
libvirt-client-1.0.4-alt2
libvirt-daemon-1.0.4-alt2
libvirt-daemon-driver-storage-1.0.4-alt2
libvirt-daemon-driver-qemu-1.0.4-alt2
libvirt-daemon-driver-secret-1.0.4-alt2
libvirt-daemon-driver-nwfilter-1.0.4-alt2
libvirt-qemu-common-1.0.4-alt2
libvirt-daemon-config-network-1.0.4-alt2
libvirt-1.0.4-alt2
[root@ua120 valintinr]#

[root@ua120 valintinr]# rpm -qa | grep vz
vzquota-3.1-alt1
vzvalidate-0.1-alt1
vzdump-1.0-alt2.1
kernel-headers-modules-ovz-el-2.6.32-alt118
kernel-image-ovz-el-2.6.32-alt108
vzctl-4.1.2-alt1
kernel-modules-kvm-ovz-el-2.6.32-alt108
[root@ua120 valintinr]#

[root@ua120 syslog]# rpm -qa | grep kvm
kernel-modules-kvm-ovz-el-2.6.32-alt108
[root@ua120 syslog]#

В логах тоже самое при старте (другая харднода)

Apr 16 18:15:11 ua98 libvirtd: libvirtd startup succeeded
Apr 16 18:15:11 ua98 kernel: [   63.045872] virbr0: starting userspace 
STP failed, starting kernel STP
Apr 16 18:15:12 ua98 kernel: [   64.662656] device vnet0 entered 
promiscuous mode
Apr 16 18:15:12 ua98 kernel: [   64.663602] breth0: port 2(vnet0) 
entering learning state
Apr 16 18:15:13 ua98 kernel: [   65.441485] device vnet1 entered 
promiscuous mode
Apr 16 18:15:13 ua98 kernel: [   65.442407] breth0: port 3(vnet1) 
entering learning state

-- 
С уважением,
Валентин Росавицкий

Re: [Sysadmins] Незапускается libvirtd

[Viacheslav Dubrovskyi]

[-- Attachment #1: Type: text/plain, Size: 634 bytes --]

14.05.2015 11:57, Rosavitskiy Valintin пишет:
> On 14.05.2015 11:24, Konstantin Lepikhov wrote:
>> Hi!
>>
>> On 05/14/15, at 01:30:21 PM you wrote:
>>
>>> Привет всем!
>>> Система установлена из стартер китс
>>> # uname -r
>>> 2.6.32-ovz-el-alt130
>>> Система обновлена до t7
>>>
>> Не уверен, что kvm вообще работает в OpenVZ ядрах. Расскажите, зачем вам
>> такая конфигурация?
>>
> KVM прерасно работает в OpenVZ ядрах. У нас практически все хардноды с 
> такой конфигурацией (KVM + OpenVZ), t7 или p7.

В каком-то ядре было сломано. Но на 2.6.32-ovz-el-alt130 работает.
Проверьте что там с cgroups

-- 
WBR,
Viacheslav Dubrovskyi


[-- Attachment #2: Криптографическая подпись S/MIME --]
[-- Type: application/pkcs7-signature, Size: 3681 bytes --]

Re: [Sysadmins] Незапускается libvirtd

[Anton Gorlov]

14.05.2015 11:57, Rosavitskiy Valintin пишет:
> KVM прерасно работает в OpenVZ ядрах. У нас практически все хардноды с
> такой конфигурацией (KVM + OpenVZ), t7 или p7.
А если не секрет для чего подобный винегрет?

Re: [Sysadmins] Незапускается libvirtd

[Rosavitskiy Valintin]

On 14.05.2015 13:11, Anton Gorlov wrote:
> 14.05.2015 11:57, Rosavitskiy Valintin пишет:
>> KVM прерасно работает в OpenVZ ядрах. У нас практически все хардноды с
>> такой конфигурацией (KVM + OpenVZ), t7 или p7.
> А если не секрет для чего подобный винегрет?
>
> _______________________________________________
> Sysadmins mailing list
> Sysadmins@lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/sysadmins
Не вижу в этом ничего плохого.
Из плюсов:
- более эффективное задействование ресурсов сервера, тоесть легче 
продать все ресурсы сервера
- цена обслужования одного сервера будет дешевле чем двух серверов с 
конфигурацией пониже (как минимум электричества будет меньший расход)
Естественно это со стороны хостера, неудобства в администрировании не вижу.


У нас сейчас примерно так организовано что в одном ДЦ одна крупная 
харднода с KVM+OpenVZ (Xeon 2 x 5620 или 2 x 2620 или 2 x W5580, 32 или 
64 или 48 Gb RAM, 4-6 пар терабайтников в зеркале и пара SSD в зеркале, 
все на лвм-ах) и другие поменьше (где только OpenVZ или только KVM), 
например хостинг отдельно живет, копроративные сервисы тоже на отдельной 
ноде...
Так же в каждом ДЦ есть "большой" бэкап сервер, бэкапы каждой хардноды 
есть на всех бэкап серверах, вдруг одна нода сломается то можем 
"оперативно" поднять все в другом ДЦ. Возможно немного избыточно но зато 
можно спать спокойно :)

-- 
С уважением,
Валентин Росавицкий

Re: [Sysadmins] Незапускается libvirtd

[Konstantin Lepikhov]

Hi!

On 05/14/15, at 11:57:39 AM you wrote:

> On 14.05.2015 11:24, Konstantin Lepikhov wrote:
> > Hi!
> >
> > On 05/14/15, at 01:30:21 PM you wrote:
> >
> >> Привет всем!
> >> Система установлена из стартер китс
> >> # uname -r
> >> 2.6.32-ovz-el-alt130
> >> Система обновлена до t7
> >>
> > Не уверен, что kvm вообще работает в OpenVZ ядрах. Расскажите, зачем вам
> > такая конфигурация?
> >
> KVM прерасно работает в OpenVZ ядрах. У нас практически все хардноды с 
> такой конфигурацией (KVM + OpenVZ), t7 или p7.
> 
Интересно, буду знать.

А в ALTLinux kvm модули это просто что-то запакованное отдельно от ядра,
но из того же ядра, или они собираются из разных исходников? Просто если
это el ядра, то там много патчей и бэкпортов от RH которых нет в апстриме.

-- 
WBR et al.

Re: [Sysadmins] Незапускается libvirtd

[Rosavitskiy Valintin]

On 14.05.2015 13:51, Konstantin Lepikhov wrote:
> Hi!
>
> On 05/14/15, at 11:57:39 AM you wrote:
>
>> On 14.05.2015 11:24, Konstantin Lepikhov wrote:
>>> Hi!
>>>
>>> On 05/14/15, at 01:30:21 PM you wrote:
>>>
>>>> Привет всем!
>>>> Система установлена из стартер китс
>>>> # uname -r
>>>> 2.6.32-ovz-el-alt130
>>>> Система обновлена до t7
>>>>
>>> Не уверен, что kvm вообще работает в OpenVZ ядрах. Расскажите, зачем вам
>>> такая конфигурация?
>>>
>> KVM прерасно работает в OpenVZ ядрах. У нас практически все хардноды с
>> такой конфигурацией (KVM + OpenVZ), t7 или p7.
>>
> Интересно, буду знать.
>
> А в ALTLinux kvm модули это просто что-то запакованное отдельно от ядра,
> но из того же ядра, или они собираются из разных исходников? Просто если
> это el ядра, то там много патчей и бэкпортов от RH которых нет в апстриме.
>
>
Из того же ядра, если ничего не путаю.

-- 
С уважением,
Валентин Росавицкий

Re: [Sysadmins] Незапускается libvirtd

[Васюк Максим Анатольевич]

Попробовал установить с диска в включенной галочкой "Виртуализация KVM" 
не запускается, получается их коробки не работает.

14.05.2015 16:03, Viacheslav Dubrovskyi пишет:
> В каком-то ядре было сломано. Но на 2.6.32-ovz-el-alt130 работает.
> Проверьте что там с cgroups
Пакет cgroup не был установлен, после установки картина не поменялась. 
Но кажется на первом рабочем серваке таких проблем не помню.

14.05.2015 14:57, Rosavitskiy Valintin пишет:

> [root@ua120 valintinr]# rpm -qa | grep libvirt
> python-module-libvirt-1.0.4-alt2
> libvirt-daemon-driver-network-1.0.4-alt2
> libvirt-daemon-driver-nodedev-1.0.4-alt2
> libvirt-daemon-config-nwfilter-1.0.4-alt2
> libvirt-client-1.0.4-alt2
> libvirt-daemon-1.0.4-alt2
> libvirt-daemon-driver-storage-1.0.4-alt2
> libvirt-daemon-driver-qemu-1.0.4-alt2
> libvirt-daemon-driver-secret-1.0.4-alt2
> libvirt-daemon-driver-nwfilter-1.0.4-alt2
> libvirt-qemu-common-1.0.4-alt2
> libvirt-daemon-config-network-1.0.4-alt2
> libvirt-1.0.4-alt2
> [root@ua120 valintinr]#

> [root@ua120 syslog]# rpm -qa | grep kvm
> kernel-modules-kvm-ovz-el-2.6.32-alt108
> [root@ua120 syslog]#
Из всего этого списка не был установлен только libvirt-1.0.4-alt2, но 
видимо это виртуальный пакет, т.к. при его установке больше ничего не 
поставилось и картина не поменялась.

-- 
С уважением,
Васюк Максим