[Sysadmins] Квоты для пользователей VE

[Sysadmins] Квоты для пользователей VE

[Eugene Prokopiev]

Здравствуйте!

А работают ли квоты для пользователей внутри VE? Интересует как simfs, 
так и примонтированные ext3/xfs. В первом случае:

# cat /etc/mtab
simfs / simfs rw 0 0
proc /proc proc rw 0 0
sysfs /sys sysfs rw 0 0
devpts /dev/pts devpts rw,nosuid,noexec 0 0
# quota
#

В принципе логично, т.к. ни у одной фс нет параметра usrquota и 
непонятно, куда его для simfs писать.

Во втором:

# cat /etc/mtab
simfs / simfs rw 0 0
ext3 /home ext3 rw,data=ordered,usrquota 0 0
ext3 /var/ftp ext3 rw,data=ordered,usrquota 0 0
proc /proc proc rw 0 0
sysfs /sys sysfs rw 0 0
devpts /dev/pts devpts rw,nosuid,noexec 0 0
# quota
quota: Cannot stat() mounted device ext3: No such file or directory
quota: Cannot stat() mounted device ext3: No such file or directory
#

Тут usrquota есть, но прописан в HN. Однако теперь уже чего-то не 
хватает в VE.

-- 
С уважением,
Прокопьев Евгений

Re: [Sysadmins] Квоты для пользователей VE

[Michael Shigorin]

On Fri, Nov 02, 2007 at 05:33:50PM +0300, Eugene Prokopiev wrote:
> А работают ли квоты для пользователей внутри VE?

ovz'шные, не имени quota.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [Sysadmins] Квоты для пользователей VE

[Peter V. Saveliev]

В сообщении от Friday 02 November 2007 17:36:18 Michael Shigorin написал(а):
> On Fri, Nov 02, 2007 at 05:33:50PM +0300, Eugene Prokopiev wrote:
> > А работают ли квоты для пользователей внутри VE?
>
> ovz'шные, не имени quota.

можно и quota -- если развести разные VE по разным LVM-разделам. Неплохая, 
надо отметить, практика, особенно в свете бэкапов и т.п.

-- 
Peter V. Saveliev

Re: [Sysadmins] Квоты для пользователей VE

[Eugene Prokopiev]

Michael Shigorin пишет:
> On Fri, Nov 02, 2007 at 05:33:50PM +0300, Eugene Prokopiev wrote:
>> А работают ли квоты для пользователей внутри VE?
> 
> ovz'шные, не имени quota.

так ovz'шные ведь не по юзерам, а на контейнер целиком, нет?

если нет, то где читать?

-- 
С уважением,
Прокопьев Евгений

Re: [Sysadmins] Квоты для пользователей VE

[Eugene Prokopiev]

Peter V. Saveliev пишет:
> В сообщении от Friday 02 November 2007 17:36:18 Michael Shigorin написал(а):
>> On Fri, Nov 02, 2007 at 05:33:50PM +0300, Eugene Prokopiev wrote:
>>> А работают ли квоты для пользователей внутри VE?
>> ovz'шные, не имени quota.
> 
> можно и quota -- если развести разные VE по разным LVM-разделам. Неплохая, 
> надо отметить, практика, особенно в свете бэкапов и т.п.

И как можно quota? Что я делаю не так?

-- 
С уважением,
Прокопьев Евгений

Re: [Sysadmins] Квоты для пользователей VE

[Konstantin A. Lepikhov]

Hi Eugene!

Friday 02, at 05:58:30 PM you wrote:

> Michael Shigorin пишет:
> > On Fri, Nov 02, 2007 at 05:33:50PM +0300, Eugene Prokopiev wrote:
> >> А работают ли квоты для пользователей внутри VE?
> > 
> > ovz'шные, не имени quota.
> 
> так ovz'шные ведь не по юзерам, а на контейнер целиком, нет?
нет, монтируйте раздел с контейнерами с параметром quota, и получаете
поддержку linuxquota внутри VE. Вы наверное путаете с disklimits.

> 
> если нет, то где читать?
linuxquota работает только с fs, поддерживающих ее, например xfs имеет
свою релизацию квот, следовательно, на  разделе с xfs квоты внутри VE
работать не будут.

-- 
WBR et al.

Re: [Sysadmins] Квоты для пользователей VE

[Eugene Prokopiev]

Konstantin A. Lepikhov пишет:
> Hi Eugene!
> 
> Friday 02, at 05:58:30 PM you wrote:
> 
>> Michael Shigorin пишет:
>>> On Fri, Nov 02, 2007 at 05:33:50PM +0300, Eugene Prokopiev wrote:
>>>> А работают ли квоты для пользователей внутри VE?
>>> ovz'шные, не имени quota.
>> так ovz'шные ведь не по юзерам, а на контейнер целиком, нет?
> нет, монтируйте раздел с контейнерами с параметром quota, и получаете
> поддержку linuxquota внутри VE. Вы наверное путаете с disklimits.

т.е. все-таки "имени quota", а не какие-то специфические ovz'шные?

однако в HN:

# mount | grep quota
/dev/mapper/lvm-files on /data/files type ext3 (rw,usrquota)
/dev/mapper/lvm-vz on /data/vz type ext3 (rw,usrquota)

в VE, живущем на разделе /dev/mapper/lvm-vz:

# mount
simfs on / type simfs (rw)
proc on /proc type proc (rw)
sysfs on /sys type sysfs (rw)
devpts on /dev/pts type devpts (rw,nosuid,noexec)

насколько я понимаю, все утилиты из пакета quota работают с фс, у 
которых в параметрах монтирования имеется usrquota, а таких нет

если есть кусок другой фс с usrquota, смонтированной в VE с помощью 
bind, то утилиты из пакета quota видят usrquota, но работать 
отказываются, ругательства я в первом письме приводил

т.е. не работают, получается, оба варианта :(

>> если нет, то где читать?
> linuxquota работает только с fs, поддерживающих ее, например xfs имеет
> свою релизацию квот, следовательно, на  разделе с xfs квоты внутри VE
> работать не будут.

ну с xfs понятно ;)

-- 
С уважением,
Прокопьев Евгений

Re: [Sysadmins] Квоты для пользователей VE

[Konstantin A. Lepikhov]

Hi Eugene!

Saturday 03, at 01:53:47 PM you wrote:

> Konstantin A. Lepikhov пишет:
> > Hi Eugene!
> > 
> > Friday 02, at 05:58:30 PM you wrote:
> > 
> >> Michael Shigorin пишет:
> >>> On Fri, Nov 02, 2007 at 05:33:50PM +0300, Eugene Prokopiev wrote:
> >>>> А работают ли квоты для пользователей внутри VE?
> >>> ovz'шные, не имени quota.
> >> так ovz'шные ведь не по юзерам, а на контейнер целиком, нет?
> > нет, монтируйте раздел с контейнерами с параметром quota, и получаете
> > поддержку linuxquota внутри VE. Вы наверное путаете с disklimits.
> 
> т.е. все-таки "имени quota", а не какие-то специфические ovz'шные?
> 
> однако в HN:
> 
> # mount | grep quota
> /dev/mapper/lvm-files on /data/files type ext3 (rw,usrquota)
> /dev/mapper/lvm-vz on /data/vz type ext3 (rw,usrquota)
> 
> в VE, живущем на разделе /dev/mapper/lvm-vz:
> 
> # mount
> simfs on / type simfs (rw)
> proc on /proc type proc (rw)
> sysfs on /sys type sysfs (rw)
> devpts on /dev/pts type devpts (rw,nosuid,noexec)
> 
> насколько я понимаю, все утилиты из пакета quota работают с фс, у 
> которых в параметрах монтирования имеется usrquota, а таких нет
> 
> если есть кусок другой фс с usrquota, смонтированной в VE с помощью 
> bind, то утилиты из пакета quota видят usrquota, но работать 
> отказываются, ругательства я в первом письме приводил
> 
> т.е. не работают, получается, оба варианта :(
man vzctl |grep --quotaugidlimit
по-умолчанию данный параметр выставлен в 0, т.е. linuxquota внутри VE не
считается. Если поставить что-то более осмысленное, например 1000 или 100,
то потом все начинает работать:

$ vzctl set 1002 --quotaugidlimit 1000 --save
$ vzctl restart 1002
$ vzctl enter 1002
entered into VE 1002
root@trustix /# su -
root@trustix ~# repquota -a
*** Report for user quotas on device /dev/simfs
....

-- 
WBR et al.

Re: [Sysadmins] Квоты для пользователей VE

[Eugene Prokopiev]

> man vzctl |grep --quotaugidlimit

спасибо, с simfs понятно

но почему квоты не работают на файловых системах, смонтированных с 
помощью bind?

-- 
С уважением,
Прокопьев Евгений

Re: [Sysadmins] Квоты для пользователей VE

[Eugene Prokopiev]

Konstantin A. Lepikhov пишет:
> Hi Eugene!
> 
> Saturday 03, at 05:47:37 PM you wrote:
> 
>>> man vzctl |grep --quotaugidlimit
>> спасибо, с simfs понятно
>>
>> но почему квоты не работают на файловых системах, смонтированных с 
>> помощью bind?
> потому что видны не как simfs, т.е. по факту не принадлежат данному VE

логично ... т.е. квоты, выставленные в HN (если бы там были такие же 
пользователи, как и в VE), наверное работали бы ...

хорошо, а можно ли смонтировать их как simfs, т.е. внутри VE не только / 
иметь на simfs, но и /home какой-нибудь?

-- 
С уважением,
Прокопьев Евгений

Re: [Sysadmins] Квоты для пользователей VE

[Konstantin A. Lepikhov]

Hi Eugene!

Saturday 03, at 05:47:37 PM you wrote:

> > man vzctl |grep --quotaugidlimit
> 
> спасибо, с simfs понятно
> 
> но почему квоты не работают на файловых системах, смонтированных с 
> помощью bind?
потому что видны не как simfs, т.е. по факту не принадлежат данному VE

-- 
WBR et al.

Re: [Sysadmins] Квоты для пользователей VE

[Michael Shigorin]

On Sat, Nov 03, 2007 at 04:31:15PM +0300, Konstantin A. Lepikhov wrote:
> man vzctl |grep --quotaugidlimit
> по-умолчанию данный параметр выставлен в 0, т.е. linuxquota
> внутри VE не считается. Если поставить что-то более
> осмысленное, например 1000 или 100, то потом все начинает
> работать:

Спасибо!

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [Sysadmins] Квоты для пользователей VE

[Konstantin A. Lepikhov]

Hi Eugene!

Saturday 03, at 06:38:27 PM you wrote:

> Konstantin A. Lepikhov пишет:
> > Hi Eugene!
> > 
> > Saturday 03, at 05:47:37 PM you wrote:
> > 
> >>> man vzctl |grep --quotaugidlimit
> >> спасибо, с simfs понятно
> >>
> >> но почему квоты не работают на файловых системах, смонтированных с 
> >> помощью bind?
> > потому что видны не как simfs, т.е. по факту не принадлежат данному VE
> 
> логично ... т.е. квоты, выставленные в HN (если бы там были такие же 
> пользователи, как и в VE), наверное работали бы ...
> 
> хорошо, а можно ли смонтировать их как simfs, т.е. внутри VE не только / 
> иметь на simfs, но и /home какой-нибудь?
теоретически (не проверял) если поиграться с разделом через vzquota и
поставить туда принадлежность какому-либо VE, то внутри этот раздел будет
виден через simfs.

-- 
WBR et al.

Re: [Sysadmins] Квоты для пользователей VE

[Eugene Prokopiev]

Konstantin A. Lepikhov пишет:
> Hi Eugene!
> 
> Saturday 03, at 06:38:27 PM you wrote:
> 
>> Konstantin A. Lepikhov пишет:
>>> Hi Eugene!
>>>
>>> Saturday 03, at 05:47:37 PM you wrote:
>>>
>>>>> man vzctl |grep --quotaugidlimit
>>>> спасибо, с simfs понятно
>>>>
>>>> но почему квоты не работают на файловых системах, смонтированных с 
>>>> помощью bind?
>>> потому что видны не как simfs, т.е. по факту не принадлежат данному VE
>> логично ... т.е. квоты, выставленные в HN (если бы там были такие же 
>> пользователи, как и в VE), наверное работали бы ...
>>
>> хорошо, а можно ли смонтировать их как simfs, т.е. внутри VE не только / 
>> иметь на simfs, но и /home какой-нибудь?
> теоретически (не проверял) если поиграться с разделом через vzquota и
> поставить туда принадлежность какому-либо VE, то внутри этот раздел будет
> виден через simfs.

Вряд ли это для продакшн, но все равно интересно ...

А у раздела, на котором живут VE, тоже выставлена эта принадлежность? И 
где эта информация хранится хранится? В каких-то служебных структурах 
файловой системы?

И как ее можно самому выставить через vzquota? В man vzquota об этом не 
сказано, либо я не понял :(

-- 
С уважением,
Прокопьев Евгений

Re: [Sysadmins] Квоты для пользователей VE

[Konstantin A. Lepikhov]

Hi Eugene!

Saturday 03, at 10:01:35 PM you wrote:

<skip>
> > теоретически (не проверял) если поиграться с разделом через vzquota и
> > поставить туда принадлежность какому-либо VE, то внутри этот раздел будет
> > виден через simfs.
> 
> Вряд ли это для продакшн, но все равно интересно ...
> 
> А у раздела, на котором живут VE, тоже выставлена эта принадлежность? И 
> где эта информация хранится хранится? В каких-то служебных структурах 
> файловой системы?
нет, в служебном файле vzquota - /var/lib/vz/quota/. Поскольку quota_id не
зависит от VE ID, внутри VE может быть несколько с разными ID:

The quota_id must be numeric-only identifier. Note, that  Quota  ID  is
not the same as VE ID.  One VE can mount several filesystems and each of
them can have it's own quotas.


> 
> И как ее можно самому выставить через vzquota? В man vzquota об этом не 
> сказано, либо я не понял :(
указать vzquota какой ID и на что ставить квоты. (см. параметр -p path)

-- 
WBR et al.

Re: [Sysadmins] Квоты для пользователей VE

[Eugene Prokopiev]

Konstantin A. Lepikhov пишет:
> Hi Eugene!
> 
> Saturday 03, at 10:01:35 PM you wrote:
> 
> <skip>
>>> теоретически (не проверял) если поиграться с разделом через vzquota и
>>> поставить туда принадлежность какому-либо VE, то внутри этот раздел будет
>>> виден через simfs.
>> Вряд ли это для продакшн, но все равно интересно ...
>>
>> А у раздела, на котором живут VE, тоже выставлена эта принадлежность? И 
>> где эта информация хранится хранится? В каких-то служебных структурах 
>> файловой системы?
> нет, в служебном файле vzquota - /var/lib/vz/quota/. Поскольку quota_id не
> зависит от VE ID, внутри VE может быть несколько с разными ID:
> 
> The quota_id must be numeric-only identifier. Note, that  Quota  ID  is
> not the same as VE ID.  One VE can mount several filesystems and each of
> them can have it's own quotas.

долго искал источник цитаты ...

похоже это из vzquota 3.0.11, а в бранче только 3.0.9 ;)

>> И как ее можно самому выставить через vzquota? В man vzquota об этом не 
>> сказано, либо я не понял :(
> указать vzquota какой ID и на что ставить квоты. (см. параметр -p path)

как узнать, какая файловая система квотируется определенным quota_id? 
vzquota show, vzquota stat и vzdqdump ничего об этом не говорят

как VE узнает, что некий quota_id имеет к нему отношение, ведь файловая 
система, на которой он живет, может квотироваться несколькими quota_id?

-- 
С уважением,
Прокопьев Евгений