[sisyphus] Сжатые модули ядра

[sisyphus] Сжатые модули ядра

[Anton V. Boyarshinov]

Добрый день
Вообще, уже с незапамятных времён модули ядра Linux можно сжимать. Но
мы это почему-то не делали, хотя, насколько я могу судить, весть стэк
наших технологий, включая сборку initrd, сборку и установку
дистрибутивов к этому готов.

В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
всем желающим попробовать его до того, как оно попадёт в Сизиф.

Антон

Re: [sisyphus] Сжатые модули ядра

[Валерий Иноземцев]

[-- Attachment #1.1: Type: text/plain, Size: 940 bytes --]

30.01.2018 14:59, Anton V. Boyarshinov пишет:
> Добрый день
> Вообще, уже с незапамятных времён модули ядра Linux можно сжимать. Но
> мы это почему-то не делали, хотя, насколько я могу судить, весть стэк
> наших технологий, включая сборку initrd, сборку и установку
> дистрибутивов к этому готов.
> 
> В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
> всем желающим попробовать его до того, как оно попадёт в Сизиф.

че его пробовать? я в
http://git.altlinux.org/people/shrek/packages/?p=kernel-image.git;a=summary
еще в 2011 году "так сто раз делал"

-- 
Valery V. Inozemtsev


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 181 bytes --]

Re: [sisyphus] Сжатые модули ядра

[Sergey Bolshakov]

>>>>> "Anton" == Anton V Boyarshinov <boyarsh-u2l5PoMzF/Vg9hUCZPvPmw@public.gmane.org> writes:

 > Добрый день
 > Вообще, уже с незапамятных времён модули ядра Linux можно сжимать. Но
 > мы это почему-то не делали, хотя, насколько я могу судить, весть стэк
 > наших технологий, включая сборку initrd, сборку и установку
 > дистрибутивов к этому готов.

 > В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
 > всем желающим попробовать его до того, как оно попадёт в Сизиф.

А зачем это (сжимать) сейчас делать ? Диски меньше не стали, кажется.

-- 

Re: [sisyphus] Сжатые модули ядра

[Anton Farygin]

30.01.2018 14:59, Anton V. Boyarshinov пишет:
> Добрый день
> Вообще, уже с незапамятных времён модули ядра Linux можно сжимать. Но
> мы это почему-то не делали, хотя, насколько я могу судить, весть стэк
> наших технологий, включая сборку initrd, сборку и установку
> дистрибутивов к этому готов.
>
> В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
> всем желающим попробовать его до того, как оно попадёт в Сизиф.
>
Да, хороший вопрос. А зачем это делать ?

Re: [sisyphus] Сжатые модули ядра

[Anton V. Boyarshinov]

On Tue, 30 Jan 2018 15:11:15 +0300 Sergey Bolshakov wrote:

> А зачем это (сжимать) сейчас делать ? Диски меньше не стали, кажется.
Потому что можем?
Диски меньше не стали, но 40мб вместо 200 (умножаем на количество
установленных ядер) и при этом практически бесплатно -- почему бы и нет?

Re: [sisyphus] Сжатые модули ядра

[Michael Shigorin]

On Tue, Jan 30, 2018 at 03:12:50PM +0300, Anton Farygin wrote:
> > В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
> > всем желающим попробовать его до того, как оно попадёт в Сизиф.
> Да, хороший вопрос. А зачем это делать ?

Зачем пробовать? -- ну мало ли чего.
Зачем сжимать? -- так у нас пять ядер на гиг.

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [sisyphus] Сжатые модули ядра

[Anton V. Boyarshinov]

On Tue, 30 Jan 2018 15:11:15 +0300 Sergey Bolshakov wrote:


> А зачем это (сжимать) сейчас делать ? Диски меньше не стали, кажется.
Кстати, диски меньше стали... SSD зачастую вполне себе меньше былых
HDD...

Re: [sisyphus] Сжатые модули ядра

[Anton Farygin]

30.01.2018 15:22, Michael Shigorin пишет:
> On Tue, Jan 30, 2018 at 03:12:50PM +0300, Anton Farygin wrote:
>>> В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
>>> всем желающим попробовать его до того, как оно попадёт в Сизиф.
>> Да, хороший вопрос. А зачем это делать ?
> Зачем пробовать? -- ну мало ли чего.
> Зачем сжимать? -- так у нас пять ядер на гиг.

Ну и ладно. Пять и пять. Вовремя удаляй лишнее, нечего хлам оставлять.

Гиг и гиг. Не вижу проблемы. даже на SSD, и даже на 32Gb - всего хватает.

И ещё сразу вопрос - как сжатие будет работать с подписью модулей и ядра ?

Re: [sisyphus] Сжатые модули ядра

[Anton Farygin]

30.01.2018 15:25, Anton V. Boyarshinov пишет:
> On Tue, 30 Jan 2018 15:11:15 +0300 Sergey Bolshakov wrote:
>
>
>> А зачем это (сжимать) сейчас делать ? Диски меньше не стали, кажется.
> Кстати, диски меньше стали... SSD зачастую вполне себе меньше былых
> HDD...
Но даже на 32Gb SSD я не замечаю проблем с отстуствием сжатия у модулей 
ядра.

Кстати, есть вероятность что на x86_64 система с пожатыми модулями будет 
загружаться чуть чуть быстрее.

Re: [sisyphus] Сжатые модули ядра

[Anton V. Boyarshinov]

> И ещё сразу вопрос - как сжатие будет работать с подписью модулей и
> ядра ?
Думаю, нормально. Но вскрытие покажет :-D

Re: [sisyphus] Сжатые модули ядра

[В.А. Илларионов]

30.01.2018 20:14, Anton V. Boyarshinov пишет:
> On Tue, 30 Jan 2018 15:11:15 +0300 Sergey Bolshakov wrote:
>
>> А зачем это (сжимать) сейчас делать ? Диски меньше не стали, кажется.
> Потому что можем?
> Диски меньше не стали, но 40мб вместо 200 (умножаем на количество
> установленных ядер) и при этом практически бесплатно -- почему бы и нет?

Поддерживаю. Особенно если система живёт с тех лет, когда ядра были куда 
стройнее, а /boot отдельным разделом.

Re: [sisyphus] Сжатые модули ядра

[Michael Shigorin]

On Tue, Jan 30, 2018 at 04:05:27PM +0300, Anton Farygin wrote:
> Гиг и гиг. Не вижу проблемы. даже на SSD, и даже на 32Gb - всего хватает.

Они бывают и по 16, и даже по 8 гигов (SATA DOM в TONK).
Ну и вообще удивил -- когда можно на шару сделать лучше,
тогда-то почему не сделать?

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [sisyphus] Сжатые модули ядра

[Alexey Tourbin]

2018-01-30 14:59 GMT+03:00 Anton V. Boyarshinov <boyarsh@altlinux.org>:
> Добрый день
> Вообще, уже с незапамятных времён модули ядра Linux можно сжимать. Но
> мы это почему-то не делали, хотя, насколько я могу судить, весть стэк
> наших технологий, включая сборку initrd, сборку и установку
> дистрибутивов к этому готов.
>
> В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
> всем желающим попробовать его до того, как оно попадёт в Сизиф.

-find %buildroot -name '*.ko' | xargs gzip
+find %buildroot -name '*.ko' | xargs gzip -9n

Re: [sisyphus] Сжатые модули ядра

[Michael Shigorin]

On Wed, Jan 31, 2018 at 05:43:54PM +0800, В.А. Илларионов wrote:
> Поддерживаю. Особенно если система живёт с тех лет, когда ядра
> были куда стройнее, а /boot отдельным разделом.

Это не про /boot (в initrd они и так сверху прижимаются),
а про небольшой корень скорее.  Вне зависимости от того,
родился он таким или в принципе больше не получится.

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [sisyphus] Сжатые модули ядра

[Igor Zubkov]

2018-01-31 11:55 GMT+02:00 Michael Shigorin:
> On Tue, Jan 30, 2018 at 04:05:27PM +0300, Anton Farygin wrote:
>> Гиг и гиг. Не вижу проблемы. даже на SSD, и даже на 32Gb - всего хватает.
>
> Они бывают и по 16, и даже по 8 гигов (SATA DOM в TONK).
> Ну и вообще удивил -- когда можно на шару сделать лучше,
> тогда-то почему не сделать?

Вот маленький (и дорогой) SSD от Intel.
https://ark.intel.com/products/97544/Intel-Optane-Memory-Series-16GB-M_2-80mm-PCIe-3_0-20nm-3D-Xpoint

Как раз на 16 Gb.

-- 
Igor Zubkov
http://hi.im/ice

Re: [sisyphus] Сжатые модули ядра

[Michael Shigorin]

On Wed, Jan 31, 2018 at 12:55:46PM +0300, Alexey Tourbin wrote:
> > В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
> > всем желающим попробовать его до того, как оно попадёт в Сизиф.
> -find %buildroot -name '*.ko' | xargs gzip
> +find %buildroot -name '*.ko' | xargs gzip -9n

-gzip
+xz

?

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [sisyphus] Сжатые модули ядра

[Anton Farygin]

31.01.2018 12:55, Michael Shigorin пишет:
> On Tue, Jan 30, 2018 at 04:05:27PM +0300, Anton Farygin wrote:
>> Гиг и гиг. Не вижу проблемы. даже на SSD, и даже на 32Gb - всего хватает.
> Они бывают и по 16, и даже по 8 гигов (SATA DOM в TONK).
> Ну и вообще удивил -- когда можно на шару сделать лучше,
> тогда-то почему не сделать?
Обычно всё, что лучше -  что то ломает хорошее ;)

Re: [sisyphus] Сжатые модули ядра

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 711 bytes --]

On Wed, Jan 31, 2018 at 12:55:46PM +0300, Alexey Tourbin wrote:
> 2018-01-30 14:59 GMT+03:00 Anton V. Boyarshinov <boyarsh@altlinux.org>:
> > Добрый день
> > Вообще, уже с незапамятных времён модули ядра Linux можно сжимать. Но
> > мы это почему-то не делали, хотя, насколько я могу судить, весть стэк
> > наших технологий, включая сборку initrd, сборку и установку
> > дистрибутивов к этому готов.
> >
> > В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
> > всем желающим попробовать его до того, как оно попадёт в Сизиф.
> 
> -find %buildroot -name '*.ko' | xargs gzip
> +find %buildroot -name '*.ko' | xargs gzip -9n

+1

Кстати, а zstd или xz оно умеет?


-- 
ldv

[-- Attachment #2: signature.asc --]
[-- Type: application/pgp-signature, Size: 801 bytes --]

Re: [sisyphus] Сжатые модули ядра

[Валерий Иноземцев]

[-- Attachment #1.1: Type: text/plain, Size: 1756 bytes --]

31.01.2018 14:14, Dmitry V. Levin пишет:
> On Wed, Jan 31, 2018 at 12:55:46PM +0300, Alexey Tourbin wrote:
>> 2018-01-30 14:59 GMT+03:00 Anton V. Boyarshinov <boyarsh@altlinux.org>:
>>> Добрый день
>>> Вообще, уже с незапамятных времён модули ядра Linux можно сжимать. Но
>>> мы это почему-то не делали, хотя, насколько я могу судить, весть стэк
>>> наших технологий, включая сборку initrd, сборку и установку
>>> дистрибутивов к этому готов.
>>>
>>> В задании #198605 собрано ядро std-def со сжатыми модулями, предлагаю
>>> всем желающим попробовать его до того, как оно попадёт в Сизиф.
>>
>> -find %buildroot -name '*.ko' | xargs gzip
>> +find %buildroot -name '*.ko' | xargs gzip -9n
> 
> +1
> 
> Кстати, а zstd или xz оно умеет?

http://git.altlinux.org/people/shrek/packages/?p=kernel-image.git;a=blob;f=init/Kconfig;h=235c7a2c0d2004f1121b7d98f4140683ab45ef53;hb=f9566d2f6d2bebf323d39015988fc23efd22be93

2000 choice
2001         prompt "Compression algorithm"
2002         depends on MODULE_COMPRESS
2003         default MODULE_COMPRESS_GZIP
2004         help
2005           This determines which sort of compression will be used during
2006           'make modules_install'.
2007
2008           GZIP (default) and XZ are supported.
2009
2010 config MODULE_COMPRESS_GZIP
2011         bool "GZIP"
2012
2013 config MODULE_COMPRESS_XZ
2014         bool "XZ"
2015
2016 endchoice


-- 
Valery V. Inozemtsev


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 181 bytes --]

Re: [sisyphus] Сжатые модули ядра

[Michael A. Kangin]

On 01/31/2018 10:58 AM, Igor Zubkov wrote:

> Вот маленький (и дорогой) SSD от Intel.
> Как раз на 16 Gb.

Замечательно, наверное, будет для bcache. Со скоростью оптана и 
безграничной ёмкостью HDD.

Re: [sisyphus] Сжатые модули ядра

[Anton Farygin]

02.02.2018 10:42, Michael A. Kangin пишет:
> On 01/31/2018 10:58 AM, Igor Zubkov wrote:
>
>> Вот маленький (и дорогой) SSD от Intel.
>> Как раз на 16 Gb.
>
> Замечательно, наверное, будет для bcache. Со скоростью оптана и 
> безграничной ёмкостью HDD.
Да, но я так и не понял какой ресурс у оптана. Если он умрёт за полгода, 
наверное это не будет замечательно.