[Sysadmins] проблема с utf8 и proftpd

[Sysadmins] проблема с utf8 и proftpd

[Serg Rychka]

Приветствую!

Есть проблема с отображением кирилицы в системе. Имена файлов в
cp1251 отображаются вопросами. Изменения локали в
/etc/sysconfig/i18n ничего не дают.

Путей решения (десктоп-часть не предлагать) не нашел (может
плохо искал).
Как вариант решения советуют на wiki использовать версию proftpd
1.3.1 с модулем LANG, но ее еще даже в сизифе нет...

Подскажите - кто как решал подобную проблему?

-- 
С наилучшими пожеланиями,
                  _ _
Сергей Рычка       |    ДонНТУ, Системный/сетевой администратор
[ RSV0-UANIC ]    _|_   тел. +38 062 3355701, e-mail: rsv@donntu.edu.ua

Re: [Sysadmins] проблема с utf8 и proftpd

[Denis Klimov]

On Mon, 14 Jan 2008 14:29:04 +0200 (EET) Serg Rychka wrote:

> Приветствую!
> 
> Есть проблема с отображением кирилицы в системе. Имена файлов в
> cp1251 отображаются вопросами. Изменения локали в
> /etc/sysconfig/i18n ничего не дают.
> 
> Путей решения (десктоп-часть не предлагать) не нашел (может
> плохо искал).
> Как вариант решения советуют на wiki использовать версию proftpd
> 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
> 
> Подскажите - кто как решал подобную проблему?


Выдержка из конфига proftpd:
# local <-> remote charset conversion
#CharsetLocal KOI8R
#CharsetRemote WINDOWS-1251

--
Denis Klimov 
zver

Re: [Sysadmins] проблема с utf8 и proftpd

[Serg Rychka]

On Mon, 14 Jan 2008, Denis Klimov wrote:

> On Mon, 14 Jan 2008 14:29:04 +0200 (EET) Serg Rychka wrote:
>
> > Приветствую!
> >
> > Есть проблема с отображением кирилицы в системе. Имена файлов в
> > cp1251 отображаются вопросами. Изменения локали в
> > /etc/sysconfig/i18n ничего не дают.
> >
> > Путей решения (десктоп-часть не предлагать) не нашел (может > плохо искал).
> > Как вариант решения советуют на wiki использовать версию proftpd
> > 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
> >
> > Подскажите - кто как решал подобную проблему?
>
>
> Выдержка из конфига proftpd:
> # local <-> remote charset conversion
> #CharsetLocal KOI8R
> #CharsetRemote WINDOWS-1251
>

Это уже пробовал. Не помагает. Как в консоли сервера, так и на
клиентских машинах вместо русских букв вопросы. Я бы сказал что
корень проблемы в локали консоли, изменение которой не дает
результата...

-- 
С наилучшими пожеланиями,
                  _ _
Сергей Рычка       |    ДонНТУ, Системный/сетевой администратор
[ RSV0-UANIC ]    _|_   тел. +38 062 3355701, e-mail: rsv@donntu.edu.ua

Re: [Sysadmins] проблема с utf8 и proftpd

[Denis Klimov]

On Mon, 14 Jan 2008 15:35:22 +0200 (EET) Serg Rychka wrote:

> Это уже пробовал. Не помагает. Как в консоли сервера, так и на
> клиентских машинах вместо русских букв вопросы. Я бы сказал что
> корень проблемы в локали консоли, изменение которой не дает
> результата...


Ну не знаю.. когда был под FC fs была как раз в кодировке cp1251. Потом
переходил на Debian и приходилось патчить proftpd, а при переходе на
ALT с радостью заметил что это уже есть. Это мне и помогло.

--
Denis Klimov 
zver

Re: [Sysadmins] проблема с utf8 и proftpd

[Pavlov Konstantin]

[-- Attachment #1: Type: text/plain, Size: 644 bytes --]

On Mon, Jan 14, 2008 at 02:29:04PM +0200, Serg Rychka wrote:
> Приветствую!
> 
> Есть проблема с отображением кирилицы в системе. Имена файлов в
> cp1251 отображаются вопросами. Изменения локали в
> /etc/sysconfig/i18n ничего не дают.
> 
> Путей решения (десктоп-часть не предлагать) не нашел (может
> плохо искал).
> Как вариант решения советуют на wiki использовать версию proftpd
> 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
> 
> Подскажите - кто как решал подобную проблему?

Нужно собирать новую версию, до 1.3 поддержки UTF-8 в proftpd не было.

-- 
<drF_ckoff> вы мне мозги не парьте, они у меня и так слабые

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

Re: [Sysadmins] проблема с utf8

[Serg Rychka]

On Mon, 14 Jan 2008, Pavlov Konstantin wrote:

> On Mon, Jan 14, 2008 at 02:29:04PM +0200, Serg Rychka wrote:
> > Приветствую!
> >
> > Есть проблема с отображением кирилицы в системе. Имена файлов в
> > cp1251 отображаются вопросами. Изменения локали в
> > /etc/sysconfig/i18n ничего не дают.
> >
> > Путей решения (десктоп-часть не предлагать) не нашел (может плохо искал).
> > Как вариант решения советуют на wiki использовать версию proftpd
> > 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
> >
> > Подскажите - кто как решал подобную проблему?
>
> Нужно собирать новую версию, до 1.3 поддержки UTF-8 в proftpd
> не было.
>

Тогда немного по другому поставлю вопрос - где нужно сделать
изменения кроме /etc/sysconfig/i18n, чтобы перевести локаль из
utf в koi8 или cp1251, чтобы не выдавались знаки вопроса вместо
русских букв в консоли, ведь корень проблемы именно в этом, как
мне кажется?

PS: ряд дружественных серверов под Ubuntu/Mandriva живут под
utf8 и там все отображается нормально как в консоли, так и в
сервисах...

-- 
С наилучшими пожеланиями,
                  _ _
Сергей Рычка       |    ДонНТУ, Системный/сетевой администратор
[ RSV0-UANIC ]    _|_   тел. +38 062 3355701, e-mail: rsv@donntu.edu.ua

Re: [Sysadmins] проблема с utf8

[Led]

В сообщении от Monday 14 January 2008 16:20:52 Serg Rychka написал(а):
> On Mon, 14 Jan 2008, Pavlov Konstantin wrote:
> > On Mon, Jan 14, 2008 at 02:29:04PM +0200, Serg Rychka wrote:
> > > Приветствую!
> > >
> > > Есть проблема с отображением кирилицы в системе. Имена файлов в
> > > cp1251 отображаются вопросами. Изменения локали в
> > > /etc/sysconfig/i18n ничего не дают.
> > >
> > > Путей решения (десктоп-часть не предлагать) не нашел (может плохо
> > > искал). Как вариант решения советуют на wiki использовать версию
> > > proftpd 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
> > >
> > > Подскажите - кто как решал подобную проблему?
> >
> > Нужно собирать новую версию, до 1.3 поддержки UTF-8 в proftpd
> > не было.
>
> Тогда немного по другому поставлю вопрос - где нужно сделать
> изменения кроме /etc/sysconfig/i18n, чтобы перевести локаль из
> utf в koi8 или cp1251, чтобы не выдавались знаки вопроса вместо
> русских букв в консоли, ведь корень проблемы именно в этом, как
> мне кажется?
>
> PS: ряд дружественных серверов под Ubuntu/Mandriva живут под
> utf8 и там все отображается нормально как в консоли, так и в
> сервисах...

# cat /root/.i18n
LC_CTYPE="ru_RU.CP1251"
LC_COLLATE="ru_RU.CP1251"

-- 
Led

Re: [Sysadmins] проблема с utf8 и proftpd

[Jurij Bogaevs'kyj]

Pavlov Konstantin написав(ла):
> On Mon, Jan 14, 2008 at 02:29:04PM +0200, Serg Rychka wrote:
>> Приветствую!
>>
>> Есть проблема с отображением кирилицы в системе. Имена файлов в
>> cp1251 отображаются вопросами. Изменения локали в
>> /etc/sysconfig/i18n ничего не дают.
>>
>> Путей решения (десктоп-часть не предлагать) не нашел (может
>> плохо искал).
>> Как вариант решения советуют на wiki использовать версию proftpd
>> 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
>>
>> Подскажите - кто как решал подобную проблему?
> 
> Нужно собирать новую версию, до 1.3 поддержки UTF-8 в proftpd не было.
> 
Установлена сейчас 1.3.2, но проблема с UTF-8 осталась. При исправлении 
строк
#CharsetLocal KOI8R
#CharsetRemote WINDOWS-1251
на
CharsetLocal UTF-8
CharsetRemote WINDOWS-1251

ругается при запуске на ошибку в этой строке конфига.
Как все таки решить проблему с кодировкой "кирилических" файлов?

-- 
Jurij Bogaevs'kiy aka samuray
ICQ:248954815
Jabber:Jurij.Bogaevskyj_at_jabber.kiev.ua

Re: [Sysadmins] проблема с utf8 и proftpd

[Slava Dubrovskiy]

[-- Attachment #1: Type: text/plain, Size: 1161 bytes --]

14.01.2008 14:29, Serg Rychka пишет:
> Приветствую!
>
> Есть проблема с отображением кирилицы в системе. Имена файлов в
> cp1251 отображаются вопросами. Изменения локали в
> /etc/sysconfig/i18n ничего не дают.
>
> Путей решения (десктоп-часть не предлагать) не нашел (может
> плохо искал).
> Как вариант решения советуют на wiki использовать версию proftpd
> 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
>
> Подскажите - кто как решал подобную проблему?
>   
Что-то я не могу понять вопрос. Проблема в системе или в proftpd?
Если в proftpd, то разве протокол ftp поддерживает передачу кодировки?

Во всяком случае я это решал путем указывания правильной кодировки в
клиенте.

-- 
WBR,
Dubrovskiy Vyacheslav


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/pkcs7-signature, Size: 3262 bytes --]

Re: [Sysadmins] проблема с utf8 и proftpd

[AShen]

On 10.07.2009 17:19, Jurij Bogaevs'kyj wrote:
> Pavlov Konstantin написав(ла):
>> On Mon, Jan 14, 2008 at 02:29:04PM +0200, Serg Rychka wrote:
>>> Приветствую!
>>> Есть проблема с отображением кирилицы в системе. Имена файлов в
>>> cp1251 отображаются вопросами. Изменения локали в
>>> /etc/sysconfig/i18n ничего не дают.
>>> Путей решения (десктоп-часть не предлагать) не нашел (может
>>> плохо искал).
>>> Как вариант решения советуют на wiki использовать версию proftpd
>>> 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
>>> Подскажите - кто как решал подобную проблему?
>> Нужно собирать новую версию, до 1.3 поддержки UTF-8 в proftpd не было.
> Установлена сейчас 1.3.2, но проблема с UTF-8 осталась. При исправлении
> строк
> #CharsetLocal KOI8R
> #CharsetRemote WINDOWS-1251
> на
> CharsetLocal UTF-8
> CharsetRemote WINDOWS-1251
>
> ругается при запуске на ошибку в этой строке конфига.
> Как все таки решить проблему с кодировкой "кирилических" файлов?

Не мучайтесь с этими опциями. Их в proftpd-1.3.2 уже нет.
Работает так:

в /etc/proftpd.conf

echo " " >> /etc/proftpd.conf && echo "#Encoding/Decoding CharSet 
local/remote " >> /etc/proftpd.conf &&echo "LangEngine on" >> 
/etc/proftpd.conf && echo "UseEncoding UTF8 CP1251" >> /etc/proftpd.conf 
&& echo " " >> /etc/proftpd.conf && service proftpd restart

Только что проверял - работает.
Кодировки выбираете те, что вам нужны.

P.S.: на дефолтный конфиг протух. Повод повесить багу?

Re: [Sysadmins] проблема с utf8 и proftpd

[AShen]

On 10.07.2009 18:18, Slava Dubrovskiy wrote:
> 14.01.2008 14:29, Serg Rychka пишет:
>> Приветствую!
>>
>> Есть проблема с отображением кирилицы в системе. Имена файлов в
>> cp1251 отображаются вопросами. Изменения локали в
>> /etc/sysconfig/i18n ничего не дают.
>>
>> Путей решения (десктоп-часть не предлагать) не нашел (может
>> плохо искал).
>> Как вариант решения советуют на wiki использовать версию proftpd
>> 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
>>
>> Подскажите - кто как решал подобную проблему?
>>
> Что-то я не могу понять вопрос. Проблема в системе или в proftpd?
> Если в proftpd, то разве протокол ftp поддерживает передачу кодировки?

Насколько мне известно, нет. Для proftpd-1.3 опции CharsetLocal, 
CharsetRemote не действительные. Вместо них опции LangEngine on, 
UseEncoding UTF8 CP1251. Наш proftpd-1.3 собран с поддержкой NLS. Но всё 
равно это не решает проблему, когда у клиента одна кодировка, а на 
серваке другая. Даков протокол ftp.

> Во всяком случае я это решал путем указывания правильной кодировки в
> клиенте.

Самое лучшее решение. Тут я с тобой полностью согласен.

Re: [Sysadmins] проблема с utf8 и proftpd

[Afanasov Dmitry]

[-- Attachment #1: Type: text/plain, Size: 268 bytes --]

On Fri, Jul 10, 2009 at 06:20:18PM +0400, AShen wrote:
> On 10.07.2009 17:19, Jurij Bogaevs'kyj wrote:
> P.S.: на дефолтный конфиг протух. Повод повесить багу?
хмм, а что именно там протухло? по умолчанию включать mod_lang?

-- 
 С уважением
 Афанасов Дмитрий

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 198 bytes --]

Re: [Sysadmins] проблема с utf8 и proftpd

[Afanasov Dmitry]

[-- Attachment #1: Type: text/plain, Size: 2103 bytes --]

On Fri, Jul 10, 2009 at 06:52:17PM +0400, AShen wrote:
> On 10.07.2009 18:18, Slava Dubrovskiy wrote:
> > разве протокол ftp поддерживает передачу кодировки?
> 
> Насколько мне известно, нет.
ftp протокол поддерживает выбор языка общения (LANG) и выводить в utf8 или
asis (OPTS UTF8 ON). proftpd очень долго сопротивлялся вводу этих команд,
аргументируя тем, что это все drafts, но вот - теперь свершилось.

> Для proftpd-1.3 опции CharsetLocal, CharsetRemote не действительные.
> Вместо них опции LangEngine on, UseEncoding UTF8 CP1251.
верно. при установке/обновлении даже производится попытка закоментировать
данные параметры и пишется warning.

> Наш proftpd-1.3 собран с поддержкой NLS.
кодировка вывода и nls вещи перпендикулярные.

mod_lang обрабаывает команды OPTS UTF8 ON и команду LANG.

OPTS UTF8 ON позволяет выдавать листинг в utf8 кодировке по запросу
клиента.

LANG переключает язык, на котором выдаются служебные сообщения (пример:
Login incorrect --> Accesso non valido, LANG it). на данный момент
поддерживаются языки zh_CN, en_US, it_IT. для русского нужно писать po
файл.

конфиг-команды: 
LangDefault переключает язык по умолчанию. сейчас это en_US.

UseEncoding - команда перекодировки.

надо отметить, что UseEncoding on включает поддержку opts utf8 on, когда
UseEncoding utf8 cp1251 включает explicit encoding и выключает поддержку
opts utf8 on.

основная проблема: при explicit encoding (это было и в прошлом патче)
сохраняется проблема с буквой "я" в koi8-r, при UseEncoding on
включается поддержка opts utf8 on и проблема с "я" пропадает. именно
поэтому и был выбран mod_lang.

opts utf8 on на данный момент поддерживают практически все клиенты, кроме
IE 6 (вот черт, да?).

хотя даже с включенным opts в lftp всплывала проблема с показом -
показывались ???. почему - пока не разобрался.

> > Во всяком случае я это решал путем указывания правильной кодировки в
> > клиенте.
> 
> Самое лучшее решение. Тут я с тобой полностью согласен.
самое рабочее решение - выбор cp1251 для сервера.
-- 
 С уважением
 Афанасов Дмитрий

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 198 bytes --]

Re: [Sysadmins] проблема с utf8 и proftpd

[Jurij Bogaevs'kyj]

Slava Dubrovskiy написав(ла):
> 14.01.2008 14:29, Serg Rychka пишет:
>> Приветствую!
>>
>> Есть проблема с отображением кирилицы в системе. Имена файлов в
>> cp1251 отображаются вопросами. Изменения локали в
>> /etc/sysconfig/i18n ничего не дают.
>>
>> Путей решения (десктоп-часть не предлагать) не нашел (может
>> плохо искал).
>> Как вариант решения советуют на wiki использовать версию proftpd
>> 1.3.1 с модулем LANG, но ее еще даже в сизифе нет...
>>
>> Подскажите - кто как решал подобную проблему?
>>   
> Что-то я не могу понять вопрос. Проблема в системе или в proftpd?
> Если в proftpd, то разве протокол ftp поддерживает передачу кодировки?
> 
> Во всяком случае я это решал путем указывания правильной кодировки в
> клиенте.
> 

Проблема в proftpd (рецепт еще не пробовал). Если в системе кодировка 
например утф8, то клиент увидит вместо кирилицы крякозябры, так как у 
него в клиенте по умолчанию CP1251. Увы, нет возможности у клиентов что 
то менять, они люди самостоятельные (до какой-то степени)


-- 
Jurij Bogaevs'kiy aka samuray
ICQ:248954815
Jabber:Jurij.Bogaevskyj_at_jabber.kiev.ua

Re: [Sysadmins] проблема с utf8 и proftpd

[Michael A. Kangin]

On Пятница 10 июля 2009 20:22:38 Afanasov Dmitry wrote:


> хотя даже с включенным opts в lftp всплывала проблема с показом -
> показывались ???. почему - пока не разобрался.

Попробуйте так:
$ cat .lftprc
set ftp:use-feat no
set ftp:charset cp1251
set ftp:use-telnet-iac no


-- 
WBR, Michael A. Kangin

Re: [Sysadmins] проблема с utf8 и proftpd

[Alexey I. Froloff]

[-- Attachment #1: Type: text/plain, Size: 291 bytes --]

On Fri, Jul 10, 2009 at 08:22:38PM +0400, Afanasov Dmitry wrote:
> основная проблема: при explicit encoding (это было и в прошлом патче)
> сохраняется проблема с буквой "я" в koi8-r,
В KOI8-R проблема с буквой "Ъ", а с буквой "я" проблема как раз в
CP1251.

-- 
Regards,
Sir Raorn.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Sysadmins] проблема с utf8 и proftpd

[AShen]

On 10.07.2009 20:22, Afanasov Dmitry wrote:
<кусь>

> opts utf8 on на данный момент поддерживают практически все клиенты, кроме
> IE 6 (вот черт, да?).

Вчера пробывал.  FTP-server наш proftpd, на текущем сизифе, кодировка 
utf8. Клиент ОС w2k3.  Программы: Total Commander - проблем, всё в 
ажуре; IE6 - выдал страницу в японской кодировке, сменить мне её не дал 
(мля, что же я там понастроил в данном случае??? Есть у меня маленький 
бзик про безопасность серверов, тем более терминал-серверов :) ); IE8 - 
не верно отобразил кодировку, по чему посчитал, что кодировка koi8-r, 
когда я ему сказал кирилица-windows,всё нормально отобразилось; ff2 - 
аналогично IE8.

В proftpd я указал всеголишь две строчки, что ранее приводил.

<кусь>

Дим, на свой вопрос:

On Fri, Jul 10, 2009 at 06:20:18PM +0400, AShen wrote:
 > > On 10.07.2009 17:19, Jurij Bogaevs'kyj wrote:
 > > P.S.: на дефолтный конфиг протух. Повод повесить багу?
хмм, а что именно там протухло? по умолчанию включать mod_lang?

Ты и ответил :-D . Я считаю, что текущий конфиг надо переписывать, в 
первую очередь с уётом того, что ты высказал, возьмёшься?