[Comm] интернет-формы и локаль koi8-r

[Comm] интернет-формы и локаль koi8-r

[Andrei Lomov]

По ходу жизни нужно заполнять интернет-формы 
и писать на форумах,
и в 90% случаев мой ввод кириллицей
превращается на сервере в нечто похожее на бНОПНЮ.

Локаль в системе koi8-r.
ALM 2.4

Если указать кодировку отображения страницы koi8-r,
корежится содержимое, но все введенное кириллицей 
воспринимается на сервере нормально.

Вопрос, можно ли решить проблему, запустив браузер 
из консоли с другими переменными окружения,
как бы в другой локали?

-- 
Всего доброго,
А.Л.

Re: [Comm] интернет-формы и локаль koi8-r

[Alexey Rusakov]

Andrei Lomov wrote:

>По ходу жизни нужно заполнять интернет-формы 
>и писать на форумах,
>и в 90% случаев мой ввод кириллицей
>превращается на сервере в нечто похожее на бНОПНЮ.
>
>Локаль в системе koi8-r.
>ALM 2.4
>
>Если указать кодировку отображения страницы koi8-r,
>корежится содержимое, но все введенное кириллицей 
>воспринимается на сервере нормально.
>
>Вопрос, можно ли решить проблему, запустив браузер 
>из консоли с другими переменными окружения,
>как бы в другой локали?
>  
>
Не лишне для начала рассказать о том, каким браузером вы пользуетесь и 
какие браузеры кроме него пробовали.

-- 
  Alexey "Ktirf" Rusakov

[Comm] Re: интернет-формы и локаль koi8-r

[Andrei Lomov]

Alexey Rusakov wrote:

> Andrei Lomov wrote:
> 
>>По ходу жизни нужно заполнять интернет-формы
>>и писать на форумах,
>>и в 90% случаев мой ввод кириллицей
>>превращается на сервере в нечто похожее на бНОПНЮ.
>>
>>Локаль в системе koi8-r.
>>ALM 2.4
>>
>>Если указать кодировку отображения страницы koi8-r,
на cp 1251

>>корежится содержимое, но все введенное кириллицей
>>воспринимается на сервере нормально.
>>
>>Вопрос, можно ли решить проблему, запустив браузер
>>из консоли с другими переменными окружения,
>>как бы в другой локали?
>>  
>>
> Не лишне для начала рассказать о том, каким браузером вы пользуетесь и
> какие браузеры кроме него пробовали.

Браузеры самые что ни на есть штатные в ALM 2.4:
mozilla, firefox, konqueror. 
Проблема не в них. Или во мне, или в движках форумов 
на ряде серверов:

mail.ru (форма регистрации нового ящика)

http://www.senpolia.ru/forum/index.html.
На этом форуме чтобы ввести сообщение, приходится
переключать кодировку отображения страницы на cp1251,
все корежится, кроме содержимого полей ввода,
после отправки сообщения переходим обратно на koi8-r
и читаем.

Движок форума кривой, видимо.
Нельзя ли как-то обойти.

-- 
Всего доброго,
А.Л.

Re: [Comm] Re: интернет-формы и локаль koi8-r

[Alexey Rusakov]

Andrei Lomov wrote:

>на ряде серверов:
>
>mail.ru (форма регистрации нового ящика)
>
>http://www.senpolia.ru/forum/index.html.
>На этом форуме чтобы ввести сообщение, приходится
>переключать кодировку отображения страницы на cp1251,
>все корежится, кроме содержимого полей ввода,
>после отправки сообщения переходим обратно на koi8-r
>и читаем.
>
>Движок форума кривой, видимо.
>Нельзя ли как-то обойти.
>  
>
Движок сайта кривой, я подозреваю. Очень многие сайты считают, что кроме 
кодировки 1251 других не бывает и нигде тот факт, что страница написана 
в 1251, не указывают, ни в META, ни в HTTP-заголовках. Попробуйте в 
установках любимого браузера выставить кодировку по умолчанию в 1251, 
вдруг поможет.

-- 
  Alexey "Ktirf" Rusakov

Re: [Comm] Re: интернет-формы и локаль koi8-r

[Vasilev Max]

Alexey Rusakov пишет:
> Движок сайта кривой, я подозреваю. Очень многие сайты считают, что
> кроме кодировки 1251 других не бывает и нигде тот факт, что страница
> написана в 1251, не указывают, ни в META, ни в HTTP-заголовках.
> Попробуйте в установках любимого браузера выставить кодировку по
> умолчанию в 1251, вдруг поможет.
>

Установка в настройках любимого браузера - здесь не панацея. Здесь
проблема даже не в форуме или форме, а в самом Apache, который
используется на сервере.

Это известная проблема, так называемого "русского апача", автором
которого является некто "lexa". Основное прдназначение которого -
встроенный mod_charset (если я правильно помню), задача которого -
отдавать пользователю всегда контент в той кодировке, который ему
привычнее. Т.е. оффтопику 1251, nix-ам koi8 и т.д.

Вот только на деле настроить этот "русский апачь" правильно, что бы он
не портил жизнь пользователям практически не возможно, и при этом НИ
ОДИН хостер, у которого стоит такой апач, никогда не утруждал себя его
настройкой. В результате оно работает но ровно на половину.

Оффтопичные пользователи смотрят сайт, контент которого рельно лежит в
1251, в своей отопичной кодировке и сервер выдаёт им в HTTP/1.1 эту же
кодировку. Все счатливы, хостер горд за себя и свою крутизну, но
случайно захит не оффтопичный пользователь и тут всё встаёт на свои
места. Apache, видит, что пришёл не офтопичный пользователь и выставляет
ему в HTTP/1.1 кодировку koi8-r, но контент или не перекодирует вообще
или просто портит. В результате браузер послушно выставляет ту
кодировку, которую ему сказал сервер по HTTP/1.1, т.к. она имеет
приоритет над meta-тэгами. А так как контент не был перекодирован
сервером, то вот и получаются одни БНОПНИ.

Это только одна из типичных проблем, другая - перекодирование форм
POST/GET там где этого не надо. Или перекодирование файлов при апплоаде,
что уж вообще не должно происходить.

> ------------------------------------------------------------------------
>
> _______________________________________________
> Community mailing list
> Community@altlinux.ru
> https://lists.altlinux.ru/mailman/listinfo/community

[Comm] Re: интернет-формы и локаль koi8-r

[Michael Shigorin]

On Sat, Sep 17, 2005 at 01:17:56PM +0400, Vasilev Max wrote:
> Это известная проблема, так называемого "русского апача",
> автором которого является некто "lexa".

Если точно -- то Russian Apache имени Алексея Тутубалина.

> Основное прдназначение которого - встроенный mod_charset

Это и есть RA.

> Вот только на деле настроить этот "русский апачь" правильно,
> что бы он не портил жизнь пользователям практически не
> возможно, и при этом НИ ОДИН хостер, у которого стоит такой
> апач, никогда не утруждал себя его настройкой. В результате оно
> работает но ровно на половину.

Несколько сильное утверждение, хотя количество абьюзеров
действительно немаленькое.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/
 ----       visit our conference (Oct 1):
--          http://conference.osdn.org.ua

Re: [Comm] Re: интернет-формы и локаль koi8-r

[Vasilev Max]

Michael Shigorin пишет:
> On Sat, Sep 17, 2005 at 01:17:56PM +0400, Vasilev Max wrote:
>   
>> Это известная проблема, так называемого "русского апача",
>> автором которого является некто "lexa".
>>     
>
> Если точно -- то Russian Apache имени Алексея Тутубалина.
>
>   

В данном случае не суть. IMHO это имело смысл, когда в браузерах не было
возможности переключить кодировку и не было автоматического определения её.

>> Основное прдназначение которого - встроенный mod_charset
>>     
>
> Это и есть RA.
>
>   
>> Вот только на деле настроить этот "русский апачь" правильно,
>> что бы он не портил жизнь пользователям практически не
>> возможно, и при этом НИ ОДИН хостер, у которого стоит такой
>> апач, никогда не утруждал себя его настройкой. В результате оно
>> работает но ровно на половину.
>>     
>
> Несколько сильное утверждение, хотя количество абьюзеров
> действительно немаленькое.
>   

К сожалению, я просто констатирую факт из действительности. Приходилось
проводить по многу часов на телефоне и пожалуй самым кросноречивым
ответом было:

- Вы знаете, я вот сейчас открыл в IE и никакой koi8-r не вижу и у меня
всё нормально. Настройте ваш виндовс правильно.

wbr,
Maks

[Comm] Re: интернет-формы и локаль koi8-r

[Michael Shigorin]

On Sat, Sep 17, 2005 at 02:34:18PM +0400, Vasilev Max wrote:
> >> Это известная проблема, так называемого "русского апача",
> >> автором которого является некто "lexa".
> > Если точно -- то Russian Apache имени Алексея Тутубалина.
> В данном случае не суть. IMHO это имело смысл, когда в
> браузерах не было возможности переключить кодировку и не было
> автоматического определения её.

См. баги на пакете apache по слову russian.

> > Несколько сильное утверждение, хотя количество абьюзеров
> > действительно немаленькое.
> К сожалению, я просто констатирую факт из действительности.
> Приходилось проводить по многу часов на телефоне и пожалуй
> самым кросноречивым ответом было:
> - Вы знаете, я вот сейчас открыл в IE и никакой koi8-r не вижу
> и у меня всё нормально. Настройте ваш виндовс правильно.

Для таких есть
http://www.freesource.info/wiki/WebProekty/NevernoNastroennyeHTTPServery

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/
 ----       visit our conference (Oct 1):
--          http://conference.osdn.org.ua

[Comm] Re: интернет-формы и локаль koi8-r

[Andrei Lomov]

Michael Shigorin wrote:

>> Основное прдназначение которого - встроенный mod_charset
> 
> Это и есть RA.
> 
>> Вот только на деле настроить этот "русский апачь" правильно,
>> что бы он не портил жизнь пользователям практически не
>> возможно, и при этом НИ ОДИН хостер, у которого стоит такой
>> апач, никогда не утруждал себя его настройкой. В результате оно
>> работает но ровно на половину.
> 
> Несколько сильное утверждение, хотя количество абьюзеров
> действительно немаленькое.

Информации выдали много, спасибо,
вот только переварить затрудняюсь.
Не ясно, играет ли роль кодировка на моей машине.
Скажем, если бы локаль на моей машине была cp1251,
сей "апач" меня примет за своего?

-- 
Всего доброго,
А.Л.

Re: [Comm] Re: интернет-формы и локаль koi8-r

[Alexey Rusakov]

Andrei Lomov wrote:

>Информации выдали много, спасибо,
>вот только переварить затрудняюсь.
>Не ясно, играет ли роль кодировка на моей машине.
>Скажем, если бы локаль на моей машине была cp1251,
>сей "апач" меня примет за своего?
>  
>
Нет. Веб-сервер проверяет строку User-Agent, которую отправляет ему 
браузер. В Gecko-браузерах (Mozilla, Firefox, Galeon, Epiphany) есть 
возможность подменить эту строку, указав то, что нужно, в расширенных 
настройках (ключевое слово для оных - about:config). Можно попробовать 
что-то сделать в эту сторону.

-- 
  Alexey "Ktirf" Rusakov

[Comm] Re: Re: интернет-формы и локаль koi8-r

[Andrei Lomov]

Alexey Rusakov wrote:

> Нет. Веб-сервер проверяет строку User-Agent, которую отправляет ему
> браузер. В Gecko-браузерах (Mozilla, Firefox, Galeon, Epiphany) есть
> возможность подменить эту строку, указав то, что нужно, в расширенных
> настройках (ключевое слово для оных - about:config). 

В менюшках не нашел (Mozilla, Firefox). 
Может, это в каком-то файле настроек?

-- 
Всего доброго,
А.Л.

Re: [Comm] Re: Re: интернет-формы и локаль koi8-r

[Alexey Rusakov]

Andrei Lomov wrote:

>Alexey Rusakov wrote:
>
>  
>
>>Нет. Веб-сервер проверяет строку User-Agent, которую отправляет ему
>>браузер. В Gecko-браузерах (Mozilla, Firefox, Galeon, Epiphany) есть
>>возможность подменить эту строку, указав то, что нужно, в расширенных
>>настройках (ключевое слово для оных - about:config). 
>>    
>>
>
>В менюшках не нашел (Mozilla, Firefox). 
>Может, это в каком-то файле настроек?
>  
>
Наберите в строке адреса about:config. Вашему взору предстанут все 
настройки, которые есть в Mozilla/Firefox. Список соответствует файлу 
prefs.js в профиле браузера (чтобы узнать, где находится профиль, 
воспользуйтесь меню Help или Гуглом).

-- 
  Alexey "Ktirf" Rusakov

[Comm] Re: Re: Re: интернет-формы и локаль koi8-r

[Andrei Lomov]

Alexey Rusakov wrote:

> Andrei Lomov wrote:
> 
>>Alexey Rusakov wrote:
>>
>>  
>>
>>>Нет. Веб-сервер проверяет строку User-Agent, которую отправляет ему
>>>браузер. В Gecko-браузерах (Mozilla, Firefox, Galeon, Epiphany) есть
>>>возможность подменить эту строку, указав то, что нужно, в расширенных
>>>настройках (ключевое слово для оных - about:config).
>>>    
>>>
>>
>>В менюшках не нашел (Mozilla, Firefox).
>>Может, это в каком-то файле настроек?
>>  
>>
> Наберите в строке адреса about:config. Вашему взору предстанут все
> настройки, которые есть в Mozilla/Firefox. Список соответствует файлу
> prefs.js в профиле браузера (чтобы узнать, где находится профиль,
> воспользуйтесь меню Help или Гуглом).
> 

На страничке http://ip.sitecreator.ru/
отображается следующая информация о браузере клиента:

Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.7.8) 
Gecko/20050526 Firefox/1.0.4

Все параметры Firefox'а с ключевым словом useragent, 
которые есть в файлах *.js, имеют вид 

"general.useragent.locale",
"chrome://navigator/locale/navigator.properties"

"general.useragent.contentlocale",
"chrome://navigator-region/locale/region.properties"

"general.useragent.security",       "U"
"general.useragent.locale", "en-US"
"general.useragent.vendor", "Firefox"
"general.useragent.vendorSub", "1.0.4"


Меняя перечисленные параметры, судя по всему, не удастся 
сформировать строку
Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.7.8) 
Gecko/20050526 Firefox/1.0.4,
которую отправляет браузер.

Надо что-то еще. Где, не могу понять.
В частности, не ясно, что такое 
chrome://navigator/locale/navigator.properties


-- 
Всего доброго,
А.Л.

Re: [Comm] Re: Re: Re: интернет-формы и локаль koi8-r

[Alexey Rusakov]

Andrei Lomov wrote:

>Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.7.8) 
>Gecko/20050526 Firefox/1.0.4
>
>Все параметры Firefox'а с ключевым словом useragent, 
>которые есть в файлах *.js, имеют вид 
>
>"general.useragent.locale",
>"chrome://navigator/locale/navigator.properties"
>
>"general.useragent.contentlocale",
>"chrome://navigator-region/locale/region.properties"
>
>"general.useragent.security",       "U"
>"general.useragent.locale", "en-US"
>"general.useragent.vendor", "Firefox"
>"general.useragent.vendorSub", "1.0.4"
>  
>
Есть ещё один параметр, general.useragent.override, в котором можно 
полностью написать нужную строчку. В вышеприведённом, я думаю, 
достаточно заменить Linux на Windows, хотя я не совсем в этом уверен.

-- 
  Alexey "Ktirf" Rusakov

[Comm] Re: Re: Re: Re: интернет-формы и локаль koi8-r

[Andrei Lomov]

Alexey Rusakov wrote:

> Andrei Lomov wrote:
> 
>>Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.7.8)
>>Gecko/20050526 Firefox/1.0.4
>>
> Есть ещё один параметр, general.useragent.override, в котором можно
> полностью написать нужную строчку. В вышеприведённом, я думаю,
> достаточно заменить Linux на Windows, хотя я не совсем в этом уверен.
> 
Добавил строку

pref("general.useragent.override", 
"Mozilla/5.0 (Windows; U; Windows NT 5.1; ru-RU; rv:1.7) 
Gecko/20040803 Firefox/1.0.4");

в файл 
/usr/lib/firefox-1.0.4/defaults/pref/firefox.js

На одном форуме сработало (www.senpolii.ru/forum).

Остались проблемы с регистрациями на сервере www.rffi.ru
Там что-то хитрое, сервер подставляет кодировку iso-05, и все корежится.
Из-под оффтопика Firefox работает, из ALM 2.4 нет.

Даже описать проблему не могу, надо еще потыкать.

Спасибо

-- 
Всего доброго,
А.Л.

Re: [Comm] Re: интернет-формы и локаль koi8-r

[Vasilev Max]

[-- Attachment #1: Type: text/plain, Size: 760 bytes --]

Andrei Lomov пишет:
> Информации выдали много, спасибо,
> вот только переварить затрудняюсь.
> Не ясно, играет ли роль кодировка на моей машине.
> Скажем, если бы локаль на моей машине была cp1251,
> сей "апач" меня примет за своего?
>   
Нет, апач не в курсе, какая у вас стоит локаль, по крайней мере не
напрямую. Он анализирует переменные, передаваемые браузером, в частности
User agent и language accept (за точность написания не ручаюсь). Если
хотите чтоно видеть, что отдаёт ваш браузер серверу, поставте у себя или
где нибудь ещё связку apache+php и создайте файл на php со следующим
содержанием:

---cut---
<?php
phpinfo();
?>
---cut---

Откройте её браузером и в разделе "HTTP Headers Information" вы увидите
всё, что говорит ваш браузер.


wbr,
Maks

[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

[Comm] Re: Re: интернет-формы и локаль koi8-r

[Andrei Lomov]

Vasilev Max wrote:

> ---cut---
> <?php
> phpinfo();
> ?>
> ---cut---
> 
> Откройте её браузером и в разделе "HTTP Headers Information" вы увидите

Уточните, пожалуйста, где этот раздел

-- 
Всего доброго,
А.Л.

Re: [Comm] Re: Re: интернет-формы и локаль koi8-r

[Andrey Rahmatullin]

[-- Attachment #1: Type: text/plain, Size: 475 bytes --]

On Sun, Sep 18, 2005 at 04:56:45PM +0700, Andrei Lomov wrote:
> > Откройте её браузером и в разделе "HTTP Headers Information" вы увидите
> Уточните, пожалуйста, где этот раздел
Примерно в середине.

-- 
WBR, wRAR (ALT Linux Team)
Powered by the ALT Linux fortune(8):

Робот работает в режиме реального времени под управлением операционной
системы МУМУ с двумя ядрами.  Шутка.  (Про операционную систему МУМУ с
двумя ядрами я узнал от AEN.)
		-- at in sisyphus@

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

[Comm] Re: интернет-формы и локаль koi8-r

[Michael Shigorin]

On Sat, Sep 17, 2005 at 08:24:30PM +0700, Andrei Lomov wrote:
> Скажем, если бы локаль на моей машине была cp1251,
> сей "апач" меня примет за своего?

Не-а.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/
 ----       visit our conference (Oct 1):
--          http://conference.osdn.org.ua