* [Comm] Re: [JT] Форматирование логов: shell или perl
@ 2003-01-29 14:57 Flach
2003-01-29 16:41 ` Sergey Degtyaryov
0 siblings, 1 reply; 3+ messages in thread
From: Flach @ 2003-01-29 14:57 UTC (permalink / raw)
To: community
>
> Для данной задачи это СЛИШКОМ мощная машина.
>
> Тормоза у вас возникают из-за того, что используемые утилиты работают с
> текстовыми файлами построчно. mysql делает сортировку и запросы гораздо
> более эффективными способами (если, конечно, вы установите индексы на
> столбцы, по которым будете делать сортировку), т.е. загрузка и время
> выполнения будут несравнимо меньшими.
>
> Посмотрите, насколько проще стала задача:
> 1.Ввод данных в mysql базу с помощью perl скрипта (который будет
> содержать лишь 2 основных команды - regex для разбиения строки на
> элементы записи и sql команду INSERT)
> 2. Вывод данных с помощью perl скрипта (который будет содержать лишь 2
> основных команды - sql команду SELECT и print)
> И всё.
>
> Об удобстве хранения информации в этом случае я уже говорил.
Все написанное Вами и Сергеем Дегтяревым меня порадовало. Пути решения
проблемы ясны.
Если я правильно понял, не проблема с помощью Perl перенести из текстового
файла oределенные колонки в Mysql, а дальше уже дело техники. Надеюсь что
все получится :0)
Еще раз спасибо.
С уважением, Михаил
^ permalink raw reply [flat|nested] 3+ messages in thread
* Re: [Comm] Re: [JT] Форматирование логов: shell или perl
2003-01-29 14:57 [Comm] Re: [JT] Форматирование логов: shell или perl Flach
@ 2003-01-29 16:41 ` Sergey Degtyaryov
2003-01-30 9:05 ` Flach
0 siblings, 1 reply; 3+ messages in thread
From: Sergey Degtyaryov @ 2003-01-29 16:41 UTC (permalink / raw)
To: community
Flach wrote:
>>Для данной задачи это СЛИШКОМ мощная машина.
>>
>>Тормоза у вас возникают из-за того, что используемые утилиты работают с
>>текстовыми файлами построчно. mysql делает сортировку и запросы гораздо
>>более эффективными способами (если, конечно, вы установите индексы на
>>столбцы, по которым будете делать сортировку), т.е. загрузка и время
>>выполнения будут несравнимо меньшими.
>>
>>Посмотрите, насколько проще стала задача:
>>1.Ввод данных в mysql базу с помощью perl скрипта (который будет
>>содержать лишь 2 основных команды - regex для разбиения строки на
>>элементы записи и sql команду INSERT)
>>2. Вывод данных с помощью perl скрипта (который будет содержать лишь 2
>>основных команды - sql команду SELECT и print)
>>И всё.
>>
>>Об удобстве хранения информации в этом случае я уже говорил.
>
>
> Все написанное Вами и Сергеем Дегтяревым меня порадовало. Пути решения
> проблемы ясны.
> Если я правильно понял, не проблема с помощью Perl перенести из текстового
> файла oределенные колонки в Mysql, а дальше уже дело техники. Надеюсь что
> все получится :0)
А какие Вы логи разбираете? Может уже все написано до Вас?
Для сквида точно есть squid2mysql. Есть также apache2mysql.
--
Сергей Дегтярев
^ permalink raw reply [flat|nested] 3+ messages in thread
end of thread, other threads:[~2003-01-30 9:05 UTC | newest]
Thread overview: 3+ messages (download: mbox.gz / follow: Atom feed)
-- links below jump to the message on this page --
2003-01-29 14:57 [Comm] Re: [JT] Форматирование логов: shell или perl Flach
2003-01-29 16:41 ` Sergey Degtyaryov
2003-01-30 9:05 ` Flach
ALT Linux Community general discussions
This inbox may be cloned and mirrored by anyone:
git clone --mirror http://lore.altlinux.org/community/0 community/git/0.git
# If you have public-inbox 1.1+ installed, you may
# initialize and index your mirror using the following commands:
public-inbox-init -V2 community community/ http://lore.altlinux.org/community \
mandrake-russian@linuxteam.iplabs.ru community@lists.altlinux.org community@lists.altlinux.ru community@lists.altlinux.com
public-inbox-index community
Example config snippet for mirrors.
Newsgroup available over NNTP:
nntp://lore.altlinux.org/org.altlinux.lists.community
AGPL code for this site: git clone https://public-inbox.org/public-inbox.git