[mdk-re] htdig

[mdk-re] htdig

[Maxim Savrilov]

Hi!
Вот такой небольшой багрепорт.
Установил htdig из поставки Spring. Все хорошо, но при выводе
результатов поиска не выводится содержание документа. Говорит, нету
искомых слов в голове файла. Кроме того, на htdig налагается патч от
Алексея Тутубалина, в том числе он убирает префиксы из выдаваемых урлов,
что не позволяет индексировать несколько сайтов, что не есть хорошо.
Гораздо лучше было бы прилагать только патчи 1 и 3 имхо.
В-общем, пересобрал я htdig из исходников. Вторая проблема исчезла, и
это понятно, патча я не накладывал, а вот почему вторая исчезла, даже не
знаю, конфиги одни и те же.
Сервер, на котором все это http://vn.ru/search/

Re: [mdk-re] htdig

[Kostya Timoshenko]

On Fri, 11 May 2001 14:44:49 +0700
Maxim Savrilov <Maxim.Savrilov@oberon.novocybersk.ru> wrote:

> Hi!
> Вот такой небольшой багрепорт.
> Установил htdig из поставки Spring. Все хорошо, но при выводе
> результатов поиска не выводится содержание документа. Говорит, нету
> искомых слов в голове файла. Кроме того, на htdig налагается патч от
> Алексея Тутубалина, в том числе он убирает префиксы из выдаваемых урлов,
> что не позволяет индексировать несколько сайтов, что не есть хорошо.
> Гораздо лучше было бы прилагать только патчи 1 и 3 имхо.
он влючен но не компилируется по умолчанию так как стоит #if 0. Только что проверил на своей машине все работает нормально.

-- 
Kostya.

Re: [mdk-re] htdig

[Maxim Savrilov]

Kostya Timoshenko wrote:

> On Fri, 11 May 2001 14:44:49 +0700
> Maxim Savrilov <Maxim.Savrilov@oberon.novocybersk.ru> wrote:
>
> > Hi!
> > Вот такой небольшой багрепорт.
> > Установил htdig из поставки Spring. Все хорошо, но при выводе
> > результатов поиска не выводится содержание документа. Говорит, нету
> > искомых слов в голове файла. Кроме того, на htdig налагается патч от
> > Алексея Тутубалина, в том числе он убирает префиксы из выдаваемых урлов,
> > что не позволяет индексировать несколько сайтов, что не есть хорошо.
> > Гораздо лучше было бы прилагать только патчи 1 и 3 имхо.
> он влючен но не компилируется по умолчанию так как стоит #if 0. Только что проверил на своей машине все работает нормально.

Точно. Просто я не успел напустить поисковик на второй сервер. Но главная проблема не в этом, а в невыводе содержимого
документа :(

Re: [mdk-re] htdig

[Kostya Timoshenko]

On Fri, 11 May 2001 16:02:12 +0700
Maxim Savrilov <Maxim.Savrilov@oberon.novocybersk.ru> wrote:

> Kostya Timoshenko wrote:
> 
> > On Fri, 11 May 2001 14:44:49 +0700
> > Maxim Savrilov <Maxim.Savrilov@oberon.novocybersk.ru> wrote:
> >
> > > Hi!
> > > Вот такой небольшой багрепорт.
> > > Установил htdig из поставки Spring. Все хорошо, но при выводе
> > > результатов поиска не выводится содержание документа. Говорит, нету
> > > искомых слов в голове файла. Кроме того, на htdig налагается патч от
> > > Алексея Тутубалина, в том числе он убирает префиксы из выдаваемых урлов,
> > > что не позволяет индексировать несколько сайтов, что не есть хорошо.
> > > Гораздо лучше было бы прилагать только патчи 1 и 3 имхо.
> > он влючен но не компилируется по умолчанию так как стоит #if 0. Только что проверил на своей машине все работает нормально.
> 
> Точно. Просто я не успел напустить поисковик на второй сервер. Но главная проблема не в этом, а в невыводе содержимого
> документа :(
но сейчас выводит?

-- 
Kostya.

Re: [mdk-re] htdig

[Maxim Savrilov]

Kostya Timoshenko wrote:

> > > > Гораздо лучше было бы прилагать только патчи 1 и 3 имхо.
> > > он влючен но не компилируется по умолчанию так как стоит #if 0. Только что проверил на своей машине все работает нормально.
> >
> > Точно. Просто я не успел напустить поисковик на второй сервер. Но главная проблема не в этом, а в невыводе содержимого
> > документа :(
> но сейчас выводит?

После того, как я его собрал из оригинального тарбола, следуя инструкциям Тутубалина: да.
Вот такие пироги.

Re: [mdk-re] htdig

[Kostya Timoshenko]

On Fri, 11 May 2001 16:20:54 +0700
Maxim Savrilov <Maxim.Savrilov@oberon.novocybersk.ru> wrote:

> Kostya Timoshenko wrote:
> 
> > > > > Гораздо лучше было бы прилагать только патчи 1 и 3 имхо.
> > > > он влючен но не компилируется по умолчанию так как стоит #if 0. Только что проверил на своей машине все работает нормально.
> > >
> > > Точно. Просто я не успел напустить поисковик на второй сервер. Но главная проблема не в этом, а в невыводе содержимого
> > > документа :(
> > но сейчас выводит?
> 
> После того, как я его собрал из оригинального тарбола, следуя инструкциям Тутубалина: да.
> Вот такие пироги.
странно, у меня все нормально работает

-- 
Kostya.

Re: [mdk-re] htdig

[Maxim Savrilov]

Kostya Timoshenko wrote:

>
> > После того, как я его собрал из оригинального тарбола, следуя инструкциям Тутубалина: да.
> > Вот такие пироги.
> странно, у меня все нормально работает

А где, если не секрет?

Re: [mdk-re] htdig

[Kostya Timoshenko]

On Fri, 11 May 2001 16:40:43 +0700
Maxim Savrilov <Maxim.Savrilov@oberon.novocybersk.ru> wrote:

> Kostya Timoshenko wrote:
> 
> >
> > > После того, как я его собрал из оригинального тарбола, следуя инструкциям Тутубалина: да.
> > > Вот такие пироги.
> > странно, у меня все нормально работает
> 
> А где, если не секрет?
не секрет, но я уже его снес за ненадобностью:)
если есть желания то поставлю и дам URL но это лучше личной почтой чтобы не засорять рассылку.

-- 
Kostya.

Re: [mdk-re] htdig

[Oleg A. Paraschenko]

  Привет!

> Установил htdig из поставки Spring. Все хорошо, но при выводе
> результатов поиска не выводится содержание документа. Говорит, нету
> искомых слов в голове файла.

  Может эти слова в meta keywords, а в body их действительно нет?


> патч Алексея Тутубалина, в том числе он убирает префиксы из выдаваемых
урлов,
> что не позволяет индексировать несколько сайтов, что не есть хорошо.

  Не совсем так. Для каждого сайта можно завести свою базу.
  Кстати, на заметку - полезное применение патча. Есть сервер xxx.ru,
~30.000 страниц. Заводится алиас yyy.xxx.ru. Для него говорится 'CustomLog
/dev/null empty'. После прохода htdig -- и индекс создается, и логи сервера
не забиваются, и место экономится.



----
Олег

Re: [mdk-re] htdig

[Maxim Savrilov]

Oleg A. Paraschenko wrote:

>   Привет!
> 
> 
>> Установил htdig из поставки Spring. Все хорошо, но при выводе
>> результатов поиска не выводится содержание документа. Говорит, нету
>> искомых слов в голове файла.
> 
> 
>   Может эти слова в meta keywords, а в body их действительно нет?
ни в одном из найденных документов?
Дело в том, что когда я поставил самособранный htdig, содержание документа стало выводиться. Вот в чем главная неприятность.

> 
> 
> 
>> патч Алексея Тутубалина, в том числе он убирает префиксы из выдаваемых
> 
> урлов,
> 
>> что не позволяет индексировать несколько сайтов, что не есть хорошо.
> 
> 
>   Не совсем так.
Да, мне уже сказали.

> Для каждого сайта можно завести свою базу.
Так и есть.

>   Кстати, на заметку - полезное применение патча. Есть сервер xxx.ru,
> ~30.000 страниц. Заводится алиас yyy.xxx.ru. Для него говорится 'CustomLog
> /dev/null empty'. После прохода htdig -- и индекс создается, и логи сервера
> не забиваются, и место экономится.
Я, в основном просто говорю, что все, что надо htdig'у, находится на локальном диске