37. Метапоисковые системы (поисковые службы). Определение и основные возможности программ ускоренного поиска (поисковых агентов).

Теперь познакомимся с инструментами поиска, которые не формируют собственный индекс, но умеют использовать возможности других поисковых систем. Это метапоисковые системы (поисковые службы) – системы, способные послать запросы пользователя одновременно нескольким поисковым серверам, затем объединить полученные результаты и представить их пользователю в виде документа со ссылками.

Здесь приведены адреса известных метапоисковых систем.

MetaCrawler www.metacrawler.com

SavvySearch www.savvysearch.com

Наконец, рассмотрим последний в списке инструмент поиска – программы ускоренного поиска.

Программа ускоренного поиска – это программа, устанавливаемая на компьютере пользователя и способная:

3 посылать запросы к нескольким поисковым серверам;

3 сортировать результаты поиска по релевантности;

3 удалять дубликаты;

3 проверять наличие документов в сети.

Далее приведены адреса разработчиков и название популярных программ ускоренного поиска.

WebFerret, NewsFerret, … www.ferretsoft.com

Inforia Quest 99: http://www.inforia.com/quest

Subject Search Spider (SSSpider) – www.kryltech.com.

После подробного изучения основных возможностей инструментов обратимся к проблеме эффективности поиска. Основными параметрами эффективности поиска является полнота как отношение числа найденных документов к общему числу релевантных документов (то есть найдены все документы, соответствующие запросу), и точность поиска – отношение числа релевантных документов к общему числу полученных документов (то есть не найдено ничего лишнего, не относящегося к делу). Это и означает понятие релевантности. Немаловажное значение имеет актуальность ссылок на документы, те есть существование в настоящий момент найденных документов в сети, и скорость поиска.

Таким образом, можно выделить следующие факторы, влияющие на эффективность поиска:

3 Свойства и возможности поисковой системы.

3 Качество формулировки запроса пользователем.

Каким образом можно оценить качество поискового инструмента? Поисковые системы обычно сравнивают по следующим параметрам:

3 Количество проиндексированных страниц (объем индекса).

3 Количество поддерживаемых операторов.

3 Стандартный оператор, объединяющий несколько ключевых слов. Если стандартным оператором является оператор И, поисковая машина автоматически будет искать документы, на которых обязательно будут присутствовать все введенные ключевые слова. В противном случае (оператор ИЛИ) будут найдены документы со всеми ключевыми словами и с каждым по отдельности

3 Поиск точной фразы.

3 Поиск слов с различными окончаниями.

3 Учет словоформ. В случае автоматического режима учета словоформ система будет искать в документах слово со всеми его изменениями.

Далее, продолжаем список:

3 Чувствительность к заглавной букве. Если система не различает заглавные и строчные буквы, результаты поиска будут менее качественными.

3 Поиск мультимедийных файлов.

3 Форма представления результатов.

3 Сортировка по категориям

3 Период обновления индекса. Этот показатель влияет на такой параметр как актуальность найденных ссылок. Чем чаще обновляется индекс, тем реже в результатах поиска будут встречаться устаревшие ссылки.

3 Задержка перед пропиской. Данный параметр указывает на временной интервал перед занесением описания Web-страницы в индекс после просьбы ее автора.

38. Параметры эффективности поиска: полнота, точность, актуальность, скорость. Факторы, влияющие на эффективность поиска. Сравнительные возможности поисковых систем. Планирование поисковой процедуры. Приемы эффективного поиска.

После подробного изучения основных возможностей инструментов обратимся к проблеме эффективности поиска. Основными параметрами эффективности поиска является полнота как отношение числа найденных документов к общему числу релевантных документов (то есть найдены все документы, соответствующие запросу), и точность поиска – отношение числа релевантных документов к общему числу полученных документов (то есть не найдено ничего лишнего, не относящегося к делу). Это и означает понятие релевантности. Немаловажное значение имеет актуальность ссылок на документы, те есть существование в настоящий момент найденных документов в сети, и скорость поиска.

Таким образом, можно выделить следующие факторы, влияющие на эффективность поиска:

• Свойства и возможности поисковой системы.

• Качество формулировки запроса пользователем.

Каким образом можно оценить качество поискового инструмента? Поисковые системы обычно сравнивают по следующим параметрам:

• Количество проиндексированных страниц (объем индекса).

• Количество поддерживаемых операторов.

• Стандартный оператор, объединяющий несколько ключевых слов. Если стандартным оператором является оператор И, поисковая машина автоматически будет искать документы, на которых обязательно будут присутствовать все введенные ключевые слова. В противном случае (оператор ИЛИ) будут найдены документы со всеми ключевыми словами и с каждым по отдельности

• Поиск точной фразы.

• Поиск слов с различными окончаниями.

• Учет словоформ. В случае автоматического режима учета словоформ система будет искать в документах слово со всеми его изменениями.

Далее, продолжаем список:

• Чувствительность к заглавной букве. Если система не различает заглавные и строчные буквы, результаты поиска будут менее качественными.

• Поиск мультимедийных файлов.

• Форма представления результатов.

• Сортировка по категориям

• Период обновления индекса. Этот показатель влияет на такой параметр как актуальность найденных ссылок. Чем чаще обновляется индекс, тем реже в результатах поиска будут встречаться устаревшие ссылки.

• Задержка перед пропиской. Данный параметр указывает на временной интервал перед занесением описания Web-страницы в индекс после просьбы ее автора.

Теперь рассмотрим, как лучше подготовиться пользователю к составлению запроса. Прежде всего, необходимо провести всесторонний лексический анализ информации, которую вы собираетесь искать. Затем необходимо составить набор ключевых слов (при необходимости, на нескольких языках) в виде отдельных терминов, словосочетаний, профессиональной лексики и клише.

Далее следует технологический этап поисковой процедуры, в котором необходимо исследовать различные поисковые инструменты. Для каждого выбранного инструмента проводятся:

• Тестовые запросы из 1-2 ключевых слов или фразы.

• Анализ количественного отклика.

• Корректировка запроса по релевантности отклика.

Исходя из вышеизложенного, можно выделить следующие приемы эффективного поиска:

• Поиск общей информации в каталогах. В каталогах вы, как правило, обязательно выйдете на специализированные сервера в искомой области.

• Поиск узкоспециальной информации в поисковых машинах. Для проведения более обширного поиска ограниченного числа ссылок в каталогах явно недостаточно. Кроме того, узкоспециальная информация в каталогах может просто отсутствовать. Поэтому необходимо проводить поиск в поисковых машинах, обладающих индексами большого объема.

• Использование операторов или бланка расширенного запроса для сужения области поиска. Для проведения качественного поиска необходимо ознакомиться с языком запросов конкретной поисковой машины. Эффективным и простым способом решения проблемы составления качественного запроса является использование режима расширенного запроса.

• Использование функции поиска в найденном. Большинство поисковых систем поддерживают возможность поиска внутри полученных результатов. Как правило, для этого нужно включить специальный флажок Искать в найденном и ввести дополнительные слова для повторного поиска среди найденных по запросу страниц.

• Использование поиска похожих документов.

• Использование метапоисковых систем и программ ускоренного поиска информации. Для получения общего обзора документов целесообразно использовать возможности метапоисковых систем или программ ускоренного поиска. Напоминаем, данные инструменты поиска отправляют ваш запрос сразу нескольким поисковым системам и от каждой системы получают несколько самых релевантных ссылок.

• Просмотр раздела Ссылки на специализированных сайтах. Авторы многих специализированных Web-узлов накапливают свои коллекции ссылок по тематике сайта. Зачастую вы зайдете в этих коллекциях много полезных источников, сэкономив время, затрачиваемое на самостоятельный поиск с использованием рассмотренных выше инструментов.

• Поиск ответов на вопросы в группах новостей. При желании можно обратиться с конкретным вопросом о помощи в специализированную группу новостей. Найти нужную группу можно, используя специальные инструменты поиска, которые мы рассмотрим далее.

• Подписка на специализированные списки рассылки. Подписавшись на специализированный список рассылки, вы сможете получать по электронной почте свежую информацию по вашей тематике, а также задавать вопросы вашим коллегам-подписчикам.