2. Автоматичні системи інформаційного пошуку.

Автоматизована пошукова система - система, що складається з персоналу та комплексу засобів автоматизації його діяльності, що реалізує інформаційну технологію виконання установлених функцій.

Досвід і практика створення систем в різних сферах діяльності дозволяє дати більш широке і універсальне визначення, яке повніше відображає всі аспекти їх сутності. Під інформаційною системою надалі розуміється - організована сукупність програмно - технічних і інших допоміжних засобів, технологічних процесів і функціонально - певних груп працівників, які забезпечують збір, уявлення і накопичення інформаційних ресурсів в певній предметній області, пошук і видачу відомостей, необхідних для задоволення інформаційних потреб встановленого контингенту користувачів - абонентів системи.

Особливості пошукових систем.

У роботі пошуковий процес представлений чотирма стадіями: формулювання (відбувається до початку пошуку); дію (що починається пошук); огляд результатів (результат, який користувач бачить після пошуку); та удосконалення (після огляду результатів і перед поверненням до пошуку з іншою формулюванням тієї ж потреби).

Більш зручна нелінійна схема пошуку інформації складається з наступних етапів:

1. Фіксація інформаційної потреби на природній мові;

2. Вибір пошукових сервісів мережі та формалізація запису інформаційної потреби на конкретних інформаційно-пошукових мовами (ІПМ);

3. Виконання створених запитів;

4. Попередня обробка отриманих списків посилань на документи;

5. Звернення за обраними адресами за шуканими документами;

6. Попередній перегляд вмісту знайдених документів;

7. Збереження релевантних документів для подальшого вивчення;

8. Витяг з релевантних документів посилань для розширення запиту;

9. Вивчення всього масиву збережених документів;

10. Якщо інформаційна потреба не повністю задоволена, то повернення до першого етапу.

3. Проблеми та завдання іп.

Центральна завдання ІП - допомогти користувачеві задовольнити його інформаційну потребу. Так як описати інформаційні потреби користувача технічно непросто, вони формулюються як деякий запит, який представляє з себе набір ключових слів, що характеризує те, що шукає користувач.

Класична задача ІП, з якої почався розвиток цієї галузі, - це пошук документів, що задовольняють запиту, в рамках деякої статичної колекції документів. Але список завдань ІП постійно розширюється і тепер включає:

• Питання моделювання;

• Класифікація документів;

• Фільтрація документів;

• Кластеризація документів;

• Проектування архітектур пошукових систем і користувацьких інтерфейсів;

• Витяг інформації, зокрема анотування та реферування документів;

• Мови запитів і ін

Також, перед движками ІП ставляться деякі завдання по обробці природних мов, що включає в себе морфологічний аналіз, дозвіл лексичної багатозначності і так далі.

Однією з основних проблем інформаційного пошуку є необхідність обробки значних об'ємів текстової інформації. Ця проблема спричиняє за собою наступну - велика тривалість обробки запиту, що не радує сучасних користувачів. Перед проведенням аналізу методів рішення проблем пошуку інформації необхідно згадати про найчастіше вирішувані завдання інформаційного пошуку, таких як класифікація і кластеризація, які найчастіше вирішуються при інформаційному пошуку об'єктом якого виступають текстові документи.

Класифікація - це закономірність, що дозволяє робити висновок відносно визначення характеристик конкретної групи. Таким чином, для проведення класифікації мають бути присутніми ознаки, що характеризують групу, до якої належить та або інша подія або об'єкт (зазвичай при цьому на підставі аналізу вже класифікованих подій формулюються деякі правила). Фактично завдання класифікації - це класичне завдання розпізнавання, де по повчальній вибірці система відносить новий об'єкт до тієї або іншої категорії.

Завдання кластеризації схоже із завданням класифікації, є її логічним продовженням, але її відмінність в тому, що класи набору даних, що вивчається, заздалегідь не зумовлені. Кластеризація призначена для розбиття сукупності об'єктів на однорідні групи (кластери або класи). Якщо ці вибірки представити як точки в признаковом просторі, то завдання кластеризації зводиться до визначення "згущувань точок". Мета кластеризації - пошук існуючих структур. Кластеризація є описовою процедурою, вона не робить ніяких статистичних висновків, але дає можливість провести розвідувальний аналіз і вивчити "структуру даних".

Кластеризація сьогодні застосовується при реферуванні великих документальних масивів, визначення взаємозв'язаних груп документів, спрощення процесу перегляду при пошуку необхідної інформації, знаходження унікальних документів з колекції, виявлення дублікатів або дуже близьких за змістом документів.

Кластеризація може бути використана для розподілу документів в колекції по класах, що дозволяє підвищити швидкість пошуку документів і точність відповіді. Саме з цих причин кластеризація текстових документів нині є однією з найважливіших і динамічно таких, що розвиваються областей інформаційних технологій.

Величезні об'єми інформації в мережі Internet часто приводять до того, що кількість об'єктів, що видаються по запиту користувача, дуже велика. Проте, в більшості випадків, її можна зробити доступною для сприйняття.