Поисковые запросы и их связи с веб-сайтами

Введение 4
Постановка задачи 5
Обзор литературы 6
История поисковых систем 7
Характеристики поисковых запросов 8
Стоп-слова 9
Ограничение расстояния между словами 10
Операторы 10
Понятия полноты и точности 13
Структура страницы поисковой выдачи поисковых систем 14
Расширенный поиск 17
Основные положения принципов работы 18
Модуль индексирования 18
Базы данных поисковых систем 19
Системы выдачи результатов 19
Принципы и методы работы краулера BeeBot 20
Математическая формулировка задачи о многоруком бандите и алгоритмы ее решения 22
Алгоритм Гиттенса 23
Алгоритм UCB1 24
Базы данных поисковой системы 26
Обработка результатов запроса пользователя 28
Поиск с использованием частоты термина 29
Векторный поиск 30
Поиск с использованием релевантности страниц 33
Параллельный поиск 35
Классификация текстовых документов с использованием метода «Наивный Байес» 36
«Наивный Байес» при поиске новостей 38
Выводы 41
Заключение 42
Список литературы 43

Купить

В современном мире такой ресурс как информация становится важнейшим ресурсом. Владение данным ресурсом в наиболее полной степени помогает человечеству эффективнее и быстрее решать различные задачи. Различные поисковые системы позволяют находить различные необходимые интернет-пользователям интернет-ресурсы в максимально короткое время. Системы и алгоритмы ранжирования интернет-ресурсов, используемые в поисковых системах дают возможность пользователям из всего многообразия документов, находящихся в сети Интернет находить наиболее подходящие, т.е. те, которые наиболее точно и полно отражают результаты, которые требуются пользователю сети Интернет. Также различные сервисы поисковых систем осуществляют классификацию документов, находящихся в сети Интернет в соответствии с их типами, соответственно данные сервисы также дают пользователям возможность осуществлять более эффективный поиск, например, при поиске пользователем некоторых фильмов, пользователю стоит воспользоваться видео сервисом, при поиске некоторых картинок, естественно, сервисом, содержащим графические изображения. Функции расширенного поиска поисковых систем дают возможность осуществлять поиск документов, находящихся в определенных форматах, на определенных языках и появившихся в сети в определенный диапазон времени.
Поисковая система представляет собой совокупность программных средств, реализующих различные алгоритмы, направленные на осуществление наиболее эффективного поиска, а также аппаратных средств, осуществляющих функционирование программных средств. Реализация и алгоритмы, которые реализуют программные средства поисковой системы являются коммерческой тайной, однако общие и некоторые распространенные идеи устройства поисковых систем и алгоритмы работы отдельных компонентов поисковых систем известны широкому кругу пользователей. Алгоритмы работы отдельных компонентов поисковых систем, реализации этих алгоритмов и методы взаимодействия этих компонент между собой представляют в совокупности поисковую систему.
Постановка задачи
• Изучение основных компонент поисковой системы
• Изучение некоторых алгоритмов работы компонентов поисковой системы. К компонентам поисковой системы можно отнести, например, алгоритмы работы так называемого краулера – программы, осуществляющей загрузку ссылок на определенной интернет-странице, а также осуществляющей выбор интернет-страницы для сканирования на каждом последующем шаге сканирования.
• Изучение некоторых способов индексирования документов т.е. способов записи документов в базу данных поисковой системы, а соответственно способов хранения информации в базе данных поисковой системы.
• Изучение некоторых способов формирования выдачи результатов найденных документов по запросу пользователя, включающих в себя алгоритмы ранжирования страниц.
• Изучение методов перенаправления запросов на обработку определенным сервисам на примере некоторой системы.
• Разработка и реализация нового более эффективного алгоритма поиска документов, относящихся к определенной тематике

Купить