Turtle >> Текущая реализация прототипа. Поисковая система "Turle".

2. Текущая реализация прототипа.
Как отмечалось во введении, программное обеспечение разрабатывалось таким образом, чтобы быть способным вместить в себя практически не ограниченное количество информации для поиска. Однако сдерживающим фактором всегда являлся и является экономический фактор. В данной работе мы умышленно конфигурационно ограничили нашу систему рамками сегментов российской (вернее русскоговорящей) сети Интернет. На практике это означает, что центральный узел поисковой системы "Turtle" в текущей реализации для обработки ресурсов таких сегментов сети имеет в своем составе:

компьютер центрального диспетчера;
10 компьютеров - накопителей данных;
компьютер коллектора индексов;
4 компьютера поисковых процессоров;
3 компьютера архивных серверов;
компьютер формирования и оптимизации поисковых запросов;
балансировщик нагрузок и кэш-сервер.
Многие сервера совмещают со своей основной работой другие вспомогательные функции, требуемые для функционирования всего комплекса. Любая отдельно взятая подсистема с точки зрения функциональности может быть распределена по нескольким физическим серверам без изменения программного обеспечения. Данные российского сегмента мы оценивали примерно так:

суммарная совокупность серверов - 500 тыс.
суммарное количество документов, пригодных для сканирования - 70 млн.
Как видно из приведенных цифр, мы старались минимизировать потребность в аппаратных ресурсах за счет высокого качества программных разработок. Удалось нам это или нет - жизнь покажет.

<< 1. Введение | Содержание | 3. Структура и функции >>

Черепаший Ранк. Реклама на Turtle Логотипы Правовая информация Конфиденциальность Контакты