Обсуждение статьи Три поисковика Рунета, не считая Google
Всего сообщений : 19

Андрей Травин : Про кластер

25.06.01, 12:12

Я ни бельмеса ни понимаю в кластерах на платформе Windows. Когда я заинтересовался тем, что такое кластер, их еще не было в природе, а были кластеры у Digital на серверах с процесссором Alfa. Собственно один раз окунувшись в эту технологию, я написал статью в покойную газету "Софт-Маркет" про кластер АльтаВисты и на этом, казалось, с данной темой расстался навсегда. Однако в 1999 году, я все-таки спросил Киреева как устроено его хозяйство на нескольких компьютерах. Бесстрастный диктофон сохранил следующий текст (август 1999 года): "В Апорте это не кластер, на самом деле, поэтому буду употреблять для скорости ╚кластер╩ в кавычках. Апорт 2000 работает на двух кластерах, этого мы считаем достаточным. Набор из трех компьютеров: один индексирующий и два поисковых. Два поисковых для того, чтобы организовать такой незаметный процесс обновления базы и, кроме того, для повышения устойчивости в случае выхода из строя одного из компьютеров и в случае копирования базы с индексирующей машины на поисковую - вторая поисковая держит нагрузку. В Windows существует единственное кластерное решение, которое предлагает Microsoft - это MS Claster Server. У него есть свои ограничения, две машины под NT в кластере с точки зрения обычных приложений, существует одна машина как виртуальная. Там существует ограничение на количества машин и другие, не все наши нюансы хорошо ложатся на кластерную модель. Мы хотим уйти от универсальных решений - Апорт сам по себе система уникальная - она работает более или менее прилично по той причине, что она заточена под задачи, для которых она создается - задачи полнотекстового поиска. Очень часто люди, которые начинают знакомитья Апортом задают вопросы. А почему Вы не используете например SQL-сервер или Orale - они хороши для большого круга задач, но не для полнотекстового поиска. Для пользователя существует некоторая точка входа в систему. Как будет устроена база в сотни гигабайт? В универсальных решениях все построено на таблицах - в Апорте нет никаких таблиц, главный алгоритм работает на других моделях. В таком виде Апорт требует меньше вычислительных ресурсов и более управляем: у нас есть исходные коды, мы всегда можем систему изменить - а это важно в условиях, когда мы работаем на длительную перспективу. Мы чувствуем хороший фундамент нашей технологии. Как поведет себя кластер сервер? Наша система не пытается сделать вид, что не замечает наличия нескольких компьютеров, она заведомо знает об этом и использует". Примерно, этот текст я и пересказал в сжатом виде. Про то, как устроен кластер Яндекса блестяще рассказал Дмитрий Завалишин (в истории про переезд), про то как на каждый запрос отвечают как минимум 21 машина, и какие буквами эти машины обозначены. Его пересказывать - только портить ;) А может с 1999 года Microsoft переименовала свой кластер-сервер? ;)

Моё мнение 8-) Dmitriy (05.09.01, 12:53)
RAMBLER - самый галимый поисковик. А Yandex - самый лучший... VicZ (23.07.01, 20:13)
Странный подход и выводы... (+) Keva (23.07.01, 15:32)
   Странный подход и выводы... (+) Андрей Т равин (23.07.01, 18:12)
     Ладно, тёзка, "проехали" :-) Удачи! (-) Keva (23.07.01, 18:31)
Мета поиск...а почему нет 360.ru ? Adrik (03.07.01, 1:06)
Компиляция форума на www.searchengines.ru wolf (02.07.01, 10:26)
   А я думаю, что это мания величия ;) Андрей Травин (02.07.01, 16:29)
     А я думаю, что это мания величия ;) wolf (03.07.01, 9:49)
   Во-во... Подозреваю, что с Ильей автор (+) Keva (23.07.01, 15:34)
Релевантность по методу Яндекса Alex (30.06.01, 17:23)
   Релевантность по методу Яндекса Михаил Фадеев (Яндекс) (30.06.01, 22:02)
Спасибо за в целом и.. Илья Сегалович (25.06.01, 8:43)
   IS> 3. Эти запросы п.. Андрей Травин (25.06.01, 18:56)
Скрипты все-таки не выполняются Александр Садовский (24.06.01, 23:22)
И еще Kolbasuk (23.06.01, 20:13)
   Про кластер Андрей Травин (25.06.01, 12:12)
     Про кластер Kolbasuk (25.06.01, 20:24)
Небольшие комментарии Александр Садовский (23.06.01, 16:59)