Ответить Создать тему

RAMBLER ВВЕЛ В СТРОЙ НОВУЮ АРХИТЕКТУРУ ПОИСКА , теперь быстрее и оперативне...

Теги: RAMBLER
ASm
post Sep 24 2003, 16:44 
Отправлено #1


Активный

Сообщений: 2 547
Из: Чебоксары



Поисковая система Rambler ввела в строй новую версию поисковой машины, которая принципиально отличается от предыдущей по двум основным параметрам.

Во-первых, увеличилась скорость поиска; во-вторых, появилась возможность оперативного обновления поискового индекса. Если раньше индексная база обновлялась в среднем раз в месяц, то теперь, благодаря новой архитектуре поисковой системы, обновление может происходить каждый день, и даже несколько раз в день.

После изменения механизма работы поисковой машины, в течение двух месяцев последовательно перестраивались все компоненты системы. Вначале был запущен новый индексатор, затем технология автоматической доставки данных на поисковые сервера. В результате с середины июля индекс стал пополняться ежедневно.

С момента создания поисковой машины и до недавнего времени индекс состоял из двух больших частей, одна из которых использовалась для поиска, а другая - для формирования цитат и подсветки найденных слов запроса. Копии этих частей размещались соответственно на поисковых и цитирующих серверах. Такая архитектура позволяла поднимать по запросу все имеющиеся данные и проводить поиск и ранжирование, опираясь на полную информацию о документах. Однако обновление индексной базы на всех серверах одновременно было непростой и трудоемкой процедурой. Кроме того, с ростом интернета увеличивался и размер индекса, что приводило к замедлению поиска. Поэтому было принято решение изменить структуру поисковой системы.

В новой версии индексная база разбита на восемь частей. Семь из них представляют собой поисковые индексы, каждый из которых построен по седьмой части Рунета. Ежедневно обновляется одна из частей индекса. Таким образом, с момента скачивания страницы роботом до ее появления в поиске проходит от 2 до 8 дней.

Восьмая часть индекса представляет собой "быструю базу", построение которой занимает два часа. В быструю базу входят страницы, содержащие счетчик Тор100. Каждый раз, когда в рейтинге Тор100 появляется новая страница, которой еще нет в индексе, она отправляется в очередь на обработку. Перед обработкой страницы фильтруются, из них отбираются наиболее посещаемые. В настоящее время быстрая база обновляется два раза в сутки, однако в ближайшее время планируется обновлять ее чаще.

Поиск по всем восьми базам осуществляется параллельно, результаты поиска объединяются. За счет этого поиск происходит в несколько раз быстрее по сравнению с поиском по монолитной индексной базе. Каждая из семи частей основной базы размещена на семи серверах. Такое распределение обеспечивает устойчивость и стабильность работы системы при повышении нагрузки или авариях. В подобных случаях из результатов поиска не пропадают соответствующие части индекса, так как поток запросов динамически перенаправляется на наименее нагруженные машины.

(сообщение пресс-службы Rambler)

Источник: http://www.cnews.ru/news/comp/

--------------------
я не знаю, в чем ключ к успеху, но ключ к провалу в попытках понравится всем
Profile CardPM
  0/0  
alexey
post Sep 24 2003, 16:52 
Отправлено #2


-

Сообщений: 68 122
Из: Чебоксары
Telegram: @blog21



Яндекс же к своему дню рождения подготовили новую уже восьмую версию дизайна.

--------------------
Да нормальный был год.
Это вы ещё просто 2024-й не видели!
Profile CardPM
  0/0  
ZyX
post Sep 26 2003, 09:57 
Отправлено #3


Активный

Сообщений: 2 443
Из: Чебоксары



Мне не очень нравится новый дизайн.. по моему то что есть сейчас должно долго просуществовать .... по моему! )))

--------------------
iPhone 4 / Samsung r20
Profile CardPM
  0/0  
lioha
post Oct 2 2003, 22:17 
Отправлено #4


Пользователь

Сообщений: 58
Из: С.Петербург



новую архитектуру своей системы они конечно сделали, но вот релеватность-то их выдачи по прежнему хромает...поэтому несмотря на нововведения Яндекс по прежнему впереди

--------------------
xxx
Profile CardPM
  0/0  
ZyX
post Oct 3 2003, 12:37 
Отправлено #5


Активный

Сообщений: 2 443
Из: Чебоксары



Да rambler ока и держится на TOP100, НО ведь сейчас есть уже Rambler TV, так что если прально направить, ТО rambler может потеснить Яндекс, релевантность релевантностью, но у Google вроде она и поболее будет, а все у него где-то 10% запросов в рунете ....

--------------------
iPhone 4 / Samsung r20
Profile CardPM
  0/0  
lioha
post Oct 3 2003, 15:27 
Отправлено #6


Пользователь

Сообщений: 58
Из: С.Петербург



QUOTE (ZyX @ Октябрь 3 2003, 13:37)
....релевантность релевантностью, но у Google вроде она и поболее будет, а все у него где-то 10% запросов в рунете ....

у рунета есть Яндекс, потому и Гугль не так популярен у нас, в отличие от запада - где Гугль самый популярный поисковик. А у Гугла проблемы с русским - он не знает падежей, поэтому для поиска в русскоязычном инете - Яндекс пока лучший

--------------------
xxx
Profile CardPM
  0/0  
SiMM
post Oct 3 2003, 17:17 
Отправлено #7


Banned

Сообщений: 37 461
Из: «либеральных»«ценностей»



lioha, с падежами и самому разобраться не зазорно smile.gif когда то сам сидел на ya.ru - только попробовав однажды google.com.ru понял, что yandex - не для меня.

--------------------
Profile CardPM
  0/0  
lioha
post Oct 3 2003, 20:37 
Отправлено #8


Пользователь

Сообщений: 58
Из: С.Петербург



QUOTE (SiMM @ Октябрь 3 2003, 18:17)
lioha, с падежами и самому разобраться не зазорно smile.gif когда то сам сидел на ya.ru - только попробовав однажды google.com.ru понял, что yandex - не для меня.

а при чём тут разбираться с падежами? Яндексу не важно ищещь ты "Чебоксары", "Чебоксарах" и т.п. А Гугл будет искать именно это слово. А простые пользователи думаешь будут задумываться о таких вещах? Они ищут так, как они считают нужным. Поэтому ИМХО Яндекс лучше для поиска в Рунете, а Гугл - для всего остального. Я сам предпочитаю Гугль, но если мне надо найти что-то в Рунете - это однозначно Яндекс rolleyes.gif

--------------------
xxx
Profile CardPM
  0/0  
rambler
post Nov 26 2003, 04:01 
Отправлено #9


Unregistered





За накрутку счетчика rambler.ru, участие в рейтинге приостановлено администратором
  0/0  
Gator
post Nov 28 2003, 15:55 
Отправлено #10


SAGE

Сообщений: 24 993



QUOTE (SiMM @ Октябрь 3 2003, 17:17)
lioha, с падежами и самому разобраться не зазорно smile.gif когда то сам сидел на ya.ru - только попробовав однажды google.com.ru понял, что yandex - не для меня.

я тоже считал, что google - лучший поисковик. По крайней мере раньше через него я находил чаще то, что не мог найтив Яндаксе. Но в последнее время (месяца 3) ситауция стала прямо противоположная! Что случилось, кто знает?

--------------------
Крокодил. Крокожу...
Profile CardPM
  0/0  

ОтветитьTopic Options
1 чел. читают эту тему (1 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
Быстрый ответ
Кнопки кодов
 Расширенный режим
 Нормальный режим
    Закрыть все тэги


Открытых тэгов: 
Введите сообщение
Смайлики
smilie  smilie  smilie  smilie  smilie 
smilie  smilie  smilie  smilie  smilie 
smilie  smilie  smilie  smilie  smilie 
smilie  smilie  smilie  smilie  smilie 
smilie  smilie  smilie  smilie  smilie 
smilie  smilie  smilie  smilie  smilie 
         
Показать все

Опции сообщения