У “Яндекса” появился быстрый робот

Недавно, компания “Яндекс” анонсировала запуск быстрого робота. “Умная” машина будет обнаруживать и индексировать страницы в реальном масштабе времени. Данная информация появилась в корпоративном блоге компании.

Алгоритм работы робота заключается в работе как с основными документами, так и с теми, которые востребованы пользователями. Благодаря этому нововведению, робот способен обнаружить измененные или добавленные страницы на ресурсе уже через несколько часов!

На сегодняшний день, база робота содержит порядка 4 миллионов документов. Каждые два часа база обновляется, а время от момента скачивания документа до момента его появления на поиске исчисляется двумя - пятью часами.

Пользователь сможет отличить полученные результаты быстрого робота от основных. Результата быстрого робота содержат надпись о том, когда была проиндексирована страница (вчера, позавчера, несколько часов назад). Также определить работу быстрого робота можно посредством сортировки результата поиска по дате.