Сегодня «Яндекс» сообщил о завершении работ над системой быстрого индексирования документов. Новая поисковая технология позволяет находить документы через поиск почти сразу после их появления в Интернете.
Достаточно много поисковых запросов (от 2% до 8%) касаются событий, которые случились совсем недавно. Задавая такие запросы, пользователи ожидают найти страницы, которые были созданы совсем недавно, то есть содержат самую актуальную информацию. Чтобы хорошо отвечать на такие запросы, «Яндекс», во-первых, научился выявлять их среди общего потока, и во-вторых, внедрил нового поискового робота — Orange. Orange работает в режиме реального времени и умеет находить и индексировать документы, как только они появились в Интернете.
Некоторые сайты обновляются не очень часто, а на других — например, на новостных ресурсах — документы создаются постоянно, поэтому Orange постоянно проверяет ресурсы второго типа и добавляет новые документы в поиск по мере их появления, практически без задержек.