Накануне (8 мая) Google сообщил о завершении работ над индексной программой Google Caffeine. По словам Кэрри Граймз (Carrie Grimes), программного инженера Google, благодаря более быстрой индексации Caffeine обеспечивает на 50% более свежие результаты поиска. Новая программа индексирует огромные объемы данных — каждую секунду параллельно обрабатываются сотни тысяч страниц.
Усовершенствован и сам процесс индексации. Раньше индекс состоял из нескольких слоев, каждый из которых обновлялся в разное время, например, главный — каждые две недели. Появление страницы в индексе требовало больше времени. Caffeine анализирует веб небольшими порциями и обновляет поисковый индекс на постоянной основе по всему миру. Таким образом, новая информация намного быстрее добавляется в индекс.
В официальном блоге Google отмечается, что к созданию нового индексной программы компанию подтолкнуло растущие разнообразие и количество контента.
Напомним, Google анонсировал Caffeine летом прошлого года, тогда всем желающим предложили принять участие в тестировании нового механизма. В ноябре 2009 года Google сообщает о планах выкатить Caffeine на основной поиск. К реализации планов приступили в том же месяце – в конце ноября Caffeine заработал на одном из дата-центров.