Легенды виртуального спрута.

Кто бы мог подумать, что сегодняшний монстр виртуальной пространства, сканирующий все поры Всемирной паутины, некогда был крохотным учебным проектом! Два парня из Стендфорского университета сначала просто экспериментировали с поисковыми роботами, а через два года их поиски материализовались в систему Google. Произошло это в 1998 году.

Система состоит из нескольких роботов, которые нацелены на выполнение разных функций. Главный робот просматривает содержание страниц для поискового индекса. Кроме него есть роботы, выполняющие аналогичные задачи по контенту мобильных устройств, по сканированию сайтов для индекса картинок.

Сообщество seo-оптимизаторов связывает с работой Google две легенды. Согласно первой, сайты, часто меняющие своих хозяев, доменные имена система отправляет в своеобразное чистилище – «песочницу». Они находятся там до тех пор, пока поисковая система не соизволит принять решение убрать их из отстойника. По второй легенде, которая противоположна первой, новые сайты получают поначалу высокий рейтинг, продвигаются в верхние строчки поисковой выдачи. После некоторого периода этот бонус для новых сайтов система снимает, располагая сайт в соответствии с его реальным положением.