Парадоксы выдачи google

Интересные вещи в выдаче Гугла попадаются. Может это нормально, конечно, но для меня это парадокс.
Как же так? Страница закрыта от индексации в файле robots.txt, но при этом ничего не мешает выдать эту самую закрытую от индексации, страницу в поиске по запросу “cufon”.  Ссылка в серпе вторая, это получается описание страницы только нет, а так все на месте. Как положено и в серпе (выдача) и ссылка на пост, и  title вполне релевантный )

В моем понимание если в файле robots.txt есть ограничения на какой-то материал сайта, этого сайта не то, что в выдаче не должно быть его поисковый робот и индексировать не должен.

Интересная выдача гугла
Гугл жжет

Вывод простой поисковые системы работая по принципу “лучшее серферу” индексируют все подряд. Мало ли будет интересный, а главное полезный материал для пользователя, его нельзя пропустить.

Теперь я верю в теорию “индексируется все и вся”, рассказывал мне коллега, как проиндексировался у него pdf файл на сервере положенный на хранение, но я не верил…

Да и вообще не всему можно верить, что говорят. Даже супер-пупер демократические поисковики говорят одно, но поступают по своему усмотрению. И это не смотря на то, что мы их так любим!

Предлагаю посмотреть как смотрится поисковый гигант “google” изнутри, в картинках так сказать. С таким размахом, конечно же мы допускаем, что могут быть и ошибки в среде программистов гугла и в аппаратном обеспечение его машин.

В общем гугл как всегда впечатляет!

Поделиться в соц. сетях

Опубликовать в Google Plus
Опубликовать в LiveJournal
Опубликовать в Мой Мир
Опубликовать в Одноклассники
Опубликовать в Яндекс