яндекс, robots.txt и настройки сервера
В связи с скандалом с проиндексированными sms и прочими билетами и фаллоимитаторами с ножным приводом, и усиками моржа, яндекс стал всем вебмастерам советовать настоятельно править движки, писать robots.txt и прочее.
А как обстояит дело на самих сервисах яндекса? Сейчас мы займемся созданием дубля морды, более того попытаемся проиндексировать его.
Возьмем любимый яндексом сервис narod.ru
Делаем красивую ссылку.
http://narod.yandex.ru/?V-Yandexe-rabotayt-krivorukie-urody
Переходим по ней и … и видим туже народную морду. То есть дубль. (Что это такое и чем оно плохо - объяснять не буду)
Чтобы усилить эффект, идем в addurl и вуаля:
Адрес http://narod.yandex.ru/?V-Yandexe-rabotayt-krivorukie-urody успешно добавлен. По мере обхода робота он будет проиндексирован и станет доступным для поиска.
И эти люди запрещают ковыряться мне в носу учат других про файл robots.txt
Интересно, пофиксят когда-нибудь?
5 августа 2011 в 14:01
Думаю что пофиксят такую херню не скоро. Если Галина Райцина (передавайте примет МиРажу
) и мониторит твой блог, то Платон вряд ли 
Но я надеюсь, что им стыдно
7 августа 2011 в 23:51
admin, ты просто не шаришь, у них в .htaccess все грамотно закрыто. robotx.txt - для роботов, .htaccess для клевых парней и ч0ткий телак!