Давайте сперва абстрагируемся и попытаемся понять, что же такое SEО. Это так называемая оптимизация в поисковых системах. Я бы эту деятельность назвал немного по-другому, а именно МПВ — манипуляция поисковой выдачей. А теперь давайте представим себе простой пример. Предположим, у Вас есть сайт. Вы выкладываете информацию на этом сайте в таком порядке, чтобы она воспринималась пользователями с максимальным удобством. В разделе новости информация отсортирована по принципу новизны — сперва самые свежие новости, потом слегка устаревшие, но все еще актуальные, а затем — архив. Но сайт взломал хакер и перемешал новости. На главной странице стали отображаться новости, опубликованные много лет назад, а свежие новости можно найти только в глубине архива. Приблизительно так иногда алгоритм поисковой системы рассматривает попытки тех, кто «не в теме», манипулировать поисковой выдачей. SEO было довольно простым на этапе становления, но с течением времени становилось все более сложным. А в эпоху Матрикснет SEO стало архисложным и дается немногим, а большинство попыток манипуляции поисковой выдачей перемалывается самообучающимся алгоритмом и сводится на нет.
Но вернусь к своему повествованию. В один прекрасный момент я захотел перестать зависеть от своего хостера. Зависимость заключалась в том, что основной домен, на котором был мой старый сайт, принадлежал не мне, а этому хостеру. Поэтому я решил банально перенести этот сайт на новый домен, а старый домен, который имел некоторый траст для алгоритма Яндекс, сделать неосновным зеркалом.
Прежде чем предпринимать какие-либо действия, я конечно же изучил всю доступную информацию по вопросу склейки зеркал, которую предоставляет сам Яндекс, а также ту, которую мне удалось найти через поиск. Для поиска информации я использовал все тот же Яндекс, т.к. по привычке с незапамятных времен использую именно этот поисковик для исследования русскоязычных запросов.
Как оказалось, для поиска информации по SEO, то есть по тому, как манипулировать результатами выдачи, поисковики использовать не рекомендуется.
Итак, я взял и настроил robots.txt обеих сайтов — старого, который имел некоторый траст в Яндекс, и нового, который был зеркалом старого.
1. Файл robots.txt старого сайта
Собственно, данная статья не претендует быть истиной в последней инстанции, но некоторый свет, я надеюсь, на вопросы о том, что же такое SEO в Рунете, проливает.
