Как определить главное зеркало сайта

Главное зеркало И его влияние на продвижение сайта.

Содержание

Что такое главное зеркало сайта, как узнать?

Главное зеркало – основная версия сайта. Зеркалом именуют полную или практически полную копию сайта, размещённую по другому интернет-адресу. Она повторяет контент на 80% и выше. Для поисковых роботов, наличие приставки www перед адресом делает сайт совершенно другим, то есть www.названиесайта.ru и названиесайта.ru – понимаются, как физически отличающиеся адреса.

Почему важно чтобы сайт имел главное зеркало?

Обычно зеркало сайта возникает из-за www-префикса.. Но случаются и переезды на другой домен с оставлением того же контента сайта, но без настройки редиректа.

Но если не сделать это по-умному, то ТИЦ и PageRank только снизятся для каждого сайта, разделившись, из-за непонимания поисковиками, что должно считаться главным зеркалом, а что – второстепенным. Поэтому, чтобы не навредить себе, вебмастер должен дать понять роботам Яндекс и Google – какая версия сайта является главным зеркалом.

Как проверить и определить, указано ли главное зеркало.

Проверка правильности настройки зеркала проста – в адресной строке используемого браузера вводится адрес сайта.

Возьмём адрес www.сайт.ru, как и в прошлых примерах. Если после ввода адреса и символы www не исчезли, перенаправив пользователя на сайт.ru, то далее следует проверка сайт.ru тем же способом.

Если после перехода адрес снова не изменился – то есть к нему не добавились символы www, – то значит, что зеркало не настроено. Получается, что оба указанных адреса индексируются поисковыми системами как самостоятельные сайты.

Виртуальный хостинг сайтов для популярных CMS:

WordPress

Joomla

OpenCart

OcStore

PrestaShop

Drupal

Magento

Moodle

MODX Revo

DLE

InstantCMS

IPB

И это плохо, поскольку все показатели распыляются на 2 сайта. Как поправить ситуацию – рассмотрим ниже.

Какую версию выбрать основной – с www или без?

Большинство сайтов сейчас отображаются без приставки www, поскольку она являла собой некую отличительную черту адреса на заре становления Internet как глобальной сети. Тогда буквы www считались прогрессивным префиксом, который отождествлялся с Интернетом как жутко интересной новинкой.

По мере того, как он плотнее входил к нашу жизнь, сайтостроители задали тенденцию к упрощению. В том числе это коснулось и самих адресов. Поэтому, выбирая основное зеркало сегодня, следует задавать адрес без www, который стал уже анахронизмом, пережитком времени.

Главное зеркало в инструментах Яндекс Вебмастер и Google Search Console.

Значения главного и второстепенного зеркала задаются с помощью файлов .htaccess и robots.txt, которые должны быть помещены в корневую директорию домена. В первом необходимо прописать условие – если пользователь заходит на www.сайт.ru, то он перенаправляется на сайт.ru. Какой вид это имеет в коде – можно найти в интернете для каждого конкретного случая (в зависимости от того, какая CMS используется).

Поскольку файл .htaccess не гарантирует абсолютно одинакового понимания роботами от Яндекс и Google какая версия является главным зеркалом, то в инструментарии web-мастера нужно проделать нижеследующую работу.

1. Зайти в инструменты вебмастера, пункт «Настройка индексирования» – «Главное зеркало».
2. Указать в нём один из трёх имеющихся вариантов: «на усмотрение робота», «www.сайт.ru» или «сайт.ru» (вместо «сайт.ru» следует подставлять нужный адрес сайта). В этом случае выбор должен быть остановлен на «сайт.ru».

1. Зайти в Google Search Console, в раздел – «Сообщения».
2. В пункте «Выберите предпочтительную версию» – указать желаемую версию сайта.

Директива host в robots.txt для Яндекса

Для Яндекса указание в .htaccess и инструментах вебмастера не гарантирует стопроцентный результат. Поэтому следует в файле robots.txt в корне директории с сайтом прописывать директиву, отправляющую Яндекс на нужный сайт – Host. В файле прописывается следующее:

User-agent: Yandex
Disallow: /wp-admin
Host: сайт.ru

В сроке «Disallow:» указывается всё, что, по мнению вебмастера, не должен делать и куда не должен заглядывать робот от Яндекса – cgi-bin, админка и т.п. В приведенном примере от индексации закрыта администраторская часть wordpress.

После этого, Яндекс правильно определяет основное зеркало сайта.

Как сделать главное зеркало с SLL и HTTPS

После перевода сайта на протокол HTTPS, Google начинает https-сайты повышать в позициях выдачи, т.к. считает их сайтами с повышенной безопасностью. Поэтому, кроме перехода на безопасный протокол шифрования, после такого шага необходимо выполнить редирект зеркала на основное, содержащее HTTPS.

Если до этого сайт http://сайт.ru был основным, а http://www.сайт.ru – вспомогательным, то теперь основным станет https://сайт.ru, а два указанные – вспомогательными зеркалами. Причиной переезда сайта на новый адрес, с буковкой «s» является установка на сайт сертификатов SSL, повышающих безопасность (данные, которые передаются на сайт шифруются).

Мониторинг проиндексированных страниц сайта.

Роботам требуется определённое время, чтобы «прочитать» изменения, произошедшие на сайте. А потому проверяются показатели посещаемости и количество страниц в индексе спустя 2-4 недели.

Как настроить зеркало сайта

За счет уязвимости в Вебмастере кто угодно может забрать себе весь трафик и позиции вашего сайта. О том, как это может происходить и как нужно работать с зеркалами сайта – в этой статье.

Сайты могут иметь неограниченное количество зеркал, но главное зеркало сайта всегда будет единственным. Зеркалами считаются ресурсы, у которых совпадает контент. Зеркала появляются автоматически при создании версии сайта на www и без нее, при переезде на новый домен и при подключении протокола https.

Можно добавить зеркало сайта специально. Обычно это делается для удобства пользователей, когда название товара или бренда имеют разные написания: kettler.ru и ketler.ru или med.ru и myod.ru. Иногда регистрируют один домен в разных доменных зонах и ставят переадресацию на основной домен: dom.ru, dom.com, dom.info и dom.realty. Если сайт переезжает на новый домен, то также происходит добавление зеркала и смена главного зеркала.

Добавляйте зеркала сами

Директива Host. Сообщите, какой именно ресурс является главным зеркалом с помощью инструмента Яндекс.Вебмастер. Для этого укажите в файле robots.txt новое зеркало сайта с помощью директивы host. Пропишите данные правильно, иначе робот проигнорирует их. Директива host должна быть единственной. Если их прописано несколько, робот возьмет данные из первой. Лучше всего добавить ее в группу User-Agent и разместить после Disallow и Allow.

Склеивайте только сайты с идентичным содержимым. Если контент будет отличаться, робот их не склеит. Поэтому при переезде на новый домен с параллельным редизайном проводите работы поэтапно. Сначала сделайте дубликат старого сайта, затем назначьте новый домен главным зеркалом и переведите трафик на него. После этого обновляйте дизайн и вносите другие изменения в содержание.

Проверьте, чтобы при редиректе совпадали адреса с директивой host. Если они не совпадают, робот не сможет корректно индексировать. Он самостоятельно выберет главное зеркало, и им может стать не тот ресурс, который нужен. Допустим, вы переезжаете на новый домен. Посмотрите, все ли указания ведут на него.

Обеспечьте безопасность

Через Яндекс.Вебмастер недобросовестные исполнители могут забрать весь трафик на другой ресурс. Для этого достаточно иметь доступ в панель Вебмастера с правами администратора. Делается это так. Сначала создается копия основного сайта. Дизайн не важен, главное – должен совпадать контент, который либо парсят, либо копируют, если есть доступ к файлам. Затем в панели Вебмастера прописывают новое зеркало сайта, указав новый домен как основной. Сайты склеиваются, прежний убирается из индекса, и весь трафик перенаправляется на новое зеркало.

Проблемы в этом случае две. Первая – владелец может долго не подозревать о случившемся. Смена главного зеркала происходит исключительно в Вебмастере Яндекса. Для смены не требуется предоставление паспорта как при смене владельца домена. Уведомление на почту или телефон тоже не приходит. Владелец только видит по факту, что посещаемость резко снизилась до нуля. О причинах он может только догадываться.

Вторая проблема в том, что техподдержка Яндекса не реагирует на подобные случаи. По правилам, если контент у сайтов совпадает, их склеивают как зеркала. Поменять содержимое ресурса злоумышленника владелец основного сайта не может. Он может заменить только собственный контент, потеряв все наработки прошлых лет.

Чтобы не попасть в подобную ситуацию, тщательно проверяйте подрядчиков. Не воспринимайте Яндекс.Вебмастер как информационный инструмент сайтовладельца. Контролируйте деятельность исполнителей и оперативно меняйте пароли. Чаще всего мошенническая схема выглядит как бесплатная услуга для наработки портфолио. Исполнитель-фрилансер предлагает бесплатно выполнить работы по сайту за положительный отзыв. После получения доступа он прописывает собственный домен как главное зеркало и перенаправляет весь трафик к себе. Фактически «угоняет» сайт и его посетителей.

Запомните

Сайты считаются зеркалами, когда у них совпадает содержимое на 80% и больше. Зеркал может быть много, но главное зеркало – одно. Владелец может назначить главное зеркало в Яндекс.Вебмастере или робот выберет его автоматически.

Назначайте главное зеркало через директиву Host в файле robots.txt. Директива должна быть единственной. Если ошибочно указали несколько директив, робот возьмет информацию из первой. Прописывайте директиву правильно: корректный адрес домена (с www или без него), наличие https и номер порта.

При переезде на новый домен сначала создайте копию старого ресурса и назначьте ее главным зеркалом. Вносите изменения в дизайн, структуру и контент на новом сайте только после апдейта Яндекса и переходе трафика.

При редиректе учитывайте, что страницы старого сайта выпадают из индекса, и количество посетителей снижается. Объем трафика восстановится только после полного переезда на новый домен. Редирект делайте постранично.

Тщательно выбирайте подрядчиков для работы в панели Яндекс.Вебмастера. Недобросовестные исполнители могут украсть трафик, сделав копию вашего ресурса и назначив ее главным зеркалом. При обнаружении мошенничества техподдержка Яндекса не сможет помочь, потому что расклейка зеркал происходит только при замене контента на одном из сайтов.

Материал подготовила Светлана Сирвида-Льорентэ.

Как настроить главное зеркало сайта в Google Search Console и Яндекс.Вебмастер

Нередко бывает, что один и тот же сайт доступен по множеству адресов (зеркал). Например, с приставкой www и без нее, по протоколам http и https. Для вас ничего не меняется, вы видите один и тот же сайт, но для поисковых систем все эти зеркала являются разными сайтами. Поисковая система выберет одно из зеркал (главное зеркало сайта), которое и будет присутствовать в поисковой выдаче. И далеко не всегда этот выбор совпадает с мнением владельца сайта. Еще одним негативным фактором может стать дублирование контента, просадка позиций и трафика и распыление ссылочной массы между разными зеркалами, что затруднит получение максимального эффекта от SEO.

Какие бывают зеркала сайтов

• с префиксом www и без;
• по протоколу http и https;
• одинаковый контент на разных доменах;

Помимо классических вариантов с www и без и http-https, есть и варианты с различными доменами. Например, вы продаете автомобили Mitsubishi и ваш сайт mitsubishi.ru. Чтобы посетители, вводящие в адресную строку адрес вашего сайта, точно попали к вам, вы используете зеркала с доменами, содержащими наиболее очевидны опечатки. Например, mitsubisi.ru, mitcubishi.ru и так далее. Подобрать наиболее распространенные фразы с опечатками вам может помочь сервис Яндекс Вордстат.

По мнению поисковых систем, сайты являются зеркалами, если их контент совпадает на 80% (именно контент, а не дизайн, структура сайта и т. д.).

Зеркала сайта еще называют «алиасы».

Как же быть? Для того, чтобы правильно настроить главное зеркало сайта в поисковых системах, нужно воспользоваться встроенным функционалом Google Search Console и Яндекс.Вебмастер.

Как определить главное зеркало сайта

Сначала нужно убедиться, что поисковики выбрали главное зеркало правильно.

Как определить главное зеркало сайта в Google

В поисковой строке Google вводим выражение site:yoursite.ru (без пробелов), где yorsite.ru — ваш сайт.

Так это выглядит на примере моего блога:

Как видим, главным считается вариант с https и без www.

P.S. Если вы заметили звездочки и хотите себе такие же, то читайте как добавить звездочки в сниппет Google.

Как определить главное зеркало сайта в Яндексе

Если сайт и его зеркала добавлены в Яндекс.Вебмастер, можно посмотреть прямо в его интерфейсе:

Основное зеркало будет на первом месте, далее в древовидной структуре будут его зеркала.

Если сайта в Вебмастере нет, то проверяем через ту же конструкцию site:yoursite.ru, как и в Google.

Как настроить главное зеркало сайта в Google Search Console

Даже если все в порядке и Google верно определил главное зеркало, лучше подстраховаться и прямо указать ему на главное зеркало, чтобы в будущем не возникло никаких сюрпризов. Для этого необходимо добавить сайт в Google Search Console, если вы этого еще не сделали.

Затем откройте основной домен в Search Console, нажмите на значок шестеренки в правом верхнем углу и выберите пункт «Настройки сайта». На открывшейся странице производите необходимые настройки.

После чего нажмите «Сохранить».

UPD: После выхода новой версии Google Search Console процедура настройки зеркала изменилась и описанный выше метод больше не работает. Теперь непосредственно в Search Console нет настроек смены зеркала в рамках одного домена, есть только настройки, связанные с переездом на новый домен.

Теперь при добавлении https-версии сайта не надо делать никаких действий, Google будет автоматически отдавать приоритет версии с https. Но для верности можно настроить 301-й редирект.

В случае с www теперь необходимо либо воспользоваться тегами caconical, или настроить 301-й редирект.

Как настроить главное зеркало сайта в Яндекс.Вебмастер

Думаю, не нужно объяснять, что все необходимые домены уже должны быть добавлены и подтверждены в сервисе Вебмастера. Перейдите в раздел «Индексирование» и выберите пункт «Переезд сайта». Здесь вы можете выбрать новое главное зеркало из списка. Если домен полностью совпадает и требуется настроить только www или https, можете воспользоваться чекбоксами.

После завершения настроек не забудьте нажать «Сохранить».

Настройка переадресации

Если речь идет не просто о www и https, а о разных доменах (например, вы сделали ребрендинг и купили новый домен), то требуется также настроить 301-й редирект со старого домена на новый. Вообще, и в случаях с www и https также очень рекомендуется использовать данный тип редиректа.

Редирект позволит передавать ссылочный вес всех второстепенных зеркал на основное. Оно получит максимальный траст сайта и будет ранжироваться в поисковых системах на полную мощность.

Редирект с вариантами www

Как правило, и владельцы сайтов, и поисковые системы выбирают в качестве основного домен без приставки www. Но если ваш домен слишком короткий или вы успели разрекламировать свой сайт именно с www, есть смысл использовать приставку.

Для настройки редиректа найдите в корневом каталоге сайта файл .htaccess.

Перед внесением изменений обязательно сохраните бекап данного файла.

Источники:

http://www.ipipe.ru/info/glavnoe-zerkalo.html

http://www.ashmanov.com/education/articles/zerkalo-sajta/

http://snarkfog.net/kak-nastroit-glavnoe-zerkalo-sayta/