правильно его использовать .
Команда Яндекс.Вебмастера
Сегодня мы хотим рассказать о расширении функциональности инструмента по управлению зеркалами сайта в Яндекс.Вебмастере и показать, как правильно его использовать .
Команда Яндекс.Вебмастера
","contentType":"text/html"},"proposedBody":{"source":"
Сегодня мы хотим рассказать о расширении функциональности инструмента по управлению зеркалами сайта в Яндекс.Вебмастере и показать, как правильно его использовать .
Команда Яндекс.Вебмастера
Сегодня мы хотим рассказать о расширении функциональности инструмента по управлению зеркалами сайта в Яндекс.Вебмастере и показать, как правильно его использовать .
Команда Яндекс.Вебмастера
","contentType":"text/html"},"authorId":"30364427","slug":"19180","canEdit":false,"canComment":false,"isBanned":false,"canPublish":false,"viewType":"old","isDraft":false,"isOnModeration":false,"isSubscriber":false,"commentsCount":67,"modificationDate":"Tue Jul 08 2014 20:20:00 GMT+0000 (Coordinated Universal Time)","showPreview":true,"approvedPreview":{"source":"
Сегодня мы хотим рассказать о расширении функциональности инструмента по управлению зеркалами сайта в Яндекс.Вебмастере и показать, как правильно его использовать .
Команда Яндекс.Вебмастера
инструмента по управлению зеркалами сайта в Яндекс.Вебмастере и показать, как правильно его использовать .","contentType":"text/html"},"proposedPreview":{"source":"
Сегодня мы хотим рассказать о расширении функциональности инструмента по управлению зеркалами сайта в Яндекс.Вебмастере и показать, как правильно его использовать .
Команда Яндекс.Вебмастера
","html":"Сегодня мы хотим рассказать о расширении функциональности инструмента по управлению зеркалами сайта в Яндекс.Вебмастере и показать, как правильно его использовать .","contentType":"text/html"},"titleImage":null,"tags":[{"displayName":"Яндекс.Вебмастер","slug":"yandeks-vebmaster","categoryId":"153547628","url":"/blog??tag=yandeks-vebmaster"},{"displayName":"зеркала","slug":"zerkala","categoryId":"153547627","url":"/blog??tag=zerkala"},{"displayName":"главное зеркало","slug":"glavnoe-zerkalo","categoryId":"153547377","url":"/blog??tag=glavnoe-zerkalo"}],"isModerator":false,"publishCount":1,"commentsEnabled":true,"url":"/blog/19180","urlTemplate":"/blog/%slug%","fullBlogUrl":"https://webmaster.yandex.ru/blog","addCommentUrl":"/blog/createComment/webmaster/19180","updateCommentUrl":"/blog/updateComment/webmaster/19180","addCommentWithCaptcha":"/blog/createWithCaptcha/webmaster/19180","changeCaptchaUrl":"/blog/api/captcha/new","putImageUrl":"/blog/image/put","urlBlog":"/blog","urlEditPost":"/blog/569dee91cb28c8a506119926/edit","urlSlug":"/blog/post/generateSlug","urlPublishPost":"/blog/569dee91cb28c8a506119926/publish","urlUnpublishPost":"/blog/569dee91cb28c8a506119926/unpublish","urlRemovePost":"/blog/569dee91cb28c8a506119926/removePost","urlDraft":"/blog/19180/draft","urlDraftTemplate":"/blog/%slug%/draft","urlRemoveDraft":"/blog/569dee91cb28c8a506119926/removeDraft","urlTagSuggest":"/blog/api/suggest/webmaster","urlAfterDelete":"/blog","isAuthor":false,"subscribeUrl":"/blog/api/subscribe/569dee91cb28c8a506119926","unsubscribeUrl":"/blog/api/unsubscribe/569dee91cb28c8a506119926","urlEditPostPage":"/blog/569dee91cb28c8a506119926/edit","urlForTranslate":"/blog/post/translate","urlRelateIssue":"/blog/post/updateIssue","urlUpdateTranslate":"/blog/post/updateTranslate","urlLoadTranslate":"/blog/post/loadTranslate","urlTranslationStatus":"/blog/19180/translationInfo","urlRelatedArticles":"/blog/api/relatedArticles/webmaster/19180","author":{"id":"30364427","uid":{"value":"30364427","lite":false,"hosted":false},"aliases":{},"login":"webmaster","display_name":{"name":"webmaster","avatar":{"default":"0/0-0","empty":true}},"address":"[email protected]","defaultAvatar":"0/0-0","imageSrc":"https://avatars.mds.yandex.net/get-yapic/0/0-0/islands-middle","isYandexStaff":false},"originalModificationDate":"2014-07-08T16:20:29.000Z","socialImage":{"orig":{"fullPath":"https://avatars.mds.yandex.net/get-yablogs/51778/file_1461153249801/orig"}}}}}">
Прежде чем начинать продвижение сайта, надо сначала определить какой домен будет основным. Иначе в индексах поисковых систем может оказаться оба сайта (с префиксом www и без него) с одинаковым содержимым.
Сайт доступен для индексации как с www, так и без www. Вам необходимо выбрать основное зеркало.
Зеркалами считаются сайты, являющиеся полными или частичными копиями. Копии определяются по совпадению контента на страницах с одинаковыми адресами (site1.ru/page.html и site2.ru/page.html). Например, в большинстве случаев хосты site.ru и www.site.ru являются зеркалами, так как контент страниц, доступных по одинаковым адресам, не отличается.
Также сайты считаются зеркалами, если со страниц одного сайта настроен серверный редирект на соответствующие им страницы другого сайта (site1.ru перенаправляет на site2.ru, site1.ru/page.html перенаправляет на site2.ru/page.html и т.д.).
Так как роботы поисковых систем склеивают зеркала и индексируют только одно из них (основное), то иногда требуется вручную указать для роботов, какое именно из зеркал должно являться основным.
Существует несколько методов для смены основного зеркала:
#Если www.glavnoye-zerkalo.ru главное зеркало сайта, то #robots.txt для всех сайтов из группы зеркал выглядит так User-Agent: * Disallow: /forum Disallow: /cgi-bin Host: www.glavnoye-zerkalo.ru
Это приводит к тому, что показатели сайта , PR и ссылочное ранжирование распыляются на оба сайта. И хуже всего, то, что за дублированный контент, страницы сайта могут вообще выпасть из индекса.
Статья по теме: Как экономить на покупке Айфона
Проблема в том, что поисковые машины не всегда правильно определяют главное зеркало сайта, пользуясь своими алгоритмами определения и склейки зеркал. И главным зеркалом может быть выбран совсем не тот сайт.
Поэтому лучше не надеяться на авось, а самому явным образом указать основной домен. Существует несколько способов сказать роботам поисковых систем на то, какое зеркало нужно считать основным.
Чтобы указать для Гугла основной домен, выполните следующие действия.
Кроме того, для Гугла можно прописать инструкцию в файле.htaccess
Redirect 301 / https://сайт/
Для Яндекса основной домен или как называет Яндекс основное зеркало указывается в файле
Главное зеркало – основная версия сайта. Зеркалом именуют полную или практически полную копию сайта, размещённую по другому интернет-адресу. Она повторяет контент на 80% и выше. Для поисковых роботов, наличие приставки www перед адресом делает сайт совершенно другим, то есть www.названиесайта.ru и названиесайта.ru – понимаются, как физически отличающиеся адреса.
Яндекс и Google индексируют сайты по-разному: первый может считать главным сайтом www.сайт.ru, а второй – сайт.ru. Или наоборот. Именно поэтому важно «тыкнуть их носом» в главный и зеркальный сайты.
Обычно зеркало сайта возникает из-за www-префикса.. Но случаются и переезды на другой домен с оставлением того же контента сайта, но без настройки редиректа.
Но если не сделать это по-умному, то ТИЦ и PageRank только снизятся для каждого сайта, разделившись, из-за непонимания поисковиками, что должно считаться главным зеркалом, а что – второстепенным. Поэтому, чтобы не навредить себе, вебмастер должен дать понять роботам Яндекс и Google – какая версия сайта является главным зеркалом.
Также перестанет работать часть ссылок и поведенческие факторы. Если по ссылкам переходят на сайт.ru и проводят там долго времени - это сигнал поисковой системе о качестве сайта. При этом переход по ссылке на www.сайт.ru - никакого влияния на сайт.ru не окажет.
Проверка правильности настройки зеркала проста – в адресной строке используемого браузера вводится адрес сайта.
Возьмём адрес www.сайт.ru, как и в прошлых примерах. Если после ввода адреса и символы www не исчезли, перенаправив пользователя на сайт.ru, то далее следует проверка сайт.ru тем же способом.
Если после перехода адрес снова не изменился – то есть к нему не добавились символы www, – то значит, что зеркало не настроено. Получается, что оба указанных адреса индексируются поисковыми системами как самостоятельные сайты.
И это плохо, поскольку все показатели распыляются на 2 сайта. Как поправить ситуацию – рассмотрим ниже.
Большинство сайтов сейчас отображаются без приставки www, поскольку она являла собой некую отличительную черту адреса на заре становления Internet как глобальной сети. Тогда буквы www считались прогрессивным префиксом, который отождествлялся с Интернетом как жутко интересной новинкой.
По мере того, как он плотнее входил к нашу жизнь, сайтостроители задали тенденцию к упрощению. В том числе это коснулось и самих адресов. Поэтому, выбирая основное зеркало сегодня, следует задавать адрес без www, который стал уже анахронизмом, пережитком времени.
Значения главного и второстепенного зеркала задаются с помощью файлов.htaccess и robots.txt, которые должны быть помещены в корневую директорию домена. В первом необходимо прописать условие – если пользователь заходит на www.сайт.ru, то он перенаправляется на сайт.ru. Какой вид это имеет в коде – можно найти в интернете для каждого конкретного случая (в зависимости от того, какая CMS используется).
Поскольку файл.htaccess не гарантирует абсолютно одинакового понимания роботами от Яндекс и Google какая версия является главным зеркалом, то в инструментарии web-мастера нужно проделать нижеследующую работу.
Для Яндекса:
Для Гугла:
Для Яндекса указание в.htaccess и инструментах вебмастера не гарантирует стопроцентный результат. Поэтому следует в файле robots.txt в корне директории с сайтом прописывать директиву, отправляющую Яндекс на нужный сайт – Host. В файле прописывается следующее:
User-agent: Yandex
Disallow: /wp-admin
Host: сайт.ru
В сроке «Disallow:» указывается всё, что, по мнению вебмастера, не должен делать и куда не должен заглядывать робот от Яндекса – cgi-bin, админка и т.п. В приведенном примере от индексации закрыта администраторская часть wordpress.
После этого, Яндекс правильно определяет основное зеркало сайта.
После перевода сайта на протокол HTTPS, Google начинает https-сайты повышать в позициях выдачи, т.к. считает их сайтами с повышенной безопасностью. Поэтому, кроме перехода на безопасный протокол шифрования, после такого шага необходимо выполнить редирект зеркала на основное, содержащее HTTPS.
Если до этого сайт http://сайт.ru был основным, а http://www.сайт.ru – вспомогательным, то теперь основным станет https://сайт.ru, а два указанные – вспомогательными зеркалами. Причиной переезда сайта на новый адрес, с буковкой «s» является установка на сайт сертификатов SSL, повышающих безопасность (данные, которые передаются на сайт шифруются).
Роботам требуется определённое время, чтобы «прочитать» изменения, произошедшие на сайте. А потому проверяются показатели посещаемости и количество страниц в индексе спустя 2-4 недели.
Это делается, чтобы удостовериться, что выполненные ранее действия привели к желаемому результату. Если что-то не получилось – необходимо проверить – возможно, где-то закралась ошибка. Даже лишняя запятая, закравшаяся в код, может сделать файлы robots.txt и.htaccess бесполезными для поисковых систем.
Когда только начинаешь заниматься сайтами, то не задумываешься, что, например, www..ru — разные адреса. Эти доменные имена являются зеркалами. На каждом из них могут отображаться разные сайты.
Яндекс считает зеркалами сайты, которые содержат одинаковый контент на страницах, находящихся на одинаковых адресах. Например, www..ru/yandex-webmaster/. У меня стоят , поэтому все зеркала ведут на один адрес.
Какие адреса могут являться зеркалами:
Главное зеркало - это доменное имя сайта, по которому он индексируется в поисковике и показывается в результатах поиска, если доступен по нескольким доменам. Можно настроить в сервисе Яндекс Вебмастера.
Если изначально не было выбрано главное зеркало сайта, то робот выберет его самостоятельно в соответствии со своим алгоритмом.
Чтобы указать главное зеркало поисковику необходимо настроить переезд в Яндекс Вебмастере .
Зайдите в раздел «Индексирование» в пункт «Переезд сайта». Выберите новый домен, который будет главным зеркалом. Если в списке нет нужного адреса, то следует .
Если не планируете менять домен, а просто хотите сменить протокол или префикс, то для этого есть два пункта:
Чтобы выбрать главное зеркало нужно пройти несколько этапов:
Раньше это делалось довольно сложно и долго. На данный момент все проходит очень быстро и, обычно, без проблем.
И да, советую переходить на HTTPS , т.к. Google дает таким адресам чуть больше преимуществ за повышенную безопасность передачи данных по этому протоколу.
Если вы планируете сделать главным адрес с протоколом HTTPS (или с префиксом www), то добавляйте адрес именно с этим протоколом (префиксом), например, https://сайт.
Есть другой вариант перехода на главное зеркало — просто сделать 301-редирект. Но если сначала сделать настройки в Яндекс Вебмастере, то переезд пройдет быстрее. Яндекс пишет, что смена занимает от одной до трех недель. После этого сайт начинает участвовать в поиске под именем нового главного зеркала.
Яндекс склеивает все домены и показывает в поиске только главное зеркало. Страницы неглавного зеркала будут в поиске до тех пора, пока страницы главного зеркала их не вытеснят. Вытесненные страницы будут исключены из поиска, но могут храниться в базе Яндекса.
Проверить является ли сайт зеркалом, можно добавив его в Яндекс.Вебмастер.
При необходимости зеркало может быть отклеено.
Да, учитываются. Например, это полезно, если интернет-ресурс переезжает на новый домен. Если старый домен станет неглавным зеркалом нового, это поможет сайту сохранить позиции в поиске.
Да, робот склеит такие сайты, но использовать этот способ не рекомендуется. Вместо него лучше настроить перенаправление на соответствующие друг другу страницы.
Если сайты перестают являться зеркалами друг друга и отдают разное содержимое, в течение нескольких недель они расклеиваются роботом.
Вы можете сообщить роботу о необходимости расклейки сайтов с помощью специального инструмента в сервисе Яндекс.Вебмастер.
После того, как адреса расклеятся, они будут отображаться как отдельные, не связанные между собой ресурсы.
Сайты могут иметь неограниченное количество зеркал, но главное зеркало сайта всегда будет единственным. Зеркалами считаются ресурсы, у которых совпадает контент. Зеркала появляются автоматически при создании версии сайта на www и без нее, при переезде на новый домен и при подключении протокола https.
Можно добавить зеркало сайта специально. Обычно это делается для удобства пользователей, когда название товара или бренда имеют разные написания: kettler.ru и ketler.ru или med.ru и myod.ru. Иногда регистрируют один домен в разных доменных зонах и ставят переадресацию на основной домен: dom.ru, dom.com, dom.info и dom.realty. Если сайт переезжает на новый домен, то также происходит добавление зеркала и смена главного зеркала.
Директива Host. Сообщите, какой именно ресурс является главным зеркалом с помощью инструмента Яндекс.Вебмастер. Для этого укажите в файле robot.txt новое зеркало сайта с помощью директивы host. Пропишите данные правильно, иначе робот проигнорирует их. Директива host должна быть единственной. Если их прописано несколько, робот возьмет данные из первой. Лучше всего добавить ее в группу User-Agent и разместить после Disallow и Allow.
Склеивайте только сайты с идентичным содержимым. Если контент будет отличаться, робот их не склеит. Поэтому при переезде на новый домен с параллельным редизайном проводите работы поэтапно. Сначала сделайте дубликат старого сайта, затем назначьте новый домен главным зеркалом и переведите трафик на него. После этого обновляйте дизайн и вносите другие изменения в содержание.
Серверное перенаправление. Задайте серверный редирект с HTTP-кодом 301 со старого ресурса на новый. Не следует направлять все страницы старого сайта на одну страницу нового, как правило, главную. Это замедляет скорость индексации нового ресурса. Делайте редирект каждой страницы по отдельности. Файлы robot.txt должны совпадать. При перенаправлении с одного сайта на другой страницы первого ресурса начинают исключаться из поиска и трафик падает. Трафик восстанавливается, когда перенаправление полностью завершается и второй сайт становится главным зеркалом. Учитывайте, что пару недель трафик просядет.
Проверьте, чтобы при редиректе совпадали адреса с директивой host. Если они не совпадают, робот не сможет корректно индексировать. Он самостоятельно выберет главное зеркало, и им может стать не тот ресурс, который нужен. Допустим, вы переезжаете на новый домен. Посмотрите, все ли указания ведут на него.
Через Яндекс.Вебмастер недобросовестные исполнители могут забрать весь трафик на другой ресурс. Для этого достаточно иметь доступ в панель Вебмастера с правами администратора. Делается это так. Сначала создается копия основного сайта. Дизайн не важен, главное – должен совпадать контент, который либо парсят, либо копируют, если есть доступ к файлам. Затем в панели Вебмастера прописывают новое зеркало сайта, указав новый домен как основной. Сайты склеиваются, прежний убирается из индекса, и весь трафик перенаправляется на новое зеркало.
Проблемы в этом случае две. Первая – владелец может долго не подозревать о случившемся. Смена главного зеркала происходит исключительно в Вебмастере Яндекса. Для смены не требуется предоставление паспорта как при смене владельца домена. Уведомление на почту или телефон тоже не приходит. Владелец только видит по факту, что посещаемость резко снизилась до нуля. О причинах он может только догадываться.
Вторая проблема в том, что техподдержка Яндекса не реагирует на подобные случаи. По правилам, если контент у сайтов совпадает, их склеивают как зеркала. Поменять содержимое ресурса злоумышленника владелец основного сайта не может. Он может заменить только собственный контент, потеряв все наработки прошлых лет.
Чтобы не попасть в подобную ситуацию, тщательно проверяйте подрядчиков. Не воспринимайте Яндекс.Вебмастер как информационный инструмент сайтовладельца. Контролируйте деятельность исполнителей и оперативно меняйте пароли. Чаще всего мошенническая схема выглядит как бесплатная услуга для наработки портфолио. Исполнитель-фрилансер предлагает бесплатно выполнить работы по сайту за положительный отзыв. После получения доступа он прописывает собственный домен как главное зеркало и перенаправляет весь трафик к себе. Фактически «угоняет» сайт и его посетителей.
Сайты считаются зеркалами, когда у них совпадает содержимое на 80% и больше. Зеркал может быть много, но главное зеркало - одно. Владелец может назначить главное зеркало в Яндекс.Вебмастере или робот выберет его автоматически.
Назначайте главное зеркало через директиву Host в файле robot.txt. Директива должна быть единственной. Если ошибочно указали несколько директив, робот возьмет информацию из первой. Прописывайте директиву правильно: корректный адрес домена (с www или без него), наличие https и номер порта.
При переезде на новый домен сначала создайте копию старого ресурса и назначьте ее главным зеркалом. Вносите изменения в дизайн, структуру и контент на новом сайте только после апдейта Яндекса и переходе трафика.
При редиректе учитывайте, что страницы старого сайта выпадают из индекса, и количество посетителей снижается. Объем трафика восстановится только после полного переезда на новый домен. Редирект делайте постранично.
Тщательно выбирайте подрядчиков для работы в панели Яндекс.Вебмастера. Недобросовестные исполнители могут украсть трафик, сделав копию вашего ресурса и назначив ее главным зеркалом. При обнаружении мошенничества техподдержка Яндекса не сможет помочь, потому что расклейка зеркал происходит только при замене контента на одном из сайтов.
Материал подготовила Светлана Сирвида-Льорентэ.
