Как указать главное зеркало в гугл. История о том, как я сменил главное зеркало. Основной домен для Google

У меня часто спрашивали, лучше сделать домен с WWW или без. Я решил сделать небольшой пост-заметку по этому поводу, а так же пояснить — как сделать склейку зеркал с WWW и без.

Для начала давайте разберем, откуда вообще взялась приставка с тройным W (World Web Wide).

Дело было в 1989 году, когда Тим Бернерс-Ли придумал всемирную паутину. Гениальный был дядька, честно говоря. И фактически через год он издал первый в мире браузер с одноименным названием. Оттуда и пошла приставка с тройным WWW, чтобы было сразу видно — что это гипертекстовая ссылка. Если кто-то хочет почитать историю подробнее, то вот ссылка — Википедия .

Сейчас — 2014 год. Прошло уже более 20 лет и уже фактически каждый ребенок в мире имеющий смартфон/компьютер может понимать где ссылка. Т.е. по сути, WWW — это рудимент, который живет с 90-х годов. Многие знают, как я отношусь к подобным «динозаврам» — я их искореняю (аналогично и с IE 6, 7 и прочими старыми браузерами, и т.д.).

Я считаю, что все должно идти только вперед и развиваться. А значит — нельзя тащить за собой пережитки прошлого, просто потому что ты привык.

Поэтому ответ однозначен: Без WWW лучше, чем с ним! Не держите рядом хлам — это лишнее.

Как определить главное зеркало сайта

Бывают ситуации, когда сайт уже давно запущен, но оптимизацией занялись недавно. В таком случае неверно определенное главное зеркало может принести беду в виде переиндексации всего сайта. Поэтому я расскажу, как все правильно сделать:

1. Самый очевидный способ — вбить URL Вашего сайта в поиск Яндекса или Google. Поисковая система сама подсказывает, какое зеркало она считает основным. Не будем ей перечить — и воспользуемся ее советом.
2. Второй способ — всевозможные сервисы. Например — http://xseo.in/glue . Вбейте туда свой сайт и сервис укажет вам его основное зеркало.

Теперь мы уже определились что и с чем будем склеивать — приступим к практике.

Склейка зеркал сайта

Для того, чтобы объединить, нужно зайти в файл.htaccess в корневом каталоге вашего сайта. Если данного файла нет — создайте его. Откройте его программой Notepad ++ (она бесплатная) и допишите туда следующий код, в зависимости от того, что с чем нужно склеить.

Первые 2 директивы прописываются 1 раз на весь документ. Если они у вас уже прописаны в файле, писать заново не нужно. Вставьте лишь последние 2 строки, заменив «site.ru» на свой домен.

Основное зеркало без WWW

Options +FollowSymLinks RewriteEngine On RewriteCond %{HTTP_HOST} ^www.site\.ru$ RewriteRule ^(.*)$ http://site.ru/$1 M/pre>

Основное зеркало с WWW

Options +FollowSymLinks RewriteEngine On RewriteCond %{HTTP_HOST} ^site\.ru$ RewriteRule ^(.*)$ http://www.site.ru/$1

После того, как вы склеите зеркала сайта, не забудьте

Зайдите в раздел «Индексирование» в пункт «Переезд сайта». Выберите новый домен, который будет главным зеркалом. Если в списке нет нужного адреса, то следует .

Если не планируете менять домен, а просто хотите сменить протокол или префикс, то для этого есть два пункта:

• добавить https;
• добавить www.

Чтобы выбрать главное зеркало нужно пройти несколько этапов:

1. Добавить сайт в Яндекс Вебмастер;
2. Отметить галочкой нужный пункт;
3. Сделать 301-редирект со старого домена на соответствующие страницы нового.

Раньше это делалось довольно сложно и долго. На данный момент все проходит очень быстро и, обычно, без проблем.

И да, советую переходить на HTTPS , т.к. Google дает таким адресам чуть больше преимуществ за повышенную безопасность передачи данных по этому протоколу.

Если вы планируете сделать главным адрес с протоколом HTTPS (или с префиксом www), то добавляйте адрес именно с этим протоколом (префиксом), например, https://сайт.

Есть другой вариант перехода на главное зеркало — просто сделать 301-редирект. Но если сначала сделать настройки в Яндекс Вебмастере, то переезд пройдет быстрее. Яндекс пишет, что смена занимает от одной до трех недель. После этого сайт начинает участвовать в поиске под именем нового главного зеркала.

Индексируются ли зеркала?

Яндекс склеивает все домены и показывает в поиске только главное зеркало. Страницы неглавного зеркала будут в поиске до тех пора, пока страницы главного зеркала их не вытеснят. Вытесненные страницы будут исключены из поиска, но могут храниться в базе Яндекса.

Как проверить, является ли сайт чьим-нибудь зеркалом?

Проверить является ли сайт зеркалом, можно добавив его в Яндекс.Вебмастер.

1. Если сайт признан неглавным зеркалом, он будет автоматически добавлен вместе со своим главным зеркалом.
2. Если сайты не являются зеркалами, они будут отображаться в сервисе независимо друг от друга.

При необходимости зеркало может быть отклеено.

Учитываются ли характеристики неглавных зеркал на главном?

Да, учитываются. Например, это полезно, если интернет-ресурс переезжает на новый домен. Если старый домен станет неглавным зеркалом нового, это поможет сайту сохранить позиции в поиске.

Склеятся ли адреса, если настроить перенаправление со всех страниц одного сайта на главную страницу другого?

Да, робот склеит такие сайты, но использовать этот способ не рекомендуется. Вместо него лучше настроить перенаправление на соответствующие друг другу страницы.

Как расклеиваются зеркала?

Если сайты перестают являться зеркалами друг друга и отдают разное содержимое, в течение нескольких недель они расклеиваются роботом.

Вы можете сообщить роботу о необходимости расклейки сайтов с помощью специального инструмента в сервисе Яндекс.Вебмастер.

После того, как адреса расклеятся, они будут отображаться как отдельные, не связанные между собой ресурсы.

Здравствуйте, уважаемые читатели блога. Сегодня я хотел бы раскрыть очень важную тему, касающуюся, в первую очередь, сайтов, с которых качают много файлов.

Однако и для рядовых веб-ресурсов эта тема окажется полезной.

В этой статье я расскажу о том, что такое зеркало сайта, какое зеркало будут считать главным поисковые системы, и как «убедить» поисковики считать главным зеркалом тот сайт, который мы считаем подходящим.

Прежде всего, давайте определимся, что вообще такое зеркало сайта и для чего оно нужно.

Зеркало сайта – точная или почти точная копия какого-либо сайта, доступная под разными адресами, но содержащая одинаковый контент .

К примеру, у вас есть сайт с адресом «www.example.ru», но также он доступен по адресу «www.site.ru». В этом случае сайты считаются зеркалами.

Поисковые системы, индексируя интернет, часто сталкиваются с сайтами-клонами, нарушающими авторское право владельца сайта-прототипа. Естественно, что поисковики пытаются такие сайты наказать за воровство идеи, дизайна, контента и т.д. Но при этом нужно уметь отличать сайты-клоны от зеркал сайтов, что в настоящее время поисковики делают очень неплохо. Но все же мы можем помочь Гуглу, Яндексу и другим поисковым системам определить главный сайт и его зеркала, связав их в одну «кучу». Но об этом чуть позже.

Для чего же нужно зеркало или нужны несколько зеркал? Дело в том, что сайт, расположенный на сервере хостинг-провайдера, может быть загружен запросами пользователей. Особенно это заметно в тех случаях, когда сайт предлагает своим посетителям скачать какие-либо файлы. В этом случае скорость скачивания будет сильно зависеть от мощности сервера (вашего хостера), но в любом случае эта мощность конечна. Если же мы создадим копию сайта или несколько копий, то позволим нашим посетителям скачивать информацию с сайта намного быстрее. Это основной смысл зеркал, но далеко не единственный.

Итак, зеркало сайта нужно:

• для уменьшения нагрузки на сервер;
• для возможности проведения технических работ на «запасном» сайте без отключения самого сайта;
• для сохранности данных (резервные данные никогда не помешают);
• для того чтобы сайт был доступен по нескольким url-адресам.

Роль зеркал в SEO

На seo-оптимизацию сайта зеркала прямо не влияют. Но если сайт будет доступен на нескольких серверах, то улучшится его скорость загрузки, что положительно скажется на поведенческих факторах – в частности на показателе отказов.

Кроме этого, сайты-зеркала делят между собой показатели тИЦ и PR – они у веб-ресурсов одни на всех. Т.е. если у главного сайта тИЦ равен «Х», у первого зеркала «Y», а у второго «Z», то у всех них будет один тИЦ, равный «X+Y+Z». Тоже самое касается и PR.

Негативные последствия могут произойти в том случае, если поисковики определят главное зеркало сайта неверно. Тогда вы будете раскручивать один сайт, а он будет считать неосновным, и весь вес перейдет на лже-главное зеркало.

Как склеивать зеркала

Существует несколько способов, позволяющих склеивать два или большее количество зеркал в один сайт.

Файл роботс

Чаще всего это делается в файле robots.txt, где можно прямо указать основное зеркало таким образом:

• Host: www.site.ru

Но этот способ отлично воспринимает только Яндекс, для Гугла придется использовать другие методы.

Редирект

Второй по популярности способ – настройка . В этом случае вам нужно на всех сайтах-зеркалах отредактировать файл.htaccess, добавив в него несколько строк:

RewriteEngine on RewriteCond %{HTTP_HOST} ^site.ru RewriteRule ^(.*)$ http://www.site.ru/$1 RewriteBase /

RewriteEngine on RewriteCond %{HTTP_HOST} ^site.ru RewriteRule ^(.*)$ http://www.site.ru/$1 RewriteBase /

Панель вебмастеров

В панелях Яндекс.Вебмастер и Вебмастерс.Гугл также можно настроить главное зеркало.

Вот где можно сделать это в Яндексе (в качестве зеркал учитываются только проиндексированные сайты)

А так можно поступить с Гуглом.

Как расклеить зеркала

Ну, это совсем просто. Просто избавьтесь от всего того, что вы делали на предыдущих шагах:=). Но если поисковые системы сами с похожим контентом, то самым грамотным способом их расклеить будет изменение информации на сайтах. Сделайте так, чтобы они были как можно меньше похожими друг на друга, и тогда через некоторое время (как правило, около месяца) поисковики сами автоматически расклеют зеркала.

Надеюсь, что эта статья была полезна.

Зеркало сайта — базовое понятие в SEO, суть термина заключается в следующем: у нас есть сайт site.ru и у него есть несколько вариантов написания (считаем, что подключен протокол https):

• https://site.ru
• https://www.site.ru
• https://site.ru
• https://www.site.ru

А теперь фокус!

Для поисковой системы каждый вариант написания сайта — это отдельный сайт

То есть, изначально при запуске сайта у нас есть как минимум 4 его копии, соответственно плодятся дубли страниц, и сайт не может полноценно продвигаться.

Поэтому при базовой оптимизации нужно оставлять только одно зеркало (например, с помощью 301 редиректа). А для того, чтобы Яндекс корректно воспринял нужное нам зеркало, его необходимо добавить в Яндекс Вебмастер.

Добавляем главное зеркало (переезд сайта) в Яндекс Вебмастер

В текущем интерфейсе Яндекс Вебмастер указать главное зеркало можно в разделе переезд сайта (после того, как ).

Переходим в раздел и видим такую картину

Здесь надо выбрать варианты главного зеркала (с https и/или www). Предварительно нужно будет подтвердить права на сайт.

После того, как вы добавите главное зеркало, необходимо настроить его со стороны сайта (например, 301 редиректом).

Привожу код, который может это сделать (размещать его нужно в файле.htaccess в корне вашего сайта). Обратите внимание, что данный код может не работать на некоторых хостингах, результатом его работы может быть .

Options +FollowSymLinks RewriteEngine On RewriteCond %{HTTP_HOST} ^www.site.ru$ RewriteRule ^(.*)$ https://site.ru/$1

Options + FollowSymLinks RewriteEngine On RewriteCond % { HTTP_HOST } ^ www . site . ru $ [ NC ] RewriteRule ^ (. * ) $ http : //site.ru/$1

Это вариант редиректа домена с www на без www (сюда же можно добавить https вместо http и тогда у вас сайт заработает на https протоколе)

Зеркало сайта – точные и частичные копии сайта, доступные под разными адресами. Обычно они определяются путем сравнения контента на страницах с одинаковыми адресами, например site1.ru/index.php и site2.ru/index.php. В большинстве случаев www.site.ru и site.ru также являются зеркалами, т.к. являются для поисковиков сайтами с одинаковым содержанием, но расположенными по разным адресам.

На что влияет?

Если поисковые работы находят в интернете одинаковые сайты, то они идентифицируют их как «зеркала». Как всем известно, основная задача поисковых систем заключается в предоставлении пользователям наибольшего объема уникальной информации. При этом поисковые алгоритмы постоянно развиваются и усовершенствуют методы борьбы с дублирующимся контентом, удаляя неуникальные документы из индекса.

Поэтому все найденные зеркала склеиваются поисковыми роботами, а в индексе остается только один сайт, который считается основным зеркалом.

Если не произвести необходимые настройки, то алгоритмы поисковых систем могут выбрать в качестве основного зеркала совсем не тот сайт, который нужен нам для . Чтобы этого избежать, рекомендуется своевременно выполнить ряд работ по склейки всех зеркал, с указанием нужного сайта в качестве главного зеркала.

Склейка зеркал также необходимо выполнять в случае сменяя доменного имени, это позволит сохранить (тИЦ и PR), а также передать вес от имеющихся ссылок.

Как узнать, что сайт - неглавное зеркало

Если существует сайт, который находится не в индексе поисковой системы и есть подозрение, что он является неосновным зеркалом какого-либо ресурса, то стоит добавить его к индексации на странице " Сообщить о новом сайте ". Если появилось соответствующее сообщение, то ресурс склеин:

Способы склейки зеркал

Существует несколько способов склеить все зеркала и показать поисковым системам, какая из копий сайта является основной. Некоторые из представленных способов подходят только для настройки корректной обработки зеркал в пределах одного домена, другие подходят для сайтов, расположенных на разных доменах.

Директива Host. Главное зеркало сайта можно указать в помощи директивы Host. Ее обычно пишут после директив Disallow:

User-Agent: *
Disallow: /admin/
Disallow: /index.php
Host: www.domain.ru

Директива Host корректно обрабатывается только поисковой системой Яндекс, поэтому ее рекомендуют использовать одновременно с другими способами настройки зеркал.

Ссылочная структура. Помочь поисковой системе правильно выбрать основное зеркало сайта можно, использую грамотную ссылочную структуру (актуально, если на сайте используются абсолютные ссылки). Необходимо, чтобы все ссылки с внутренние ссылки сайта вели на страницы, принадлежащие правильному зеркалу.

Если в качестве главного зеркала сайта мы выбираем www.site.ru, то рекомендуется все ссылки вида http://site.ru/page.html поменять на http://www.site.ru/page.html

301 редирект. Один из самых эффективных и поэтому наиболее часто применяемый способ указать главное зеркало – настройка серверного редиректа. Для его реализации необходимо добавить в файл.htaccess следующую информацию:

RewriteEngine on
RewriteCond %{HTTP_HOST} ^site.ru
RewriteRule ^(.*)$ http://www.site.ru/$1
RewriteBase /

Яндекс.Вебмастер. Указать главное зеркало сайта можно и в . Для этого необходимо добавить сайт и перейти в пункт «Главное зеркало» раздела «Настройка индексирования». Там можно самостоятельно выбрать один из вариантов (с www или без) или оставить на усмотрение робота:

Не стоит забывать, что данные, указанные в панели инструментов, будут учитываться только поисковой системой Яндекс.

Google Webmaster Tools. Указать основное зеркало сайта можно и в панели Google Webmaster Tools. Для этого необходимо добавить ваш сайт в инструменты для вебмастеров и перейти в пункт «Настройки» раздела «Конфигурация сайта»:

В Webmaster Tools можно самостоятельно выбрать один основной домен, который будет участвовать в основном поиске Google.

После выполнения одного из способов настройки основного зеркала и индексации поисковыми роботами, произойдет выбор главного зеркала и только по этому адресу сайт станет доступен в поисковых системах. Данный процесс может занять некоторое время.

Расклейка зеркал

Если сайты перестают быть зеркалами и начинают предоставлять пользователем различные контент, то происходит автоматическое расклеивание ресурсов. Поисковая система Яндекс, утверждает, что ее алгоритмы осуществляют расклейку сайтов в течение 1-2 недель.