Як склеїти домени: робота з дублікатами і дзеркалами сайтів

  1. Чому це важливо Перш ніж розглянути питання «склейки доменів», визначимося з таким поняттям, як «дзеркала...
  2. Пошук і усунення дублів URL-адрес на проекті
  3. Основні види переадресації і вирішуються ними завдання
  4. Механізми реалізації склейки
  5. Аналіз домену на предмет склейки
  6. висновки

Чому це важливо

Перш ніж розглянути питання «склейки доменів», визначимося з таким поняттям, як «дзеркала сайтів». У довідці «Яндекс»: "Дзеркалами вважаються сайти, які є повними або частковими копіями" (див. Докладніше на сторінці допомоги ). У той же час Google за замовчуванням розглядає домени з WWW і без WWW у вигляді двох окремих сайтів. Цього слід уникати. Наявність двох доменів-близнюків змушує їх змагатися в пошуковій видачі, що призводить до зниження ефективності виконаних заходів з просування ресурсу .

Під склеюванням доменів розуміють процес об'єднання декількох сайтів в індексному базі пошукових систем. Як варіант, це може бути просто визначення головного дзеркала ресурсу. При цьому основного домену передається контрольний вагу і значення показників авторитетності (тИЦ, PR) від посилається домену. Після склеювання в пошуку бере участь лише один із сайтів.

Завдання, які вирішуються за допомогою склеювання доменів

Склеювання доменів необхідна при наступних обставинах:

  • Усунення дублікатів контенту. Наприклад, домени www.site.ru і site.ru представляють собою один сайт, але фактично інтерпретуються пошуковими системами як різні об'єкти. В результаті з'являється дубльований контент. Відомо, що сайти, які мають неунікальні документи (сторінки), погано ранжуються алгоритмами пошукових систем.
  • "Переїзд" на новий домен. Наприклад, є два сайти www.site.ru і www.site.com. При цьому припустимо, що доменне ім'я www.site.ru вибрано як найбільш актуальне. В такому випадку ресурс www.site.com необхідно "підклеїти" до основного (вибраному) домену. Це дозволить зберегти позиції сайту, трафік, авторитетність ресурсу і вага існуючого посилального профілю. Детальніше - в рекомендаціях «Яндекс» ,
  • Фокусування трафіку і об'єднання показників авторитетності на одному ресурсі. У разі, якщо є кілька сайтів-дзеркал, їх сумарні показники (трафік, авторитетність) можна зосередити на одному домені.

Пошук і усунення дублів URL-адрес на проекті

Кожна сторінка сайту, незалежно від того, статична вона або генерується динамічно, повинна бути доступна тільки по одному унікальному URL-адресою. При цьому всі інші його варіації (генеруються CMS) повинні перенаправлятися на основний URL-адресу за допомогою 301-го редіректу. Так, наприклад, можна говорити про присутність дублів, якщо головна сторінка інтернет-ресурсу доступна за кількома URL-адресами: site.ru; site.ru/; site.ru/index.html; www.site.ru; www.site.ru/; www.site.ru/index.html і ін. Щоб виправити виявлену проблему, слід використовувати таку логіку перенаправлень:

сторінки виду

  • site.ua/cat/sub-cat (немає "/", відсутня www)
  • site.ua/cat/sub-cat/index.php (присутній index.php, відсутня www)
  • www.site.ua/cat/sub-cat/index.php (присутній index.php)
  • site.ua/cat/subbbbbbb-cat/index.php (відсутня www, помилка в назві розділу)
  • www.site.ua/cat/suuuuub-cat/index.php (помилка в назві розділу)

повинні автоматично перенаправляти відвідувача і роботів пошукових систем на сторінку www.site.ua/cat/sub-cat/. Для успішної реалізації визначених операцій, в наступних розділах розглянуті види переадресації та механізми їх використання.

Основні види переадресації і вирішуються ними завдання

Переадресація (перенаправлення, редирект) являє собою спосіб відправки користувачів і пошукових роботів з запитуваної URL-адреси на інший. Розглянемо кілька найбільш часто використовуваних редиректів:

  • 301-й ( «переміщено назавжди»). У більшості випадків, 301-й редирект є найкращим методом для реалізації перенаправлення на веб-сайті. Він вказує, що сторінка була переміщена на постійній основі. При цьому даний редирект дуже вдало поєднується з пошуковою оптимізацією, оскільки дозволяє передати вагу посилань зі старою сторінки на нову.
  • 302-й ( «переміщено тимчасово»). Чи не передає ваги посилань на переміщену сторінку. Найчастіше використовується, коли необхідно протестувати нову сторінку, але при цьому охоронити все властивості і рівень ранжирування старого документа (сторінки).

Повний перелік перенаправлень см. На сторінці - http://ru.wikipedia.org/wiki/Список_кодов_состояния_HTTP

Механізми реалізації склейки

Склеювання доменів здійснюється двома методами:

  1. Установка серверного 301-го редіректу (redirection)
  2. Використання директиви «Host» в файлі robots.txt

Розглянемо перший метод. Щоб встановити 301-й редирект для сайтів, які розміщені на серверах Apache, потрібно внести відповідні зміни в конфігураційний файл сервера .htaccess.

Мал. 1 - Код 301-го редіректу (a - на домен без префікса www; b - на домен з www)

Крім наведеного прикладу, відомі й інші альтернативні варіанти реалізації даного завдання. Спосіб установки редиректу залежить від типу сервера, на якому розміщений сайт.

Другий метод полягає в використанні директиви «Host». Щоб склеїти дзеркала в пошуковій системі Яндекс, досить прописати директиву «Host» для кожного з них. При цьому встановлювати редирект необов'язково. Для файлу robots.txt існують певні правила синтаксису, порушувати які не рекомендується (Рис. 2).

Мал. 2 - Синтаксис рядків "Host" в robots.txt

Аналіз домену на предмет склейки

Щоб перевірити ресурс на склейку в пошуковій системі Google, можна вдатися до найбільш простому і доступному методу. Для цього слід скористатися оператором "info:" безпосередньо в рядку пошуку (див. рис.3). Якщо домени збігаються, то склейка відсутня і навпаки, якщо домени мають відмінності - це свідчить про явну склеюванні.

У пошуковій системі Яндекс для виконання перевірки на склейку досить скористатися функціоналом додавання нового сайту в сервісі Яндекс.Вебмайстер . Для цього необхідно в рядок додавання URL ввести доменне ім'я досліджуваного сайту. Якщо після цього з'явиться повідомлення: "Зазначений вами сайт є неголовним дзеркалом сайту ...", значить, фактично присутній склейка.

, значить, фактично присутній склейка

Мал. 3 - оператор «info:" в ПС Google;

3 - оператор «info: в ПС Google;

Мал. 3 - додавання URL, Яндекс.Вебмайстер

висновки

Запропоновані способи аналізу і методи склейки дозволяють коректно вирішувати завдання, перераховані в даному матеріалі. Редирект - швидкий і надійний спосіб склейки, але його цілком доречно використовувати в комплексі з директивою "Host". Важливо при цьому відстежувати, щоб обидва методи посилалися на один і той же дзеркало ресурсу.