Як прибрати дублі сторінок і закрити їх від індексації

Для боротьби з дублями сторінок є багато способів. У цій статті розглянемо популярні і найбільш прості варіанти для цього.

Вітаю всіх, хто заблукав на мій SEO-блог. Перш ніж сказати про те як прибрати дублі сторінок і закрити їх від індексації я хотів би розповісти чому шкідливі дублюються сторінки.

Так само наявність дубльованих сторінок сильно просаджує відвідуваність сайту, що нікого не зрадіє. Сторінки ранжируватимуться гірше за рахунок того що у Вас на різних сторінках розташований один і той же матеріал.

Тепер давайте розглянемо як захистити відвідуваність свого ресурсу за рахунок видалення дубльованих сторінок або припинення їх індексації.

1 Установка атрибута rel = "canonicial"

2 Disallow в Robots.txt

Це швидкий варіант, який не вимагає особливого занурення в код на сайті. Але якщо ви помилитеся і допустите помилку при зміні даного файлу, то можете заборонити індексацію потрібних сторінок.

Приклад використання даного методу:

Дуже потужний метод, але застосовуйте його з обережністю.

3 301 редирект

Робот потрапивши на сторінку з перенаправленням перенаправляється на потрібну нам з унікальним контентом. Згодом, після проставлення 301 редиректів для потрібних сторінок, всі дублі випадають з індексу, що позитивно позначається на загальних тенденціях сайту.

Такий варіант боротьби з дублями добре чистить вже проіндексовані сторінки викидаючи їх з видачі, але звичайно на це потрібно кілька апдейтів пошукових систем (Вся правда про апдейтах пошукових систем).

Завдяки редіректу можна перемогти дублі з www або index.html (я зробив це саме за допомогою редиректу). Це робиться так:

Може бути не найоптимальніші варіанти, але для мене вони працюють і відмовляти від них найближчим часом я не збираюся, тому що і так турбот вистачає :)

Більш докладно про даний редирект ви можете прочитати в статті 301 редирект для Joomla на .htaccess.

Корисні посилання з даного питання:

4 Видаляємо сторінки з дублями руками

Якщо у Вас невеликий ресурс, то з видаленням дублів вручну не буде проблем. Так само цей спосіб може бути зручний для сайтів, які мають зручний інтерфейс для роботи зі сторінками сайту.

Все, що необхідно зробити в цьому варіанті - зайти на сервер будь-яким зручним способом і видалити дублікат існуючої сторінки.

Підведемо підсумки

Дублювання сторінок на сайті - дуже погана практика. Пошуковики нещадно накладають санкції на сайти, які не борються з дублями сторінок.

Не полінуйтеся і пробегітісь за своїм сайту в пошуках дублів сторінок. Після знаходження дублів, а в 90% випадків ви їх знайдете, прийміть рішення яким саме способом ви будете позбавлятися від дубля.