Як видалити сторінку з індексу Яндекс, google, mail

Головна → Питання та відповіді → Як видалити сторінку з індексу

Як видалити сторінку з індексу пошукових систем і взагалі навіщо це потрібно? У цій статті ми розглянемо всі варіанти і відповімо на найбільш поширені питання.

Навіщо видаляти сторінку (и) з індексу?
Причин видалити сторінку або сторінки з індексу може бути багато. Найпоширенішими є:

• Сторінка є дублем (наприклад, сторінки site.ru/cat/stranica.html і site.ru/cat/stranica можуть бути дублями). А як відомо всім - дублі в індексі це зло, яке шкодить сайту в цілому.
• Сторінка перестала існувати (наприклад, інформація більше не актуальна).

Як довго буде віддалятися сторінка з індексу
Швидкість віддалення від нас не залежить. Максимальний термін десь 60..90 днів. Середній термін видалення з мого досвіду лежить в районі 25..35 днів. Якщо ми будемо вказувати в ручну через панель Яндекс Вебмастера або Google Вебмастера, що сторінку потрібно видалити, то процес буде швидше. Тут найголовніше, щоб пошуковий робот зайшов на заборонену сторінку сайту, а далі він вже при оновленні індексу виключить її з видачі.

Способи видалити сторінку з індексу

У розглянутих нижче варіантах сторінка буде існувати (буде відкриватися для користувачів), але в індексі пошукових систем ми її заборонимо (видалимо).

1. Через мета тег

У заголовних тегах є можливість заборонити сторінку до індексації. Для цього потрібно прописати:

Цей спосіб хороший тим, що можна точково на окремій сторінці заборонити індексацію. З мінусів можна відзначити, що на сайтах з двигунами складно на окремій сторінці розмістити такий тег.

2. Через файл robots.txt

Файл robots.txt знаходиться в корені вашого сайту. Його може і не бути (якщо ви його не створювали). Для заборони від індексації існують спеціальні команди:

Закривати сторінки від індексації за допомогою robots.txt зручно тим, що можна відразу масово вказати весь розділ або ж заборонити до індексації групу однотипних сторінок. Однак пошукові системи чітко говорять, що для них файл Роботс не є обов'язковим в плані виконання. Тобто пошукова система в теорії може залишити в індексі документ, який закритий в Роботс. Правда я таких прикладів не знаю.

3. Через панель вебмастера пошукових систем

І в Яндексі і Google в панелі вебмастера є така можливість. Однак якщо ви видаляєте сторінку подібним чином, то потрібно розуміти, що сторінка попередньо повинна бути закрита одним з вище описаних способів, інакше нічого не станеться. Подібним видаленням ми лише натякаємо пошуковим роботам, що потрібно обов'язково зайти на ці сторінки в найближчому обході.

3.1. Панель Яндекс Вебмайстер

3.2. Панель Google Веб-майстер

4. Заголовки X-Robots-Tag

Цей спосіб використовується тільки в Google. Запис про заборону повинна знаходитися в http-заголовки:

5. Через редирект або 404 помилку

Видалити з індексу сторінку можна також за допомогою редиректу або повертати зі сторінки 404 помилку. В такому випадку пошукові системи також видаляти сторінки з індексу.

Ми розглянули основні способи по видалення сторінки з індексу. Як я вже писав вище швидкість видалення в кожному випадку різна. Але одне можна сказати точно - це не швидко. У будь-якому випадку це займе днів 5-7 мінімум.