Як склеїти дзеркала сайту - web art solutions
Два переїзди дорівнюють одній пожежі. Наскільки справедливо це вираз, якщо мова йде про перенесення сайту на новий домен, або, як ще кажучи, «переїзді сайту»? Спробуємо розібратися, з якими проблемами тут можна зіткнутися.
"Криві дзеркала
Переїзд без зміни дизайну
крок перший
крок другий
Оскільки директива нестадартная, то використовувати її треба тільки в секції для Яндекса, але не в секції для всіх роботів. Таким чином, в robots.txt слід обов'язково Створено секцію для Яндекса, навіть якщо весь набір правил однаковий для всіх роботів. приклад:
User-agent: *
Disallow: /dir/page.html
User-agent: Yandex
Disallow: /dir/page.html
Host: main-site.com
У разі, якщо не потрібно нічого закривати від індексації, то можна обійтися тільки секцією для Яндекса з порожнім Disallow, наприклад:
User-agent: Yandex
Disallow:
Host: main-site.com
крок третій
крок четвертий
Після виконання всіх попередніх кроків і зміні дзеркал в Яндексі і Рамблері можна з чистою совістю звернути увагу на Захід. Само собою, в сторону Google. Жвавість і ресурси дозволяють роботові GoogleBot індексувати велику кількість сторінок і досить часто. Тому якщо бути нерозбірливим в установці зовнішніх посилань, то можна отримати випадок, коли проіндексовано два і більше дзеркал зовсім без склеювання. Що ж робити в такому випадку?
Для роботи з правилами mod_rewrite в кореневому каталозі сайту слід знайти файл .htaccess або створити новий, якщо його не існує. А в ньому записати наступні правила:
Рядки 3 та 4 визначають умова, для якого буде виконуватися така за ними правило. У нашому випадку умовою є запит документа з неосновних дзеркал, в третьому рядку # 151; інший домен, в четвертій # 151; основний домен, але з www.
Рядок 5 і виконує редирект будь-якого документа на відповідний документ основного дзеркала.
Слід нагадати, що налаштовувати такий редирект потрібно тільки після правильної склейки, як мінімум, в Яндексі.
В результаті виконання всіх кроків ми повинні отримати правильну склейку дзеркал сайту в основних пошукових системах. Неправильну склейку дзеркал можна і потрібно запобігати, виконуючи рекомендації першого і другого кроків, досить навіть тільки першого # 151; установки абсолютних посилань тільки на основне дзеркало, як внутрішніх, так і зовнішніх.