Як на порядки збільшити число сторінок в пошуку Яндекса сторінки індексуються і потрапляють в прихований

Є великий проект домен-скрит.ru (підбір електронних компонентів) з 3-4 млн. Сторінок. Домен новий.

Що було зроблено:

спочатку просто пустили роботів на сайт
потім, після видалення сторінок з індексу, провели шаблонну оптимізацію для унікалізації сторінок

Ось як виглядають графіки індексації:

Як на порядки збільшити число сторінок в пошуку Яндекса сторінки індексуються і потрапляють в прихований

Як би збільшити кількість сторінок у пошуку? Чи є способи, хитрості? Більше цікавить Яндекс.

В першу чергу, Антон, треба розуміти, що проблема тут саме ні з первинної індексацією (з нею все більш-менш), а з включенням документів в основний індекс / пошук. Тобто, пошукова система знає про існування сторінок, але розміщує їх в прихованому індексі, так як вважає, що відсутня значуща ймовірність їх потрапляння в ТОП видачі хоча б по одному запиту.

Така поведінка може спостерігатися в двох випадках:

Варто відзначити, що в вашому випадку, можуть поєднуватися відразу дві зазначені проблеми, так як вміст файлу robots.txt - трешевий:

Потрібно перевірити, як взагалі інтерпретується дане вміст пошуковою системою і виправити сам файл.

Аналіз статичних факторів і їх поліпшення

Раніше, ми детально розбирали питання статичних чинників, які позначаються на індексації та включення документів в пошук. Прохання ознайомитися з відповіддю. Зазначимо лише, що у вас явно є проблеми якщо не з усіма, то з абсолютною більшістю факторів. В першу чергу покращуйте:

Обсяг унікального тексту.

Рівень вкладеності документів.

Число внутрішніх вхідних посилань на документи.

Число і значимість зовнішніх вхідних посилань.

Навіть якщо просто звернутися до сніпетів у видачі, можна відразу виявити безліч проблем (вказані на зображенні).

Разом: проблеми на вашому сайті очевидні.
Їх занадто багато, щоб перерахувати відразу все, почніть з вирішення найнагальніших завдань:

Налаштування індексації. незважаючи на те, що сторінок у видачі мало, там вже є сміття, який треба виключити (сторінки пошуку по сайту). Важливо на стартовому етапі закрити всі сміттєві сторінки від пошукових роботів і забезпечити доступність важливих документів.

Унікалізація сторінок. Для того, щоб зрозуміти навіщо вам документи в пошуку, треба зібрати семантичне ядро і зробити базову оптимізацію сайту під запити, що входять до нього. Це дозволить істотно збільшити обсяг унікального і корисного користувачам контенту.

Забезпечити стабільність роботи сайту. Буквально 5 хвилин серфінгу привели до потрапляння на порожні сторінки з текстом: «Доступ тимчасово заборонений! »

Поліпшити перелинковку і зменшити рівень вкладеності значущих сторінок. Це також необхідно для поліпшення юзабіліті і розподілу ваги всередині сайту.

Удачі в роботі і самостійному вирішенні зазначених проблем! Ми віримо в вас.

Дане питання - пріоритетний!