Мене давно хвилювала проблема додаткового індексу (Supplemental Index), або, як ще називають оптимізатори його - соплі Гугла. І мене дивує, наскільки мало seo фахівці при просуванні сайтів приділяють даній проблемі уваги.
Ви напевно вже помічали, що багато seo інструменти, зокрема, відомий плагін RDS bar показують, як правило, що кількість сторінок в індексі Google більше кількості сторінок в індексі Яндекса. Хоча, на перший погляд, має рацію саме Yandex. Так ось, це відбувається через те, що Гугл ввів так званий додатковий пошук (Supplemental Index) в який і поміщаються інші сторінки, які в силу різних причин не увійшли до основного індекс.
Причини потрапляння сторінок в додатковий пошук.
Проштудіювавши на цю тему блоги інших людей, а також грунтуючись на своїй досвіді і своєму блозі я прийшов до висновку, що основними причинами потрапляння сторінок в соплі є:
Позбавлення від Supplemental Index
Як визначити кількість сторінок в основному індексі? Все просто, достатньо ввести в рядок пошуку гугла (на прикладі мого сайту):
Бачимо, що у нас таких 45 сторінок.
Кількість же сторінок в сумарному пошуку (основний + додатковий індекс) визначається так:
Сумарне ж кількість - 250 сторінок. Разом, отримуємо соплі рівні 250-45 = 215 сторінок! Ось такі, виявляється, сумні у мене справи. Але не будемо впадати у відчай, а вживемо заходів по позбавленню від соплів. Для цього скористаємося утилітою вебмастера гугла - «видалити URL» і будемо послідовно видаляти соплі. Відразу варто зауважити, що у Вас сторінки соплі повинні бути обов'язково закриті в robots.txt інакше гугл не вилучено їх. Ось так буде виглядати форма видалення:
В осередку статус Ви можете слідкувати за станом завершення видалення. Зазвичай гугл видаляє сторінки протягом доби. Ось в принципі нічого і складного в цьому немає. Інше, справа що в соплі потрапила хороша, на Ваш погляд, сторінка, яка ще недавно приносила Вам трафік. В такому випадку я можу порадити прокачати її вагою з PRстих посилань. Наприклад, купити пару посилань з PR = 5 і подивитися на результат. Природно до цього вживши заходів по унікалізації контенту, виправлення внутрішньої перелинковки, виправлення структури сайту, якщо звичайно такі проблеми будуть мати місце.
Чесно кажучи ніколи не стикався з таким статусом ... сопливих сторінки в будь-якому випадку будуть відкриватися. Головне щоб їх у видачі не було. А ось за статусом навіть не знаю ....