Він дивиться на сайти абсолютно не так, як живі люди. Є спеціальні сервіси, на яких можна подивитися його очима. наприклад, сервіс pr-cy.ru
Забиваємо проверяемеий сайт і тиснемо кнопку «Перевірити» і внизу все видно.
Ще приклад. Відкрили сайт і бачимо шматок сторінки, на якій є картинка
А ось цей же шматок, але очима пошукача:
Отже, що якісь посилання робот не бачить.
Знаходяться в формах підписки
Досить часто на сайтах є різні підписні форми, тобто відвідувачеві пропонується якась форма, в яку він вносить необхідну інформацію (наприклад, Ім'я. Прізвище і т.д.), потім натискає на кнопку підписки (відправки введених даних). У будь-якому випадку, будь-яка інформація введена в форми - невидима для пошукових роботів. «Павук» не може «заповзти» всередину форми.
Ось форма підписки.
Примітка: ходять наполегливі чутки, що деякі пошуковики вже бачать, що всередині Яваскрипт.
Заблоковані мета тегами або файлом robots.txt
Файл robots.txt дозволяє власнику ресурсу обмежити пошуковому роботу допуск до веб-сторінці. Прописуючи певні мета теги в цьому файлі можна управляти діями робота (забороняти до індексації веб-сторінки, розділи тощо).
Примітка: блокування в robots.txt, звичайно річ хороша, але 100% гарантії не дає фактично це лише рекомендації пошуковику, а буде чи ні він їх виконувати невідомо.
Знаходяться під фреймах
Технічно посилання знаходиться у фреймах (кадрах) видимі для «павуків», однак на думку багатьох практиків, потрібно уникати використання фреймів.
Посилання в flash, java
Посилання вбудовані в коди flash, java і т.п. технологій не видимі для пошукових роботів.
Посилання на веб-сторінках мають сотні посилань
Пошукові роботи, як правило, «повзають» тільки по 100 сторінок і не більше. Оскільки передбачається, що сторінка має величезну кількість посилань призначена виключно для спаму.
Посилання розташовані в графіку
Будь-які посилання або будь-який текст, написаний на зображеннях не бачимо для пошукових роботів.