Як знаходити дублі на сайті, дублюючий контент, дубльовані сторінки

Однією з серйозних проблем, на які варто звернути увагу при просуванні сайту - це дубльований контент. Він може стати причиною проблем з позиціями, падіння відвідуваності і навіть бана сайту.







Практично у всіх, хто займався по нашій програмі самостійного просування були проблеми з дублюванням. Це говорить про те, що проблема поширена як мінімум серед тих, хто сам займається своїм сайтом сам, але за фактом вона зустрічається у більшості, хто спеціально її не вирішував.

Що таке дублі і дублювання на сайті?

Для початку відокремимо крадений контент від дублів. Насправді, крадений контент теж можна вважати дублем сторінки, але сторінки на чужому сайті. На щастя, якщо ви займаєтеся своїм сайтом самі, то напевно знаєте якщо копіювали чужі тексти чи їх частини, а це дуже погано, тому ніколи цього не робіть (крім випадків, коли ви розумієте навіщо).

чіткі дублі

нечіткі дублі

Як дізнатися, що у вас серйозні проблеми з дублюванням сторінок?

Самий просто спосіб, це зробити пошук за запитом «site: ваш сайт» в пошукових системах і подивитися кількість знайдених сторінок. Такий запит виводить всі сторінки з вашого сайту, що потрапили в індекс пошукача.







Якщо сторінок помітно більше, ніж є на сайті, то швидше за все у вас проблема. (Але ще може виявитися, що проіндексувалися сторінки з службових розділів, тоді проблема в правильному налаштуванні robots.txt.)

Якщо сторінок помітно менше, то це теж може свідчити про проблеми з дублюванням, але діагнозів набагато більше (неправильне налаштування сервера, крадений контент, контент що не несе інформації, Переспа і т.п.)

Як знаходити дублі на сайті?

Зазвичай, якщо проблема є, то цих перевірок досить.

Ще є хороша програма Xenu, якій можна просканувати сайт, а потім впорядкувати знайдені сторінки по заголовкам. Повторювані заголовки - це потенційні дублі. Але навіть якщо це просто повторювані заголовки - такого не повинно бути. Title і H1 повинні бути унікальні на всьому сайті.

Чим загрожує дублювання контенту?

Найстрашніше - ваш сайт може бути виключений з пошуку. Особливо, якщо фактично сторінок дуже мало, а дублів десятки і сотні. Оскільки пошукач не розуміє, що у вас проблема з настройками і думає, що ви намагаєтеся наробити багато сторінок, які не несуть ніякої користі.

Крім того, виходить що у відповідь на певний запит замість однієї сторінки, на сайті є кілька сторінок, і грубо кажучи, вся користь від однієї сторінки розмивається на все її дублі, замість того, щоб бути однією доброю сторінкою і відповідати на конкретний запит. Тобто просувати таку сторінку дуже складно і вимагає зусиль пропорційних кількості дублів.

Як боротися з дублями?