Размноженные страницы

Дублирование контента на сайте

В большинстве случаев дублирование страниц на сайте не имеет ценности как для поисковых систем, так, собственно, и для пользователей. Тем не менее дублирование страниц далеко не редкая проблема при поисковом продвижении и раскрутке сайта, которая требует определенной тактики решения.

Способы решения:

• Использование тега canonical. Тег анонсированный компанией Google для определение первоисточника на сайте.
• Использование файла robots.txt для блокирования дублирующихся разделов сайта от индексации поисковых роботов.
• Использование метатега RobotsNoIndex для указания поисковым роботам не индексировать дублирующиеся страницы.
• Использование атрибута NoFollow для ссылок ведущих на дублированные страницы с целью удержания веса.

В ряде случаев допустимо использовать данные инструменты совместно друг с другом. К примеру, тег canonical поддерживается в настоящее время не всеми поисковыми системами (Google, Bing, Yahoo!). Для оптимизации сайта под Яндекс потребуется дополнительный способ решения, например, записи в файле Robots.txt. Также нелишним будет и использование атрибутов NoFollow. Так как таким образом можно предотвратить перетекание веса на страницы, не предназначенные к индексации. Если для предотвращения индексации дублируемого контента используется robots.txt, использование NoIndex или NoFollow на самой странице не имеет смысла.

Случаи дублирования контента

Варианты сортировки и страницы для печати

Использование версий для печати имеет широкое распространение. По сути, таким образом сайты дублируют контент страницы в более подходящем для принтера формате. Интернет-магазины предлагают различные формулы поиска по каталогу продукции. Данные типы страниц полезны для пользователей, но для поисковых систем они представляют собой, ни что иное, как дубликаты страниц.

Системы CMS

Нередкими являются случаи, когда системы CMS присваивают одному контента более чем один URL. Скажем, один URL имеет «человекопонятный» вид и задается пользователем, а второй присваивается системой автоматически. Это совершенно ненужное дублирование. Самым верным способом решения можно отметить удаление дублируемых страниц и установка с них 301-го редиректа.

Контент размноженный пользователями

Многие ресурсы обладают возможностью генерации контента пользователями. Среди примеров можно указать блоги, доски объявлений, форумы, социальные сети. По сути это удобный способ получения большого количества контента по низкой стоимости, выгодного для дополнительной оптимизации сайта. Основная проблема в том, что пользователи могут одновременно размещать один и тот же материал на нескольких сайтах. Безусловно, этот случай самый сложный в плане контроля. Однако, существуют способы сократить объемы дублирования. Прежде всего, стоит уведомить пользователей ресурса о том, что предоставляемый контент должен быть уникальным и не может размещаться повторно. Также можно использовать уникальную схему отображения контента, которая потребует от пользователя ввода дополнительной информации.