Как избавиться от дублированного контента (часть 1)

Недавно наткнулся на интересную статью про seo во времена Panda.Приведу короткие выдержки на русском из обширной статьи на SeoMoz.Надеюсь, этот материал вам поможет в сегодняшних условиях в бесплатной раскрутке сайта или блога.Если вам будет интересно, сделаю полный перевод статьи.Переводчика у меня пока нет, так что переведу сам с пользой для самостоятельного обучения seo.Короткий анонс такой...

Дублированный контент стал головной болью многих вебмастеров с изменениями алгоритма Panda.Собственно говоря существует три вида дублированного контента:

1. Точный дублированный контент.
2. Близко дублированный контент.
3. Междоменный дублированный контент.

Какие же есть инструменты для работы с дублированным контентом?

1. Ошибка 404 (Not found) - это самое простое решение проблемы, то есть просто удалить его.Если значение контента невелико, нет значительных ссылок и невелико количество трафика на страницу - можно воспользоваться этим решением.
2. 301 Redirect - в отличие от ошибки 404, 301 Redirect отправляет пользователей и поисковых ботов к новому месту страницы, что хорошо с точки зрения seo .Поскольку вместе с перенаправлением переходит и авторитетет ссылок.
3. Robots.txt - это старейший и самый простой способ.Выглядит это так
   
   Недостатком является то, что невозможно удалить уже проиндексированный контент и кроме того, использования файла robots.txt крайне не любят поисковики.
4. Meta robots - вы можете управлять поведением ботов с помощью этих мета тегов.Выглядит это примерно так
   
   Это с точки зрения seo более приемлемое и рациональное решение.
5. Rel = "canonical" - в 2009 году поисковые системы объединились, чтобы создать одну унифицированную Rel директиву.Когда поисковые роботы видят Rel , они прописывают значение http именно оттуда вне зависимости от URL достижения страницы.Так, например бот дойдя до канонического www.example.com / index.html дальше не пойдет и не будет индекcировать неканонические URL.
   
6. Удаление или блокировка, используя Google Webmasters Tools - достаточно простой способ.Вы заходите в конфигурацию сайта-доступ робота и видите три вкладки.Нажмите на третьей вкладке удалить URL.Вводим URL в окошко и нажимаем продолжить.
   
   Блокировка же осуществляется следующим образом.Идем в конфигурация сайта - параметры URL и получаем подобный список
   
   Если вы нажмете на редактировать, то получите следующие варианты
   
   По сути Да означает, что контент значимый и должен быть проиндексирован, а Нет означает дублированный контент.

Коли есть желание ознакомиться полностью со статьей, я выложу вторую часть чуть позже.Если вы горите бесплатной раскруткой сайта или вам просто интересно онлайн обучение seo, то это крайне полезный материал.Я почерпнул массу интересного, полезного и готов поделиться с вами и во второй части.