В Google (да и в Яндексе тоже) можно очень легко получить штрафик за "дублированный контент" - это когда на многих страницах вашего сайта одинаковое содержание. При этом, вы и сами можете не догадываться о существовании дубликатов. Например, www.seo.by/index.php, www.seo.by и seo.by , могут быть разными страницами с точки зрения поисковой системы, но иметь совершенно одинаковое содержание.

Проблему нужно решать комплексно, например, с использованием серверного редиректа и правильного составления файла Robots.txt. В этой теме предлагаю делаться советами, как избавиться от дублированного контента в глазах поисковых систем на собственном файле.

В качестве первого взноса хочу показать простенькую онлайн тулзу для анализа сайта: virante.com/seo-tools/duplicate-content.php