настройка htAccess, чтобы избежать дублирования контента и избежать проблем с google panda &co?
Всем привет,
Введение и пример кода:
Один мой друг сказал мне, что я должен обновить HTACCESS сайта нашей компании, чтобы не давать дубликаты контента Google, и его рекомендация состояла бы в том, чтобы обновить его .файл. htaccess, добавив следующие строки:
RewriteCond %{HTTP_HOST} ^codeproject.com [NC] RewriteRule ^/?(.*) http://www.codeproject.com/$1 [R=permanent,L] RewriteCond %{HTTP_HOST} ^codeproject.es [NC] RewriteRule ^/?(.*) http://www.codeproject.com/$1 [R=permanent,L]
Идея здесь состояла бы в том, чтобы сказать индексирующим паукам не индексировать все домены, которые у нас есть, как если бы у них было другое содержимое, перенаправляющее пауков в основной домен.
Конечно, я пытался изменить htAccess, чтобы увидеть, какой будет результат, но, похоже, ничего не обновляется, поэтому я вернулся к исходному...
Я беспокоюсь о реальном влиянии наличия нескольких доменов, которые, кажется, указывают на один и тот же контент, если он прав, то у нас есть проблема.
Я могу понять основную идею и даже понять строки кода, которые я вложил в файл htAccess, но как я могу быть уверен, что хостинговая компания не сделала ничего, чтобы избежать этой неправильной ситуации самостоятельно в момент покупки доменов?
Примечание:
В одном недавнем комментарии мне было рекомендовано использовать "robots.txt - чтобы избежать этого. Насколько я знаю, это не то, что мне нужно". robots.txt " используется для того, чтобы сказать паукам, какие файлы нужно сканировать и какие файлы следует избегать. В моем случае у меня есть несколько доменов, которые указывают на одни и те же веб-страницы, поэтому это похоже на то, что у меня были бы разные веб-страницы с одним и тем же контентом, и это означало бы быть наказанным Google, поскольку это можно понять как технику SEO black hat. Именно по этой причине мой друг рекомендовал мне использовать этот 301 редирект.
Вопросы:
Есть ли какой-нибудь способ узнать, наказаны ли мы Google?
Какой-нибудь намек?
Хорошая пояснительная ссылка?
Если я хочу избежать наказания Google и сохранить свои различные домены, указывающие на мой основной домен,какой способ будет правильным?
Как всегда заранее благодарю вас. :большой палец вверх:
Peter_in_2780
Привет Джоан,
Переписать-это почти наверняка не то, что вам нужно для этого. Все "хорошие" пауки уважают robots.txt, который в основном представляет собой карту того, где пауки шоуд и не должны индексироваться. Google "robots.txt-для получения дополнительной информации.
Овации,
Питер
Joan M
Я действительно знаю о robots.txt, но я не хочу, чтобы роботы сканировали определенные файлы в домене, а чтобы Google не думал, что я дублирую страницы, поскольку у меня есть несколько доменов, указывающих на один и тот же веб. Я немного обновляю свой вопрос, чтобы прояснить это.
Спасибо за ваш комментарий!