Member 14976586 Ответов: 1

Вредно ли запрещать *.txt в robots.txt-что?


Кто-нибудь знает, если запретить *.txt в robots.txt может быть проблема? Я немного боюсь, что роботы даже не могут получить доступ robots.txt в данном случае.

Для людей, не знающих о чем robots.txt есть : Введение в robots.txt - справка по консоли поиска[^]

Что я уже пробовал:

Я искал в Google, но не нашел.

CHill60

Ваш вопрос вообще не имеет никакого смысла. Пожалуйста, используйте ссылку улучшить вопрос и добавьте детали к вашему вопросу

[no name]

Я пришел сюда, потому что слышал, что люди были лучше, чем в StackExchange. Вы уверены, что мой вопрос не имеет никакого смысла ?

Richard MacCutchan

Нет, боюсь, что ваш вопрос не имеет абсолютно никакого смысла. Мы понятия не имеем, о чем вы говорите и что ... robots.txt-есть или для чего он используется. Так что, пожалуйста, используйте Улучшить вопрос ссылка выше и предоставить соответствующие сведения о вашем коде и в чем заключается проблема.

[no name]

Если ты не знаешь что robots.txt то есть вы можете использовать мою ссылку, чтобы узнать, но в то же время это нормально, что вы не понимаете вопроса, что не делает его бессмысленным.

Gerry Schmitz

Вам нужно протестировать предлагаемое изменение. Спрашивая в этом случае, вы получите только "мнения", потому что результаты будут варьироваться в зависимости от суммы всех частей (версий; настроек). В конце концов, то, что "он / она сказал", не спасает вас.

[no name]

Предлагаемое изменение чего ? Что касается вашего второго предложения, если вы говорите о robots.txt, я не думаю, что ответ на мой вопрос зависит от какой-либо конфигурации. Я не понимаю вашего последнего предложения (но не сомневаюсь, что оно что-то значит).

1 Ответов

Рейтинг:
6

Member 14976586

Ответ здесь: Что делать, если robots.txt запрещает себе? - Webmasters Stack Exchange[^]

Как robots.txt директивы не распространяются на robots.txt само по себе, нет никаких проблем с запретом *.txt в robots.txt