Вопрос по 11 версии Про создание файла robots.txt
Author: Александр БорисовВопрос по 11 версии Про. Создание файла robots.txt
В программе, раздел Статистика, SEO и код составил такой текст:
User-agent: *
Disallow: /admin/
Disallow: /captcha/
Disallow: /menu/
Disallow: /imemail/
Disallow: /pcss/
Disallow: /res/
Disallow: /style/
Disallow: /login/
User-agent: Yandex
Disallow: /admin/
Disallow: /captcha/
Disallow: /menu/
Disallow: /imemail/
Disallow: /pcss/
Disallow: /res/
Disallow: /style/
Disallow: /login/
Host: www.apostroy.ru
Sitemap: http://www.apostroy.ru/sitemap.xml
Однако на сайт загружается следующие:
сначала все тоже самое, а в конце происходит дублирование ссылки на sitemap.xml см. ниже/
Host: www.apostroy.ru
Sitemap: http://www.apostroy.ru/sitemap.xml
Sitemap: http://www.apostroy.ru/sitemap.xml
Как это может сказаться на лояльности робота поисковой системы? Все время в ручную вытирать нет желания. Прошу исправить ошибку, если она есть. Или Я делаю что то не так. Изначально сайт был создан в 10 версии и такого небыло.
Hello Александр Борисов,
The program adds automatically at the end of the robots.txt file the url to the sitemap.
You can remove the link Sitemap: http://www.apostroy.ru/sitemap.xml from the settings of the robots.txt file since the program will add it automatically.
Many thanks!
***** Google Translation:
ЗдравствуйтеАлександр Борисов,
Программаавтоматически добавляетв концефайла robots.txtURL-адреск карте сайта.
Вы можетеудалить ссылкуSitemap:http://www.apostroy.ru/sitemap.xmlиз настроекфайла robots.txt, так как программабудетдобавить егоавтоматически.
Большое спасибо!