WebSite X5Help Center

 
Владимир З.
Владимир З.
User

Как правильно создать robots.txt для сайта на websi  ru

Autor: Владимир З.
Visitado 1788, Followers 1, Compartido 0  

Кто знает, существуют ли нюансы при создании robots.txt для сайтов созданных с помощью программы для сайта на website x5?

Publicado en
7 RESPUESTAS - 4 úTIL
S. B.
S. B.
User

нет, не существует.

посмотрите вариант в вер. Про. (формируется авто на шаге 4) 

Leer más
Publicado en de S. B.
Pavel M.
Pavel M.
User

яндексу однако ж предложенный программой роботс кажется пустоватым - всегда лучше добавить туда ещё директивы host и sitemap

Leer más
Publicado en de Pavel M.
S. B.
S. B.
User

host и sitemap для яндекса индивидуален, но всетаки надо смотреть общие требования к дерективам.

каждый поисковик что то тредует, тогда присобить к нему :) 

Leer más
Publicado en de S. B.
Владимир З.
Владимир З.
User
Autor

А кто может привести пример универсального robots.txt? Или лучше создать для поисковиков раздельные файлы?

Leer más
Publicado en de Владимир З.
Pavel M.
Pavel M.
User
S. Bogucharskiy
host и sitemap для яндекса индивидуален, но всетаки надо смотреть общие требования к дерективам. каждый поисковик что то тредует, тогда присобить к нему :) 

эти директивы однозначны для яндекса и гугла

Leer más
Publicado en de Pavel M.