WebSite X5Help Center

 
Владимир З.
Владимир З.
User

Как правильно создать robots.txt для сайта на websi  ru

Autore: Владимир З.
Visite 1790, Followers 1, Condiviso 0  

Кто знает, существуют ли нюансы при создании robots.txt для сайтов созданных с помощью программы для сайта на website x5?

Postato il
7 RISPOSTE - 4 UTILI
S. B.
S. B.
User

нет, не существует.

посмотрите вариант в вер. Про. (формируется авто на шаге 4) 

Leggi di più
Postato il da S. B.
Pavel M.
Pavel M.
User

яндексу однако ж предложенный программой роботс кажется пустоватым - всегда лучше добавить туда ещё директивы host и sitemap

Leggi di più
Postato il da Pavel M.
S. B.
S. B.
User

host и sitemap для яндекса индивидуален, но всетаки надо смотреть общие требования к дерективам.

каждый поисковик что то тредует, тогда присобить к нему :) 

Leggi di più
Postato il da S. B.
Владимир З.
Владимир З.
User
Autore

А кто может привести пример универсального robots.txt? Или лучше создать для поисковиков раздельные файлы?

Leggi di più
Postato il da Владимир З.
Pavel M.
Pavel M.
User
S. Bogucharskiy
host и sitemap для яндекса индивидуален, но всетаки надо смотреть общие требования к дерективам. каждый поисковик что то тредует, тогда присобить к нему :) 

эти директивы однозначны для яндекса и гугла

Leggi di più
Postato il da Pavel M.