Robots-Datei ergänzen? 
Autor: Karl B.
Besucht 676,
Followers 1,
Geteilt 0
Unter 1-Einstellungen-Erweitert habe ich "Datei robots.txt einschließen" aktiviert. Laut WSX5-Hilfe werden programmseitig die nachstehenden Befehle gsetzt.
User-agent: *
Disallow: /admin
Disallow: /captcha
Disallow: /menu
Disallow: /imemail
Tatsächlich steht in der robots.txt aber nur
"Sitemap: https://www.meinedomain.de/sitemap.xml"
Sollte/muss ich die vorstehenden Befehle händisch einfügen?
Gepostet am
Bitte Printscreen von "Erweiterte Einstellungen" für "Statisiken, SEO und Code" Allgemein unter 1 Erweitert.
sowie den Link zur Homepage um zu sehen, was genau los ist.
JJ.
Autor
Ich möchte nur wissen, ob ich die Befehle
User-agent: *
Disallow: /admin
Disallow: /captcha
Disallow: /menu
Disallow: /imemail
manuell einfügen soll, weil dies programmseitig nicht geschehen ist.
Hallo Karl,
bei mir sind die Disallow Standardmäßig schon eingetragen (außer Menü). Wenn diese bei Dir fehlen, dann trage Sie ein. Hast Du mal ein neues Testprojekt versucht ob hier ebenfalls diese Angaben fehlen?
Autor
Hallo Martin,
danke für die schnelle Antwort.
Bei einem Testprojekt wurden die Befehle übrigens eingefügt. Seltsam oder?