Frage von JiffJohnson, 24

Wie muss meine Robots.txt aussehen?

Hallo, ist meine Robots.txt so Innordnung oder sollte sie anders sein User-agent: Disallow: /wp-admin/ Disallow: /wp-includes/ Sitemap: 

Wenn ich sie aufrufe wird mir das so angezeigt. Kennt sich jemand damit aus. Danke.

Antwort
von ChuckNorris37, 8

Bei der Sitemap kannst du dann entsprechend auch deine Sitemap eintragen. Wenn du noch keine hast, kannst du die einfach über ein Plugin generieren lassen und dann eintragen. Yoast SEO zum Beispiel hat eine Sitemap enthalten.

Ansonsten ist die Robots.txt in Ordnung. Du musste halt auch ein bisschen selbst wissen was du sperren willst und was nicht. 

Antwort
von Marxeo, 12

Hi,

bei Wordpress sieht meine so aus:


User-agent: *
Disallow: /wp-admin/
Disallow: /?s*
Disallow: /details/
Disallow: /wp-register.php
Disallow: /wp-login.php


wobei die /details/ etwas individuelles bei mir sind und du nicht brauchst. Rest ist Standard.

Keine passende Antwort gefunden?

Fragen Sie die Community

Weitere Fragen mit Antworten