Robots.txt

Genau das Verhalten habe ich auch.

 

Bei robots.txt steht nur

User-agent: *
Disallow: /

 

Bei Robots.txt steht:

 

User-agent: *



Disallow: /compare
Disallow: /checkout
Disallow: /register
Disallow: /account
Disallow: /note
Disallow: /widgets
Disallow: /listing
Disallow: /ticket


Allow: /widgets/emotion


Sitemap: https://url.de/sitemap.xml



Sitemap: https://url.de/sitemapMobile.xml