robots.txt blockiert Artikel - Generelle Frage

Hallo,

jetzt mal eine generelle Frage und vielleicht eine Lösung…?

In der robots.txt steht

Disallow: /compare
Disallow: /checkout
Disallow: /register
Disallow: /account
Disallow: /note
Disallow: /widgets
Disallow: /listing
Disallow: /ticket

Nun, durch das Disallow: /note, gibt Google Warnmeldungen aus und indiziert die betroffenen Artikel nicht, die die Bezeichnung “Notebook” haben.

Aktuell sind es 55 Artikel. Das gleiche hatte ich schon mal mit “Register”, die Artikel heißen nun mal so "Register A-Z, bunt oder was auch immer…

Ich kann doch nicht jeden einzelnen Artikel in die robots.txt welche btroffen sind auf “Allow” per Hand eintragen, da wirste ja blöd dabei und die robots.txt sieht danach aus wie ne Einkaufsliste!

Ich habe schon probiert "Allow: /notebook, das bringt nix!

Tommy

Setz ein Slash ans Ende: /notes/, dann sollte es funktionieren

1 „Gefällt mir“