# robots.txt-Datei

**URL:** <https://forum.shopware.com/t/robots-txt-datei/97395>\
**Category:** Shopware 5\
**Created:** [1. Dezember 2022 um 09:46 UTC](https://forum.shopware.com/t/robots-txt-datei/97395 "2022-12-01T09:46:06Z")\
**Posts on this page:** 13\
**Page:** 1

<div class="post-metadata">

**Author:** ![elektro-hausmann](https://avatars.discourse-cdn.com/v4/letter/e/58f4c7/32.png) [@elektro-hausmann](https://forum.shopware.com/u/elektro-hausmann)\
**Post date:** [1. Dezember 2022 um 09:46 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/1 "2022-12-01T09:46:06Z")

</div>

Hallo und guten morgen,  
ich bekomme immer wieder von Google die Meldung,  
Indexiert, obwohl durch robots.txt-Datei blockiert  
wer kann mir helfen?  
Vielen Dank  
Gruß  
Stefan

---

<div class="post-metadata">

**Author:** ![Max\_Shop](https://avatars.discourse-cdn.com/v4/letter/m/58f4c7/32.png) [@Max\_Shop](https://forum.shopware.com/u/Max_Shop)\
**Post date:** [1. Dezember 2022 um 10:13 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/2 "2022-12-01T10:13:39Z")

</div>

> [@elektro-hausmann](#):
>
> Indexiert

Bist du dir sicher, dass es „indexiert“ ist? Google Crawlt auch Webseiten, die durch nofollow, noindex und robots.txt ausgeschlossen sind. Diese werden lediglich nicht in den Index übernommen.

Vermutlich wird die robots.txt dann falsch sein. Was sagt denn die Seach Console zur robots.txt?

---

<div class="post-metadata">

**Author:** ![elektro-hausmann](https://avatars.discourse-cdn.com/v4/letter/e/58f4c7/32.png) [@elektro-hausmann](https://forum.shopware.com/u/elektro-hausmann)\
**Post date:** [1. Dezember 2022 um 10:24 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/3 "2022-12-01T10:24:37Z")

</div>

hier die ganze Nachricht,

An den Inhaber von [https://www.elektro-hausmann.de/:](https://www.elektro-hausmann.de/:)

Die Search Console hat festgestellt, dass Ihre Website von 1 Problem(en) des Typs „Seitenindexierung“ betroffen ist. Auf Ihrer Website wurden die folgenden Probleme gefunden. Wir empfehlen, diese Probleme nach Möglichkeit zu beheben, damit die Google Suche optimal funktioniert und eine hohe Reichweite hat.

### Häufigste nicht kritische Probleme\*\*

Indexiert, obwohl durch robots.txt-Datei blockiert

\*\*_Nicht kritische Probleme_ sind Verbesserungsvorschläge. Sie verhindern nicht, dass eine Seite oder Funktion in den Ergebnissen der Google Suche angezeigt wird. Einige nicht kritische Probleme wirken sich negativ auf die Darstellung in der Suche aus, andere könnten später zu kritischen Problemen hochgestuft werden.

---

<div class="post-metadata">

**Author:** ![Max\_Shop](https://avatars.discourse-cdn.com/v4/letter/m/58f4c7/32.png) [@Max\_Shop](https://forum.shopware.com/u/Max_Shop)\
**Post date:** [1. Dezember 2022 um 10:32 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/4 "2022-12-01T10:32:00Z")

</div>

Zitat aus [GSC: Indexiert, obwohl durch robots.txt-Datei blockiert und Meta noindex gesetzt - Google Search Central-Community](https://support.google.com/webmasters/thread/111849739/gsc-indexiert-obwohl-durch-robots-txt-datei-blockiert-und-meta-noindex-gesetzt?hl=de)

> Um die Seiten aus dem Index zu bekommen muß der Crawler das „canonical“ oder das „noindex“ sehen können, das geht nur wenn du ihm nicht mittels robots.txt das Crawlen verbietest. Aber das hat dir ja Google auch schon so mitgeteilt wie du in deinem Post ja schreibst. Dazu gibt es keine Alternative, außer natürlich, diese URLs erst gar nicht zu erzeugen.

---

<div class="post-metadata">

**Author:** ![elektro-hausmann](https://avatars.discourse-cdn.com/v4/letter/e/58f4c7/32.png) [@elektro-hausmann](https://forum.shopware.com/u/elektro-hausmann)\
**Post date:** [1. Dezember 2022 um 10:39 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/5 "2022-12-01T10:39:02Z")

</div>

Vielen Dank  
Gruß  
T. Hausmann

---

<div class="post-metadata">

**Author:** ![elektro-hausmann](https://avatars.discourse-cdn.com/v4/letter/e/58f4c7/32.png) [@elektro-hausmann](https://forum.shopware.com/u/elektro-hausmann)\
**Post date:** [8. Dezember 2022 um 20:53 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/6 "2022-12-08T20:53:56Z")

</div>

Hallo,  
ich muss mich noch einmal zu meinem Problem melden,  
[GSC: Indexiert, obwohl durch robots.txt-Datei blockiert und Meta noindex gesetzt](https://support.google.com/webmasters/thread/111849739/gsc-indexiert-obwohl-durch-robots-txt-datei-blockiert-und-meta-noindex-gesetzt?hl=de)  
Wie kann ich dieses robot-Problem lösen. Wo wurde es installiert. Kannst du mir da etwas zu sagen, wie das Programm finden???  
Gruß  
Stefan

---

<div class="post-metadata">

**Author:** ![SCOOPEX](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/scoopex/32/18328_2.png) [@SCOOPEX](https://forum.shopware.com/u/SCOOPEX)\
**Post date:** [8. Dezember 2022 um 22:20 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/7 "2022-12-08T22:20:19Z")

</div>

Hallo,

ohne Details, welche URL´s konkret blockiert werden, kann Dir hier niemand helfen und ist eher Frage für die Glaskugel.

Viele Grüße

---

<div class="post-metadata">

**Author:** ![elektro-hausmann](https://avatars.discourse-cdn.com/v4/letter/e/58f4c7/32.png) [@elektro-hausmann](https://forum.shopware.com/u/elektro-hausmann)\
**Post date:** [9. Dezember 2022 um 15:38 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/8 "2022-12-09T15:38:55Z")

</div>

Hallo,  
das heißt, wenn Ihr so ein Problem haben solltet, werft Ihr den PC aus dem Fenster und hängt Euch auf.  
Oder wie soll ich das verstehen. Da muss es doch eine Lösung geben.  
Gruß  
Stefan

---

<div class="post-metadata">

**Author:** ![SCOOPEX](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/scoopex/32/18328_2.png) [@SCOOPEX](https://forum.shopware.com/u/SCOOPEX)\
**Post date:** [9. Dezember 2022 um 16:26 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/9 "2022-12-09T16:26:12Z")

</div>

Naja, wenn Du keine Details lieferst, welche Seiten vom Index ausgeschlossen werden (zu sehen in den Google Webmaster Tools) bzw. wie denn Deine robots.txt überhaupt aussieht, kannst Du hier auch keine Hilfe erwarten.

---

<div class="post-metadata">

**Author:** ![elektro-hausmann](https://avatars.discourse-cdn.com/v4/letter/e/58f4c7/32.png) [@elektro-hausmann](https://forum.shopware.com/u/elektro-hausmann)\
**Post date:** [9. Dezember 2022 um 16:58 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/10 "2022-12-09T16:58:35Z")

</div>

> **[Hausmann Elektro-Geräte](https://www.elektro-hausmann.de/)**
>
> Günstige Haushaltsgeräte und Küchenzubehör zum Top-Preis ✓ Sichere Bestellung ✓ Top Marken ✓ persönliche Beratung

---

<div class="post-metadata">

**Author:** ![elektro-hausmann](https://avatars.discourse-cdn.com/v4/letter/e/58f4c7/32.png) [@elektro-hausmann](https://forum.shopware.com/u/elektro-hausmann)\
**Post date:** [9. Dezember 2022 um 16:59 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/11 "2022-12-09T16:59:21Z")

</div>

Immer wenn ich eine URL schicken will, kommt die Meldung: Ein Fehler ist aufgetreten: Entschuldige, leider kannst du keinen Link zu diesem Host posten.

---

<div class="post-metadata">

**Author:** ![SCOOPEX](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/scoopex/32/18328_2.png) [@SCOOPEX](https://forum.shopware.com/u/SCOOPEX)\
**Post date:** [9. Dezember 2022 um 17:31 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/12 "2022-12-09T17:31:32Z")

</div>

OK, Deine robots.txt ([https://www.elektro-hausmann.de/robots.txt](https://www.elektro-hausmann.de/robots.txt)) sieht also wie folgt aus:

```auto
User-agent: *

Disallow: /compare
Disallow: /checkout
Disallow: /register
Disallow: /account
Disallow: /note

Allow: /widgets/emotion

```

Wenn in Deinen Google Webmaster Tools die o.a. „Disallow“ Links auftauchen, kannst Du das ignorieren, da diese für die Indexierung Deines Shops unrelevant sind (= sind nur Links zu Shop-Funktionen wie Artikel-Vergleich, zur Kasse, Kunden-Registrierung, Kunden-Konto und Notizen). Falls Dich die Google Meldung stört, kannst Du aber auch entsprechend Deine robots.txt im Hauptverzeichnis Deiner Shop-Installation anpassen und z.B. diese Disallow Einträge entfernen.

Viele Grüße

---

<div class="post-metadata">

**Author:** ![elektro-hausmann](https://avatars.discourse-cdn.com/v4/letter/e/58f4c7/32.png) [@elektro-hausmann](https://forum.shopware.com/u/elektro-hausmann)\
**Post date:** [9. Dezember 2022 um 18:37 UTC](https://forum.shopware.com/t/robots-txt-datei/97395/13 "2022-12-09T18:37:45Z")

</div>

OK  
Danke  
Gruß  
Stefan
