# Wie sollte die robots.txt bei diesem Shopsystem aussehen?
**URL:** https://forum.shopware.com/t/wie-sollte-die-robots-txt-bei-diesem-shopsystem-aussehen/1361
**Category:** Shopware 3.5
**Tags:** administration
**Created:** [12. Januar 2011 um 23:18 UTC](https://forum.shopware.com/t/wie-sollte-die-robots-txt-bei-diesem-shopsystem-aussehen/1361 "2011-01-12T23:18:31Z")
**Posts on this page:** 5
**Page:** 1
### Author:  [@XXXXXX](https://forum.shopware.com/u/XXXXXX)
#### Post date: [12. Januar 2011 um 23:18 UTC](https://forum.shopware.com/t/wie-sollte-die-robots-txt-bei-diesem-shopsystem-aussehen/1361/1 "2011-01-12T23:18:31Z")
Hallo, benötigt man bei diesen Shopsystem eine robots.txt, falls ja, welche Verzeichnisse müssen gesperrt werden. Viele Grüße Rainer
---
### Author:  [@Stefan\_Hamann](https://forum.shopware.com/u/Stefan_Hamann)
#### Post date: [12. Januar 2011 um 23:23 UTC](https://forum.shopware.com/t/wie-sollte-die-robots-txt-bei-diesem-shopsystem-aussehen/1361/2 "2011-01-12T23:23:18Z")
Also zwingend benötigt wird die nicht - wichtig ist, dass du das Directory-Listing deaktiviert hast (das ist aber eigentlich immer der Fall), somit kommt der Spider auch nicht an Files, die nicht relevant für die Suchmaschine sind.
---
### Author:  [@skroll](https://forum.shopware.com/u/skroll)
#### Post date: [15. April 2012 um 16:23 UTC](https://forum.shopware.com/t/wie-sollte-die-robots-txt-bei-diesem-shopsystem-aussehen/1361/3 "2012-04-15T16:23:11Z")
Also zwingend benötigt wird die nicht - [quote]wichtig ist, dass du das Directory-Listing deaktiviert hast (das ist aber eigentlich immer der Fall), somit kommt der Spider auch nicht an Files, die nicht relevant für die Suchmaschine sind.[/quote] das sollte dann in der robots.txt dann so aussehen - oder? User-agent: \* Disallow: /directory Allow: / lg sven
---
### Author:  [@skroll](https://forum.shopware.com/u/skroll)
#### Post date: [15. April 2012 um 16:38 UTC](https://forum.shopware.com/t/wie-sollte-die-robots-txt-bei-diesem-shopsystem-aussehen/1361/4 "2012-04-15T16:38:29Z")
hallo, nochmal zur o.a. anfrage. es wäre sicherlich sehr hilfreich, wenn ihr (shopware) hier im forum mal eine art muster-robots.txt zur weiteren verwendung anlegen könntet. die fehlende robots.txt wird in der regel von allen SEO-analyse-tools incl. google webmastertools abgefragt und bis dato als fehlend bemängelt ☹ evtl. könnte man ja auch über eine disallow einstellung auch das folgende problem in den griff kriegen - oder? [allgemeines-f2/crawling-fehler-http-in-webmaster-tools-t5078-40.html](http://forum.shopware.de/allgemeines-f2/crawling-fehler-http-in-webmaster-tools-t5078-40.html) dankeschön! sven
---
### Author:  [@simplybecause](https://forum.shopware.com/u/simplybecause)
#### Post date: [15. April 2012 um 21:09 UTC](https://forum.shopware.com/t/wie-sollte-die-robots-txt-bei-diesem-shopsystem-aussehen/1361/5 "2012-04-15T21:09:33Z")
Gute Idee, wenn mal eine Muster-robots.txt zur Verfügung gestellt werden würde. Als Neuling hab ich mir zwar schon einige Parameter zusammengesammelt, möchte allerdings nichts vergessen. Wenn ich andere Postings korrekt verstanden habe, ist eine robots.txt nicht zwingend erforderlich, weil das shopintern geregelt wird und der bei entsprechender Einstellungim header ausgegeben wird. Korrekt? Nicht desto trotz würde ich die robots.txt dennoch mit entsprechenden Infos füllen.