# Robot txt **URL:** \ **Category:** Allgemein\ **Created:** [25. Juli 2016 um 10:17 UTC](https://forum.shopware.com/t/robot-txt/38507 "2016-07-25T10:17:32Z")\ **Posts on this page:** 9\ **Page:** 1
**Author:** ![NicoHB](https://avatars.discourse-cdn.com/v4/letter/n/8797f3/32.png) [@NicoHB](https://forum.shopware.com/u/NicoHB)\ **Post date:** [25. Juli 2016 um 10:17 UTC](https://forum.shopware.com/t/robot-txt/38507/1 "2016-07-25T10:17:32Z")
Hallo liebe Community, ich habe mit dem shop [www.e-smoke4you.de](http://www.e-smoke4you.de) folgendes Problem.  siehe auch hier ![](https://www.dropbox.com/s/tjs4deqxnqm3jk2/shopware%20fehler.JPG?dl=0) [![](https://europe1.discourse-cdn.com/flex013/uploads/shopware/original/2X/2/2b2381c35022f0cb1f785a0b93af906a198a82fa.jpeg) ](https://dl.dropboxusercontent.com/s/tjs4deqxnqm3jk2/shopware%20fehler.JPG?dl=0) Laut Google gibt es ein Problemk mit der Robot txt. Was muss ich da beachten bzw. warum wird der Shop nicht richtig indexiert. Muss ich die Robot.txt selber erstellen oder muss ich im System was einstellen? KOmme leider nicht weiter. Danke für jede Hilfe im Vorraus, LG Nico ---
**Author:** ![NicoHB](https://avatars.discourse-cdn.com/v4/letter/n/8797f3/32.png) [@NicoHB](https://forum.shopware.com/u/NicoHB)\ **Post date:** [26. Juli 2016 um 10:38 UTC](https://forum.shopware.com/t/robot-txt/38507/2 "2016-07-26T10:38:17Z")
keiner der helfen kann oder will. Falls jemand ne Agentur kennt die das lösen kann, vorschläge bitte an mich.   ---
**Author:** ![steinsoftware](https://avatars.discourse-cdn.com/v4/letter/s/b487fb/32.png) [@steinsoftware](https://forum.shopware.com/u/steinsoftware)\ **Post date:** [26. Juli 2016 um 11:22 UTC](https://forum.shopware.com/t/robot-txt/38507/3 "2016-07-26T11:22:19Z")
Na hast du eine robots.txt in deinem Shop-Root oder nicht? ---
**Author:** ![simplybecause](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/simplybecause/32/7845_2.png) [@simplybecause](https://forum.shopware.com/u/simplybecause)\ **Post date:** [26. Juli 2016 um 11:47 UTC](https://forum.shopware.com/t/robot-txt/38507/4 "2016-07-26T11:47:49Z")
Aufrufen kann man deine robots.txt, aber wer das verzapft hat, …: ``` User-agent: \* Disallow: / ``` Du sperrst alle Crawler aus. Schau mal per ftp in das Root-Verzeichnis, ob da eine robots.txt liegt. Wenn ja, kannst Du die löschen wenn die index.tpl unter themes/Frontend/Bare/frontend/robots\_txt/ original ist wie hier beschrieben: [http://community.shopware.com/Eigene-robots.txt-erstellen\_detail\_1328.html](http://community.shopware.com/Eigene-robots.txt-erstellen_detail_1328.html) und wenn sich unter themes/Frontend/DEIN-THEME/frontend/robots\_txt/ keine index.tpl befindet. Wenn sich dort eine befindet, lösche die index.tpl auf dem Server und leere den Shop-Cache.   ---
**Author:** ![upsidedown](https://avatars.discourse-cdn.com/v4/letter/u/d6d6ee/32.png) [@upsidedown](https://forum.shopware.com/u/upsidedown)\ **Post date:** [18. April 2017 um 19:58 UTC](https://forum.shopware.com/t/robot-txt/38507/5 "2017-04-18T19:58:40Z")
Ich stehe vor demselben Problem. Ich habe an der Installation keine Anpassungen vorgenommen. Im root liegt keine robots.txt. Wenn ich allerdings [www.shop.de/robots.txt](http://www.shop.de/robots.txt) aufrufe, kommt  ``` User-agent: \* Disallow: / ``` ---
**Author:** ![Moritz\_Naczenski](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/moritz_naczenski/32/7792_2.png) [@Moritz\_Naczenski](https://forum.shopware.com/u/Moritz_Naczenski)\ **Post date:** [18. April 2017 um 20:04 UTC](https://forum.shopware.com/t/robot-txt/38507/6 "2017-04-18T20:04:23Z")
Shopware-Standard ist das nicht. Du hast also entweder deine robots.txt angepasst (über das Theme) oder eine liegt in deinem document root - andere Möglichkeiten gibt es nicht. ---
**Author:** ![upsidedown](https://avatars.discourse-cdn.com/v4/letter/u/d6d6ee/32.png) [@upsidedown](https://forum.shopware.com/u/upsidedown)\ **Post date:** [18. April 2017 um 21:01 UTC](https://forum.shopware.com/t/robot-txt/38507/7 "2017-04-18T21:01:47Z")
Ich hatte bis gestern eine im Root liegen um den Shop zu sperren. Die ist aber gelöscht. Ich sehe sie per FTP auch nicht mehr. Trotzdem wird mir diese über Linkaufruf und Google Abfrage angezeigt. Der Root wird doch nicht gecached? ---
**Author:** ![TimmeHosting](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/timmehosting/32/15580_2.png) [@TimmeHosting](https://forum.shopware.com/u/TimmeHosting)\ **Post date:** [20. April 2017 um 12:52 UTC](https://forum.shopware.com/t/robot-txt/38507/8 "2017-04-20T12:52:24Z")
Ich sehe nun Folgendes: ``` User-agent: \* Disallow: /compare Disallow: /checkout Disallow: /register Disallow: /account Disallow: /note Sitemap: http://www.e-smoke4you.de/sitemap.xml ``` Das sieht schon besser aus. 🙂 ![](https://europe1.discourse-cdn.com/flex013/uploads/shopware/original/1X/385eaa628505df573ebf33722f780335f53ac1b2.png) Timme Hosting - schnelles nginx-Hosting [www.timmehosting.de](https://timmehosting.de/) ---
**Author:** ![upsidedown](https://avatars.discourse-cdn.com/v4/letter/u/d6d6ee/32.png) [@upsidedown](https://forum.shopware.com/u/upsidedown)\ **Post date:** [20. April 2017 um 19:44 UTC](https://forum.shopware.com/t/robot-txt/38507/9 "2017-04-20T19:44:24Z")
??? Um e-smoke geht es hier doch nicht mehr, wollte nur keinen neuen Thread eröffnen. Allerdings ist die meine Seite auch bei Euch gehostet. Ist die Robots.txt im Cache? Vor 3 tagen gelöscht und trotzdem erscheint diese, wenn ich sie aufrufe und Google meint auch, dass er nicht crawlen darf.