# Wie kann ich das Crawling meiner Website vorübergehend komplett aussetzen?

**URL:** <https://forum.shopware.com/t/wie-kann-ich-das-crawling-meiner-website-vorubergehend-komplett-aussetzen/52382>\
**Category:** Shopware 5\
**Created:** [14. April 2018 um 20:23 UTC](https://forum.shopware.com/t/wie-kann-ich-das-crawling-meiner-website-vorubergehend-komplett-aussetzen/52382 "2018-04-14T20:23:43Z")\
**Posts on this page:** 4\
**Page:** 1

<div class="post-metadata">

**Author:** ![oekobaby](https://avatars.discourse-cdn.com/v4/letter/o/e0b2c6/32.png) [@oekobaby](https://forum.shopware.com/u/oekobaby)\
**Post date:** [14. April 2018 um 20:23 UTC](https://forum.shopware.com/t/wie-kann-ich-das-crawling-meiner-website-vorubergehend-komplett-aussetzen/52382/1 "2018-04-14T20:23:43Z")

</div>

So liebe Shopware leute,

da wir gerade ganz viel an der Struktur ändern,wäre es gut,man könnte vorübergehend googl e sagen,nicht crawlen

wie geht das?

Google schreibt das so?

Wie kann ich das Crawling meiner Website vorübergehend komplett aussetzen?

Sie können das Crawling vorübergehend komplett aussetzen, indem Sie für URLs, auch für die robots.txt-Datei, den HTTP-Ergebniscode 503 zurückgeben. Es wird in regelmäßigen Abständen erneut versucht, die robots.txt-Datei abzurufen, bis der Zugriff wieder möglich ist. Wir raten davon ab, das Crawling über Ihre robots.txt-Datei zu unterbinden.

Kann mir einer sagen,wie und wo ich das umsetten kann?

Herzlichen dank

andrea

---

<div class="post-metadata">

**Author:** ![brettvormkopp](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/brettvormkopp/32/7788_2.png) [@brettvormkopp](https://forum.shopware.com/u/brettvormkopp)\
**Post date:** [14. April 2018 um 21:52 UTC](https://forum.shopware.com/t/wie-kann-ich-das-crawling-meiner-website-vorubergehend-komplett-aussetzen/52382/2 "2018-04-14T21:52:25Z")

</div>

robots.txt

```
User-agent: *
Disallow: /

```

&nbsp;

---

<div class="post-metadata">

**Author:** ![oekobaby](https://avatars.discourse-cdn.com/v4/letter/o/e0b2c6/32.png) [@oekobaby](https://forum.shopware.com/u/oekobaby)\
**Post date:** [15. April 2018 um 15:06 UTC](https://forum.shopware.com/t/wie-kann-ich-das-crawling-meiner-website-vorubergehend-komplett-aussetzen/52382/3 "2018-04-15T15:06:03Z")

</div>

ok danke werde ich gleich machen

und ich hab noch eine.

Hersteller SEO-URLs

Wir möchten gerne dass unsere Hersteller-URLs so lauten:

[xydomain.com/marke/HERSTELLERNAME](http://xydomain.com/marke/HERSTELLERNAME)

und nicht

[xydomain.com/listing/manufacturer/sSupplier/27](http://xydomain.com/listing/manufacturer/sSupplier/27)

Wie stellt man das genau in SEO-Router Einstellungen ein, auch damit dieses u.a. im Einkaufswelten-Hersteller-Slider richtig hinterlegt ist!

---

<div class="post-metadata">

**Author:** ![beat](https://avatars.discourse-cdn.com/v4/letter/b/35a633/32.png) [@beat](https://forum.shopware.com/u/beat)\
**Post date:** [17. April 2018 um 04:45 UTC](https://forum.shopware.com/t/wie-kann-ich-das-crawling-meiner-website-vorubergehend-komplett-aussetzen/52382/4 "2018-04-17T04:45:18Z")

</div>

Wenn man den 503 nicht selber erzeugen kann dann spricht man mit dem Provider. Disallow: / in der robots.txt ist falsch. Das führt nur dazu das die komplette Seite aus dem Index genommen wird. Ansonsten sind Änderungen an Webseiten normal und Google kann damit umgehen.

&nbsp;
