# Crawling Fehler (http) in Webmaster Tools

**URL:** <https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090>\
**Category:** Shopware 3.5\
**Tags:** general\
**Created:** [14. November 2011 um 08:38 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090 "2011-11-14T08:38:02Z")\
**Posts on this page:** 20\
**Page:** 1

<div class="post-metadata">

**Author:** ![falke\_s](https://avatars.discourse-cdn.com/v4/letter/f/9de053/32.png) [@falke\_s](https://forum.shopware.com/u/falke_s)\
**Post date:** [14. November 2011 um 08:38 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/1 "2011-11-14T08:38:02Z")

</div>

Hallo, seit ein paar Tagen zeigt mir Webmaster Tools HTTP Fehler 403 an. Kann mir jemand sagen was da los ist und wie ich das beheben kann? Siehe hier:

---

<div class="post-metadata">

**Author:** ![waldicom](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/waldicom/32/12881_2.png) [@waldicom](https://forum.shopware.com/u/waldicom)\
**Post date:** [14. November 2011 um 11:28 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/2 "2011-11-14T11:28:28Z")

</div>

403 bedeutet ja, dass google darauf nicht zugreifen darf. Sind die Inhalte zufällig mit HTACCESS geschützt?

---

<div class="post-metadata">

**Author:** ![falke\_s](https://avatars.discourse-cdn.com/v4/letter/f/9de053/32.png) [@falke\_s](https://forum.shopware.com/u/falke_s)\
**Post date:** [25. November 2011 um 14:07 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/3 "2011-11-25T14:07:52Z")

</div>

Also ich kenne mich da ja nicht so aus, hier ist was in meiner HTACCESS steht:  
RewriteEngine on  
RewriteBase /

RewriteRule shopware.dll shopware.php  
RewriteRule files/documents/.\* engine [NC,L]  
RewriteRule application.yaml engine [NC,L]  
RewriteRule images/ayww/(.\*) images/banner/1 RewriteRule sitemap.xml(.\*) shopware.php?controller=SitemapXml RewriteRule templates/.\*(css|js) engine/backend/php/sCacheTemplate.php?file=0 [NC,L] RewriteRule engine/core/php/sAjaxSearch.php engine/backend/php/sAjaxSearch.php [NC,L]  
RewriteRule engine/core/php/campaigns.php$ engine/backend/php/campaigns.php [NC,L]

RewriteCond %{REQUEST\_URI} !(engine/|images/|files/|templates/|.js$|.css$|.jpg$|.png$)  
RewriteCond %{REQUEST\_FILENAME} !-f  
RewriteCond %{REQUEST\_FILENAME} !-d  
RewriteRule ^(.\*)$ shopware.php [PT,L,QSA]  
DirectoryIndex index.php DirectoryIndex shopware.php  
Deny from all  
Options -Indexes # Options -MultiViews # php\_value memory\_limit 128M # php\_value max\_execution\_time 18000 php\_flag magic\_quotes\_gpc off # php\_flag session.auto\_start off # php\_flag suhosin.session.cryptua off # php\_flag zend.ze1\_compatibility\_mode Off # AddType x-mapp-php5 .php # AddHandler x-mapp-php5 .php

---

<div class="post-metadata">

**Author:** ![shopwareuser2011](https://avatars.discourse-cdn.com/v4/letter/s/df788c/32.png) [@shopwareuser2011](https://forum.shopware.com/u/shopwareuser2011)\
**Post date:** [29. November 2011 um 03:05 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/4 "2011-11-29T03:05:11Z")

</div>

Halli hallo! Ich habe leider das gleiche Problem! Hat keiner eine Ahnung wie das zu lösen ist? Speziell die Frage an die Shopware-Officials 😉 Habe 249 Fehler ☹ Alles bezogen auf einen bestimmten Hersteller (hier: "Ein-ganz-bestimmter-Hersteller)… Kann es sein, dass der Hersteller-Name zu lang ist?! Bekomme also 249x 403 Fehler angezeigt: hier ein Beispiel: [http://www.meinedomain.de/Ein-ganz-best … writeOld=1](http://www.meinedomain.de/Ein-ganz-bestimmter-HerstellerListingLinkPreviousListingLinkNextListingLinkNextListingLinkPreviousListingLinkNextListingLinkPreviousListingLinkNextListingLinkPreviousListingLinkNextListingLinkPreviousListingLinkNextListingLinkPreviousListingLinkNext%5C_26.html?sPage=1&RewriteOld=1) LG und VIELEN DANK an denjenigen im Voraus, der mir (uns) helfen kann!!! Tom

---

<div class="post-metadata">

**Author:** ![falke\_s](https://avatars.discourse-cdn.com/v4/letter/f/9de053/32.png) [@falke\_s](https://forum.shopware.com/u/falke_s)\
**Post date:** [30. November 2011 um 09:13 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/5 "2011-11-30T09:13:04Z")

</div>

Vielleicht liegt es ja an den Verzeichnisrechten. Könnte mir jemand mitteilen wie die einzelnen Verzeichnisrechte bei shopware aussehen sollten?

---

<div class="post-metadata">

**Author:** ![shopwareuser2011](https://avatars.discourse-cdn.com/v4/letter/s/df788c/32.png) [@shopwareuser2011](https://forum.shopware.com/u/shopwareuser2011)\
**Post date:** [4. Dezember 2011 um 21:23 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/6 "2011-12-04T21:23:43Z")

</div>

Keine Idee seitens Shopware?! Wäre wirklich toll wenn jemand hier was zu weiß… DANKE im Voraus!

---

<div class="post-metadata">

**Author:** ![Testman](https://avatars.discourse-cdn.com/v4/letter/t/bc8723/32.png) [@Testman](https://forum.shopware.com/u/Testman)\
**Post date:** [12. Dezember 2011 um 11:59 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/7 "2011-12-12T11:59:18Z")

</div>

Auch bei mir sind diese Fehler Seit ein Paar Tagen. An der Robots und HTACCESS wurde nichts geändert. Ist das ein Shopware Problem? Oder liegt das an Google selbst? Es wäre gut wenn sich die Profis von Shopware auch dazu äußern würden.

---

<div class="post-metadata">

**Author:** ![falke\_s](https://avatars.discourse-cdn.com/v4/letter/f/9de053/32.png) [@falke\_s](https://forum.shopware.com/u/falke_s)\
**Post date:** [14. Dezember 2011 um 14:35 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/8 "2011-12-14T14:35:58Z")

</div>

Ich schieb das Thema mal. Ich vermute mal stark das hat was mit den SEO Urls zu tun die ich im SEO Modul verändern kann. Ich meine das dieser Fehler erst auftritt als ich meine SEO Urls Template geändert habe.

---

<div class="post-metadata">

**Author:** ![Testman](https://avatars.discourse-cdn.com/v4/letter/t/bc8723/32.png) [@Testman](https://forum.shopware.com/u/Testman)\
**Post date:** [14. Dezember 2011 um 21:03 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/9 "2011-12-14T21:03:23Z")

</div>

Hallo, das sicher nichts mit der Seo Url Einstellungen zur tun, ich habe dort Seit über 3 Monaten nichts verändert und trotztem sind die Fehler Seit eine Woche dort??? Woher kommen die? Das ist eine Frage, worauf auch die Profis keine Antwort haben. Also ich denke dass, unter uns Anfängern hier keiner eine Lösung finden wird.

---

<div class="post-metadata">

**Author:** ![farbTopi](https://avatars.discourse-cdn.com/v4/letter/f/a88e4f/32.png) [@farbTopi](https://forum.shopware.com/u/farbTopi)\
**Post date:** [19. Dezember 2011 um 07:47 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/10 "2011-12-19T07:47:21Z")

</div>

Ich denke die Profis werden dadran im Augenblick noch arbeiten. Sobald SW eine Idee oder Lösung hat, werden die sich schon melden…

---

<div class="post-metadata">

**Author:** ![Heiner\_Lohaus](https://avatars.discourse-cdn.com/v4/letter/h/b5a626/32.png) [@Heiner\_Lohaus](https://forum.shopware.com/u/Heiner_Lohaus)\
**Post date:** [19. Dezember 2011 um 09:13 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/11 "2011-12-19T09:13:12Z")

</div>

Hi, das Problem wird anscheined durch ein Link im Template verursacht. Genauer gesagt sind es die Vor- und Zurück-Links in der Hersteller-Suche. Um das Problem zu beheben, müssen diese daher angepasst werden. Einfach diese beiden Textbausteine aus dem Template „\_default/frontend/search/index.tpl“ entfernen: `title="{s name='ListingLinkNext'}{/s}"` `title="{s name='ListingLinkPrevious'}{/s}"` Ansonsten könnt ihr auch einfach allgemein die Hersteller-Suche über die Robots.txt sperren: `User-agent: \*? Disallow: /Supplier-` Heiner

---

<div class="post-metadata">

**Author:** ![Testman](https://avatars.discourse-cdn.com/v4/letter/t/bc8723/32.png) [@Testman](https://forum.shopware.com/u/Testman)\
**Post date:** [19. Dezember 2011 um 11:48 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/12 "2011-12-19T11:48:45Z")

</div>

SUPER!! Danke für die Hilfe, hoffentlich das Hilft.:thumbup:

---

<div class="post-metadata">

**Author:** ![Testman](https://avatars.discourse-cdn.com/v4/letter/t/bc8723/32.png) [@Testman](https://forum.shopware.com/u/Testman)\
**Post date:** [21. Dezember 2011 um 08:20 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/13 "2011-12-21T08:20:15Z")

</div>

Hallo, das entfernen Textbausteine aus dem Template “\_default/frontend/search/index.tpl” hat leider nichts gebracht, Google Crawlet fleißig weiter. Jetzt habe ich in der Robots.txt die Sperre eingesetzt.

---

<div class="post-metadata">

**Author:** ![Testman](https://avatars.discourse-cdn.com/v4/letter/t/bc8723/32.png) [@Testman](https://forum.shopware.com/u/Testman)\
**Post date:** [22. Dezember 2011 um 11:05 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/14 "2011-12-22T11:05:35Z")

</div>

Dieses Problem ist nicht gelöst, auch die Sperrung in Robots.txt hat nichts gebracht. Bereits über ‎36.969 HTTP-Fehler, jeden Tag kommen ein Paar tausend dazu! :shock:

---

<div class="post-metadata">

**Author:** ![Heiner\_Lohaus](https://avatars.discourse-cdn.com/v4/letter/h/b5a626/32.png) [@Heiner\_Lohaus](https://forum.shopware.com/u/Heiner_Lohaus)\
**Post date:** [22. Dezember 2011 um 13:32 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/15 "2011-12-22T13:32:01Z")

</div>

Hi, schick mir doch einmal ein Link zu deinem Shop. Dann kann ich mir das bei dir einmal anschauen und sagen wo noch das Problem liegt. Heiner

---

<div class="post-metadata">

**Author:** ![falke\_s](https://avatars.discourse-cdn.com/v4/letter/f/9de053/32.png) [@falke\_s](https://forum.shopware.com/u/falke_s)\
**Post date:** [22. Dezember 2011 um 13:59 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/16 "2011-12-22T13:59:07Z")

</div>

Hallo, also bei mir scheint es zu funktionieren. Ich habe sowohl die Textbausteine rausgenommen als auch die robots.txt geändert. Seit heute reduziert sich die Anzeige der http Fehler in Webmaster Tools wieder. @Testmann Vielleicht solltest du einfach noch ein paar tage warten und schauen was in den Webmaster Tools angezeigt wird. Nach meiner Erfahrung dauert es immer einige Zeit bis sich Änderungen darin auswirken.

---

<div class="post-metadata">

**Author:** ![Testman](https://avatars.discourse-cdn.com/v4/letter/t/bc8723/32.png) [@Testman](https://forum.shopware.com/u/Testman)\
**Post date:** [22. Dezember 2011 um 18:23 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/17 "2011-12-22T18:23:13Z")

</div>

Meine Seite ist [www.budokatana.de/](http://www.budokatana.de/) Unter Markup Validation Service werden [4 Html Fehler und 7 Warnungen](http://validator.w3.org/check?uri=http%3A%2F%2Fwww.budokatana.de%2F&charset=%28detect+automatically%29&doctype=Inline&ss=1&outline=1&group=0&No200=1&verbose=1&st=1&user-agent=W3C%5C_Validator%2F1.2#line-510) erkannt Ich vermute dass es etwas damit zu tun hat.

---

<div class="post-metadata">

**Author:** ![SebastianKloepper](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/sebastiankloepper/32/21435_2.png) [@SebastianKloepper](https://forum.shopware.com/u/SebastianKloepper)\
**Post date:** [22. Dezember 2011 um 20:03 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/18 "2011-12-22T20:03:37Z")

</div>

Hi, deine Startseite hat keine Warnungen oder Fehler! Wie hast du das geprüft? Du musst zur Prüfung den Seitenquelltext der Seite kopieren und hier einfügen: [http://validator.w3.org/#validate\_by\_input](http://validator.w3.org/#validate%5C_by%5C_input) Über die URL direkt hast du immer Warnungen etc. weil der Service ja kein Cookie setzt etc.

---

<div class="post-metadata">

**Author:** ![farbTopi](https://avatars.discourse-cdn.com/v4/letter/f/a88e4f/32.png) [@farbTopi](https://forum.shopware.com/u/farbTopi)\
**Post date:** [23. Dezember 2011 um 11:26 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/19 "2011-12-23T11:26:39Z")

</div>

Blöde Frage: Wo finde ich die Robots.txt ☹

---

<div class="post-metadata">

**Author:** ![kaffeeteam](https://avatars.discourse-cdn.com/v4/letter/k/74df32/32.png) [@kaffeeteam](https://forum.shopware.com/u/kaffeeteam)\
**Post date:** [23. Dezember 2011 um 14:57 UTC](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090/20 "2011-12-23T14:57:40Z")

</div>

[quote=“farbTopi”]Blöde Frage: Wo finde ich die Robots.txt :([/quote] direkt im root-Verzeichnis liegt diese.

[Nächste Seite](https://forum.shopware.com/t/crawling-fehler-http-in-webmaster-tools/5090.md?page=2)
