# Crawling Fehler bei Google und falsche Artikel-Ids

**URL:** <https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905>\
**Category:** Allgemein\
**Created:** [28. Oktober 2016 um 06:14 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905 "2016-10-28T06:14:42Z")\
**Posts on this page:** 10\
**Page:** 1

<div class="post-metadata">

**Author:** ![Hagen](https://avatars.discourse-cdn.com/v4/letter/h/45deac/32.png) [@Hagen](https://forum.shopware.com/u/Hagen)\
**Post date:** [28. Oktober 2016 um 06:14 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/1 "2016-10-28T06:14:42Z")

</div>

Hallo zusammen,

wie kann denn das angehen das bei Google plötzlich andere Artikel-Ids in der URL sind?  
Google meldet Crawling-Fehler, jeden Tag werden es mehr, heute schon über 600.

Google: ersatzteile/882/sensor  
Richtig:&nbsp;ersatzteile/1859/sensor

Google:&nbsp;ersatzteile/1003/wasserpumpe  
Richtig:&nbsp;ersatzteile/1980/wasserpumpe

Google:&nbsp;ersatzteile/189/oelfilter  
Richtig:&nbsp;ersatzteile/1166/oelfilter

Es können sich doch nicht von heute auf morgen die Artikel-Ids ändern.  
Ich verstehe das gerade nicht.

Gruß,  
Hagen

---

<div class="post-metadata">

**Author:** ![SebastianKloepper](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/sebastiankloepper/32/21435_2.png) [@SebastianKloepper](https://forum.shopware.com/u/SebastianKloepper)\
**Post date:** [28. Oktober 2016 um 06:26 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/2 "2016-10-28T06:26:25Z")

</div>

Hallo,

das kann natürlich schon vorkommen, wenn z.B. Artikel neu per Import in den Shop kommen.  
Die ID ist ja fortlaufend und wenn der Artikel oder auch eine Kategorie entfernt und durch Import wieder in den Shop kommt, dann bekommen diese immer eine neue ID.  
Man müsste also wissen, welche Prozess bei dir im Shop laufen.

Von alleine kann das nicht passieren. Das ist ausgeschlossen

Sebastian

---

<div class="post-metadata">

**Author:** ![Hagen](https://avatars.discourse-cdn.com/v4/letter/h/45deac/32.png) [@Hagen](https://forum.shopware.com/u/Hagen)\
**Post date:** [28. Oktober 2016 um 06:44 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/3 "2016-10-28T06:44:16Z")

</div>

Jetzt habe ich mal in die Datenbank geguckt.

Die Beispiele von oben haben diese changetime:

2016-08-30 21:15:29  
2016-08-30 21:17:13  
2016-08-30 21:04:35

Die Sitemap:  
**Zuletzt gecrawlt am:** 24.10.16  
**Erstmals erkannt am:** 24.10.16

Verlinkt über&nbsp;[.com/sitemapMobile.xml](https://www.fahrzeug-teile.com/sitemapMobile.xml)

Auszug, der ist auch richtig:  
[https://www](https://www). xxx /ersatzteile/1166/oelfilter-fuer-audi-vw-seat-skoda-030115561an-030-115-561-an  
  
  
  
Fehler 23:  
  
23 autoteile/ersatzteile/189/oelfilter-fuer-audi-vw-seat-skoda-030115561an-030-115-561-an 404 24.10.16  
  
  
  
Ich weiß mir grad keinen Rat???  
  
  
  
Gruß,  
  
Hagen

---

<div class="post-metadata">

**Author:** ![SebastianKloepper](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/sebastiankloepper/32/21435_2.png) [@SebastianKloepper](https://forum.shopware.com/u/SebastianKloepper)\
**Post date:** [28. Oktober 2016 um 06:50 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/4 "2016-10-28T06:50:11Z")

</div>

Hi,

aber wie kommen die Artikel in den Shop? Gibt es eine Schnittstelle, Wawi, Import/Export?  
Die Änderungen darüber kann man ja nicht zwingend nachvollziehen in der Datenbank, außer das die Artikel eine neue ID bekommen 😉

Die ID kann sich eigentlich nur durch Importe/Schnittstellen ändern. Das kann Shopware selbst nicht.

Sebastian

---

<div class="post-metadata">

**Author:** ![Hagen](https://avatars.discourse-cdn.com/v4/letter/h/45deac/32.png) [@Hagen](https://forum.shopware.com/u/Hagen)\
**Post date:** [28. Oktober 2016 um 07:00 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/5 "2016-10-28T07:00:10Z")

</div>

Hi Sebastian,

die Artikel kamen am 30.08.2016 in den Shop per API Import. Hatte mir ein Programm geschrieben welches die Artikel aus dem bestehenden Shop nach Shopware per API kopiert. Jetzt kommen nur noch ab und zu 3-8 Artikel alle zwei Tage ebenfalls per API in den Shop nämlich immer dann wenn neue im alten Shop angelegt werden.  
Laut Datenbank ist die erste Artikel-Id die&nbsp;1045 und die heutige letzte die&nbsp;4976.  
Das fängt warscheinlich deshalb nicht mit 1 an weil ich vorher ein paar Import-Tests gemacht habe und diese Artikel dann im Backend wieder gelöscht habe.

Hagen

---

<div class="post-metadata">

**Author:** ![SebastianKloepper](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/sebastiankloepper/32/21435_2.png) [@SebastianKloepper](https://forum.shopware.com/u/SebastianKloepper)\
**Post date:** [28. Oktober 2016 um 07:04 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/6 "2016-10-28T07:04:58Z")

</div>

Hi Hagen,

ja und scheinbar sind genau diese Import-Tests zu Google gekommen und Google hat daher alles alte URLs.  
Sind die Sitemaps denn jetzt passend/aktuell? Oder liegt ggf. bei dir im Verzeichnis eine alte Sitemap physikalisch, so dass Shopware keine neue automatisch erzeugen kann?

Sebastian

---

<div class="post-metadata">

**Author:** ![Hagen](https://avatars.discourse-cdn.com/v4/letter/h/45deac/32.png) [@Hagen](https://forum.shopware.com/u/Hagen)\
**Post date:** [28. Oktober 2016 um 07:33 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/7 "2016-10-28T07:33:12Z")

</div>

Hi Sebastian,

aber wie sollen die zu Google gekommen sein? Ich hatte bis zum öffentlichen Start eine .htaccess Sperre davor!  
Die Sitemaps sind aktuell, die werden doch dynamisch erzeugt oder?

Hagen

---

<div class="post-metadata">

**Author:** ![SebastianKloepper](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/sebastiankloepper/32/21435_2.png) [@SebastianKloepper](https://forum.shopware.com/u/SebastianKloepper)\
**Post date:** [28. Oktober 2016 um 07:50 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/8 "2016-10-28T07:50:45Z")

</div>

Hi,

> aber wie sollen die zu Google gekommen sein? Ich hatte bis zum öffentlichen Start eine .htaccess Sperre davor!

Das kann ich leider nicht beantworten. Dazu hätte man das vorher prüfen müssen. Irgendwie hat Google die Infos bekommen. Entweder Sitemap oder durch das Crawlen der Seite (wie auch immer). Das kann man so nicht beantworten. Da wird man das jetzt so bei Google bereinigen und neu indexieren müssen.

> Die Sitemaps sind aktuell, die werden doch dynamisch erzeugt oder?

Genau - die sind aktuell. Man kann aber auch immer eine eigene in das Verzeichnis legen, dann würde Google die manuelle Datei ziehen.

Viele Grüße

Sebastian

---

<div class="post-metadata">

**Author:** ![Hagen](https://avatars.discourse-cdn.com/v4/letter/h/45deac/32.png) [@Hagen](https://forum.shopware.com/u/Hagen)\
**Post date:** [28. Oktober 2016 um 12:48 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/9 "2016-10-28T12:48:17Z")

</div>

Hi Sebastian,

ok, ich danke dir für deine Überlegungen. Tatsächlich muss Google den Shop besucht haben als ich zum Test der API mal für etwa 3 Stunden das htaccess ausgeschalten hatte ☹

Gruß,  
Hagen

---

<div class="post-metadata">

**Author:** ![simplybecause](https://dub1.discourse-cdn.com/flex013/user_avatar/forum.shopware.com/simplybecause/32/7845_2.png) [@simplybecause](https://forum.shopware.com/u/simplybecause)\
**Post date:** [28. Oktober 2016 um 17:50 UTC](https://forum.shopware.com/t/crawling-fehler-bei-google-und-falsche-artikel-ids/40905/10 "2016-10-28T17:50:18Z")

</div>

Du kannst Dir die URLs, die Google nicht findet, aber in der Datenbank, Tabelle&nbsp; `s_core_rewrite_urls`, speichern und der aktuellen URL zuordnen, dann laufen sie nicht ins leere.
