Amazon-Scraping mit Proxys ist kein Geschwindigkeitsproblem, sondern eines von Geografie und Taktung. Dieselbe ASIN zeigt je nach Herkunft der Anfrage einen anderen Preis, einen anderen Buy-Box-Gewinner und manchmal eine andere Verfügbarkeit — eine IP, die nur schnell rotiert, erzeugt also Daten, die auf unsichtbare Weise falsch sind.

Dieser Leitfaden zeigt, was Amazon per IP personalisiert, wie Sie Residential IPs pro Marktplatz und Region pinnen, wann Rotation hilft und wann sie Genauigkeit zerstört.

Was Amazon nach Geografie personalisiert

  • Preis und Währung: Umrechnung, Steueranzeige und Aktionspreise ändern sich je Marktplatz-Domain und oft je erkannter Region innerhalb eines Landes. Zwei Anfragen für dieselbe ASIN können zwei korrekte Summen liefern.
  • Buy-Box-Inhaber: Wer die Buy Box gewinnt, entscheidet sich pro Anfrage über Lieferort, Verkäuferleistung und Bestand. Eine IP in der falschen Region kann die Box einem Verkäufer geben, den Ihre Kunden nie sehen.
  • Verfügbarkeit und Lieferversprechen: „auf Lager“, Lieferdaten und Prime-Eignung werden aus dem per IP abgeleiteten Ziel berechnet. Ein US-Crawl über einen europäischen Exit meldet das falsche Lieferversprechen.
  • Rezensionen und Inhaltsvarianten: Rezensionspopulationen, „Kunden sahen auch“-Leisten und lokalisierte Titel unterscheiden sich je Marktplatz, teils innerhalb einer Domain.

Fünf Prüfpunkte vor dem ersten Crawl

  1. Ziele als Paar aus Marktplatz und Region führen — amazon.com/US-East, amazon.com/US-West, amazon.de, amazon.co.jp — nicht nur als Domain.
  2. Pro Paar einen Pool geo-gepinnter Residential IPs reservieren, dimensioniert nach Parallelität und Katalogumfang.
  3. Pro Seitentyp entscheiden: Suchseiten vertragen Rotation, Produktdetailseiten nicht, weil ein IP-Wechsel mitten im Capture das Angebot ändern kann.
  4. Accept-Language, Währungs-Cookie und plausible Zeitzone je Marktplatz setzen. Japanisches Locale auf deutscher IP erzeugt eine Hybridseite, die keinem echten Nutzer entspricht.
  5. Pro Anfrage 5 bis 15 Sekunden zufällig warten, gelegentlich länger. Gleichmäßige schnelle Bursts sind der sicherste Weg zum Throttling. Zeitstempel, Exit-IP und Region bei jedem Angebot speichern.

Seitentyp und Proxy-Strategie im Vergleich

  • Suchergebnisse — Rotation pro Anfrage im selben Regionspool; hohes Volumen, wenig Zustand.
  • Produktdetail — Sticky für den gesamten Capture, 5–15 Minuten; Preis, Buy Box und Lieferversprechen müssen von einer Identität stammen.
  • Rezensionen — Sticky und dieselbe IP für die Pagination; Rotation mitten in der Liste liefert Duplikate.
  • Best Sellers und Deals — Rotation pro Anfrage, Abtastung zu festen Stunden; konstante Abtastzeiten sind wichtiger als IP-Vielfalt.

Pipeline Schritt für Schritt

  1. Mit einem Marktplatz und einer Region beginnen. Preis-, Buy-Box- und Lieferfelder stabilisieren, bevor eine zweite Geografie dazukommt.
  2. Über eine geo-gepinnte IP routen und Exit-Land sowie ASN vor der Anfrage prüfen.
  3. Marktplatzgerechte Header und Cookies senden: Sprache, Währung und eine Session, die den Detail-Capture überdauert.
  4. Zufälliges Pacing von 5 bis 15 Sekunden plus exponentiellen Backoff mit Jitter bei 429 anwenden; bei 503 oder CAPTCHA rotieren und das Ziel einige Minuten abkühlen lassen. Defensiv parsen und das Roh-HTML je Feld speichern, eine Zeile pro Angebot mit Zeit, Exit-IP, Region, Währung und Verkäufer.

Häufige Fragen

Warum blockiert Amazon meinen Scraper trotz Proxys?

Meist löst das Verhalten die Sperre aus, nicht die IP: gleichmäßige Intervalle, identische Header über Tausende Anfragen oder ein Fingerprint, der dem angegebenen Gerät widerspricht. Proxys ändern nur die Netzidentität. Pacing korrigieren, Header plausibel variieren, Cookies innerhalb einer Session konsistent halten und Parallelität senken, bevor Sie mehr IPs kaufen.

Welcher Proxy-Typ eignet sich für Amazon?

Residential IPs, gepinnt auf die Marktplatzregion. Datacenter-Bereiche sind bekannt und erhalten oft eine degradierte Erfahrung — anderes Layout oder beschnittenes Angebot — was die Daten selbst bei erfolgreicher Anfrage verfälscht. Residential lässt auch Buy Box und Lieferversprechen wie beim echten Käufer aussehen.

Wie sammle ich Rezensionen ohne Duplikate?

Eine Sticky-IP pro Rezensions-Crawl behalten und in dieser Session paginieren, da die Liste vom Session-Zustand abhängt. Nach Rezensions-ID statt Position deduplizieren, „Top“ und „Neueste“ getrennt erfassen und planmäßig neu crawlen, um Änderungen und Löschungen per ID zu erkennen.

Ist Amazon-Scraping legal?

Das hängt von Jurisdiktion, Datenart und Nutzung ab. Öffentliche Produktdaten werden anders behandelt als personenbezogene Daten, die Nutzungsbedingungen gelten dennoch. Sammeln Sie nur Nötiges, vermeiden Sie personenbezogene Informationen, respektieren Sie Limits und lassen Sie Ihren konkreten Fall rechtlich prüfen.

Fazit

Amazon belohnt langsame, geografisch konsistente Erfassung und bestraft schnelle, gleichmäßige. Pinnen Sie Residential IPs pro Marktplatz und Region, rotieren Sie nur auf zustandslosen Seiten, takten Sie mit fünf bis fünfzehn Sekunden und speichern Sie jedes Angebot mit Zeitstempel und Exit-IP. Starten Sie mit FTProxy Residential Proxys und behandeln Sie das Regionsfeld als Teil des Schemas.