Le scraping de Google Maps avec proxys fonctionne car la difficulté n’a jamais été le parsing — mais servir chaque requête depuis le bon endroit au bon rythme. Les résultats Maps sont géo-diffusés, sévèrement rate-limités et rapides à flagger les schémas automatisés ; un crawler naïf meurt en quelques minutes.
Comment le scraping Maps est structuré
- Recherche en grille : découper la ville en cellules lat/lng et interroger chacune — une requête unique au centre rate toute la couronne.
- IPs résidentielles géo-correspondantes : sortir près de la ville cible pour que résultats, langue et disponibilité collent aux utilisateurs réels.
- Récolte par place ID : résoudre les place IDs une fois, puis tirer avis, horaires et heures de pointe à un rythme plus lent.
- Rate limiting : un burst mono-IP meurt en minutes — le pacing est une donnée de conception, pas un rattrapage.
Checklist de collecte
- Délimiter précisément la ville et griller en cellules de 1–2 km dans les zones denses.
- Prendre des IP résidentielles qui géolocalisent dans ou près de la ville ; une session sticky par groupe de cellules.
- Délais aléatoires de 3 à 10 s entre requêtes ; une grille complète se compte en heures.
- Dédupliquer tôt par place ID, car les cellules se chevauchent.
- Cacher agressivement, recrawler chaque semaine ; vérifier l’IP de sortie et le pays avant chaque run.
Comparatif express
- Résidentiel géo-correspondant : résultats identiques à ceux des locaux, blocages rares à bon rythme.
- Datacenter : pas cher, mais résultats décalés vers la localisation serveur et blocages fréquents en plein crawl.
- Sessions : sticky résidentiel par quartier garde une identité stable ; le datacenter impose une rotation permanente.
- La précision est l’enjeu : 200 km d’écart changent la liste, l’ordre et même la langue.
Mise en place en 4 étapes
- Calculer la bounding box de la ville et couper la grille avec un petit script.
- Lier une session sticky à chaque groupe de cellules.
- Interroger chaque centre de cellule avec 3–10 s aléatoires et un log par cellule.
- Fusionner les place IDs, dédupliquer, cacher et planifier le recrawl delta à une semaine.
FAQ
Le scraping de Maps est-il légal ?
Cela dépend de la juridiction, de la méthode et de l’usage : la collecte automatisée peut heurter les ToS de Google ; privilégiez les API officielles quand elles suffisent, gardez des volumes modestes et vérifiez le droit local des bases de données avant de passer à l’échelle.
Quel pacing ?
Par défaut 3–10 s aléatoires entre requêtes, une grille en heures ; reculez dès que les erreurs montent et jamais deux grilles lourdes sur la même session sticky.
Les proxys résidentiels FTProxy avec ciblage géo à l’échelle de la ville alimentent exactement ce type de pipeline — pilotez une ville, prouvez la couverture, puis dupliquez partout.