Automobile
CarGurus Scraper
cargurus.com
CarGurus classe les annonces de voitures d'occasion avec sa propre évaluation de l'offre et les protège derrière une détection de bots. ScrapeUnblocker rend les pages d'annonces dans un vrai navigateur et renvoie la marque, le modèle, le prix et l'évaluation de l'offre de chaque voiture, tenant 93,4% sur un éventail de recherches par modèle.
Ce que vous pouvez extraire
- Marque, modèle, finition et année
- Prix et évaluation de l'offre
- Kilométrage et jours sur le marché
- Nom du concessionnaire, note et localisation
- Historique du véhicule et URL de l'annonce
Comment le scraper
curl -X POST \
-H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
"https://api.scrapeunblocker.com/getPageSource?url=https%3A%2F%2Fwww.cargurus.com%2FCars%2Fl-Used-BMW-3-Series-d309&parsed_data=true"import requests
resp = requests.post(
"https://api.scrapeunblocker.com/getPageSource",
headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
params={"url": "https://www.cargurus.com/Cars/l-Used-BMW-3-Series-d309", "parsed_data": True},
)
print(resp.text)import { ScrapeUnblockerClient } from 'scrapeunblocker';
const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });
const results = await su.getPageSource({
url: 'https://www.cargurus.com/Cars/l-Used-BMW-3-Series-d309',
parsedData: true,
});
console.log(results);Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.
Lire la documentation de l'API
Questions fréquentes
Est-il légal de scraper CarGurus ?
Collecter des données CarGurus publiques comme les prix des voitures, les évaluations d'offre et les noms des concessionnaires est licite dans de nombreuses juridictions, mais les règles dépendent de votre pays, des données collectées et de leur usage. Certaines de ces données peuvent être personnelles : respectez donc les règles de protection de la vie privée qui vous sont applicables. ScrapeUnblocker renvoie la page publique ; ce que vous collectez et la façon dont vous l'utilisez relève de votre responsabilité.
Comment scraper CarGurus sans me faire bloquer ?
CarGurus utilise la détection de bots et la limitation de débit. ScrapeUnblocker rend la page dans un vrai navigateur, fait tourner des sorties résidentielles et ISP et gère les défis, pour que vous obteniez la page que voit un visiteur plutôt qu'une page de blocage. Dans le benchmark de ScrapeUnblocker, 93,4 % des 1 000 appels ont renvoyé du contenu réel, en environ 14,1 s par appel.
Quelles données CarGurus puis-je obtenir ?
Les pages d'annonces CarGurus vous donnent, pour chaque voiture, la marque, le modèle, la finition et l'année, le prix et l'évaluation d'offre CarGurus, le kilométrage et le nombre de jours sur le marché, le nom, la note et la localisation du concessionnaire, l'historique du véhicule et l'URL de l'annonce. Prenez le HTML rendu, ou passez parsed_data=true pour obtenir du JSON structuré.
Ai-je besoin d'une API ou d'un compte CarGurus ?
Non. ScrapeUnblocker renvoie la page CarGurus publique en HTML, ou en JSON structuré avec parsed_data=true, vous n'avez donc pas besoin de compte API CarGurus. Envoyez une URL d'annonce ou de recherche CarGurus à /getPageSource avec votre clé ScrapeUnblocker. Utilisez steps pour les clics, la saisie ou le défilement lorsqu'une page en a besoin.
Puis-je surveiller CarGurus à grande échelle ?
Oui. Les appels s'exécutent en parallèle dans la limite de simultanéité de votre offre : de 20 à 100 requêtes simultanées sur les offres Pay as you go, Starter et Pro, et de 200 à 400 sur Business, Scale et Ultimate. Envoyez de nombreuses recherches par modèle en même temps pour suivre au fil du temps les prix, les évaluations d'offre et le nombre de jours sur le marché.
Combien coûte le scraping de CarGurus ?
Chaque requête CarGurus coûte 1 crédit, de 1,00 EUR pour 1 000 en paiement à l'usage à environ 0,55 EUR pour 1 000 sur l'offre Ultimate. Les pages livrées sont facturées, y compris la propre page 404 ou 410 d'un site. Un blocage 403, un timeout, un 523 (origine injoignable), un 429 et les erreurs côté ScrapeUnblocker ne sont pas facturés. L'essai gratuit inclut 500 requêtes, sans carte bancaire.
Scrapers similaires
Commencez à scraper ce site dès aujourd'hui
Palier gratuit inclus. Aucune carte bancaire requise pour tester.