Automobile
Autotrader Scraper
autotrader.com
Autotrader est l'un des plus grands marketplaces de voitures aux États-Unis, avec des véhicules neufs, d'occasion et certifiés. ScrapeUnblocker rend ses pages de recherche telles qu'un acheteur les verrait et renvoie la marque, le modèle, le prix et les caractéristiques de chaque voiture, tenant un 100% propre sur un éventail de recherches par marque.
Ce que vous pouvez extraire
- Marque, modèle, finition et année
- Prix et kilométrage
- Statut neuf, occasion ou certifié
- Nom du concessionnaire, note et localisation
- Équipements, couleur et URL de l'annonce
Comment le scraper
curl -X POST \
-H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
"https://api.scrapeunblocker.com/getPageSource?url=https%3A%2F%2Fwww.autotrader.com%2Fcars-for-sale%2Fbmw&parsed_data=true"import requests
resp = requests.post(
"https://api.scrapeunblocker.com/getPageSource",
headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
params={"url": "https://www.autotrader.com/cars-for-sale/bmw", "parsed_data": True},
)
print(resp.text)import { ScrapeUnblockerClient } from 'scrapeunblocker';
const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });
const results = await su.getPageSource({
url: 'https://www.autotrader.com/cars-for-sale/bmw',
parsedData: true,
});
console.log(results);Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.
Lire la documentation de l'API
Questions fréquentes
Est-il légal de scraper Autotrader ?
Collecter des données Autotrader publiques comme les prix des voitures, le kilométrage et les noms des concessionnaires est licite dans de nombreuses juridictions, mais les règles dépendent de votre pays, des données collectées et de leur usage. Certaines de ces données peuvent être personnelles : respectez donc les règles de protection de la vie privée qui vous sont applicables. ScrapeUnblocker renvoie la page publique ; ce que vous collectez et la façon dont vous l'utilisez relève de votre responsabilité.
Comment scraper Autotrader sans me faire bloquer ?
Autotrader utilise la détection de bots et la limitation de débit. ScrapeUnblocker rend la page dans un vrai navigateur, fait tourner des sorties résidentielles et ISP et gère les défis, pour que vous obteniez la page que voit un visiteur plutôt qu'une page de blocage. Dans le benchmark de ScrapeUnblocker, 100 % des 1 000 appels ont renvoyé du contenu réel, en environ 7,5 s par appel.
Quelles données Autotrader puis-je obtenir ?
Les pages de recherche Autotrader vous donnent, pour chaque voiture, la marque, le modèle, la finition et l'année, le prix et le kilométrage, si elle est neuve, d'occasion ou certifiée, le nom, la note et la localisation du concessionnaire, les équipements et la couleur, et l'URL de l'annonce. Prenez le HTML rendu, ou passez parsed_data=true pour obtenir du JSON structuré.
Ai-je besoin d'une API ou d'un compte Autotrader ?
Non. ScrapeUnblocker renvoie la page Autotrader publique en HTML, ou en JSON structuré avec parsed_data=true, vous n'avez donc pas besoin de compte API Autotrader. Envoyez une URL de recherche Autotrader, comme une recherche par marque, à /getPageSource avec votre clé ScrapeUnblocker. Utilisez steps pour les clics, la saisie ou le défilement lorsqu'une page en a besoin.
Puis-je surveiller Autotrader à grande échelle ?
Oui. Les appels s'exécutent en parallèle dans la limite de simultanéité de votre offre : de 20 à 100 requêtes simultanées sur les offres Pay as you go, Starter et Pro, et de 200 à 400 sur Business, Scale et Ultimate. Envoyez de nombreuses recherches par marque et modèle en même temps pour suivre au fil du temps le stock de véhicules neufs, d'occasion et certifiés ainsi que les prix.
Combien coûte le scraping d'Autotrader ?
Chaque requête Autotrader coûte 1 crédit, de 1,00 EUR pour 1 000 en paiement à l'usage à environ 0,55 EUR pour 1 000 sur l'offre Ultimate. Les pages livrées sont facturées, y compris la propre page 404 ou 410 d'un site. Un blocage 403, un timeout, un 523 (origine injoignable), un 429 et les erreurs côté ScrapeUnblocker ne sont pas facturés. L'essai gratuit inclut 500 requêtes, sans carte bancaire.
Scrapers similaires
Commencez à scraper ce site dès aujourd'hui
Palier gratuit inclus. Aucune carte bancaire requise pour tester.