Emploi
Reed Scraper
reed.co.uk
Reed est l'un des plus grands sites d'emploi du Royaume-Uni. ScrapeUnblocker rend ses pages de recherche telles qu'un candidat les verrait et renvoie l'intitulé, l'employeur, le salaire et le lieu de chaque poste, tenant un 100% propre sur un éventail de recherches à moins de trois secondes par page.
Ce que vous pouvez extraire
- Intitulé du poste, employeur et lieu
- Fourchette de salaire et périodicité
- Type de contrat et option télétravail
- Date de publication et date limite de candidature
- Extrait de la description et URL de candidature
Comment le scraper
curl -X POST \
-H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
"https://api.scrapeunblocker.com/getPageSource?url=https%3A%2F%2Fwww.reed.co.uk%2Fjobs%2Fsoftware-engineer-jobs&parsed_data=true"import requests
resp = requests.post(
"https://api.scrapeunblocker.com/getPageSource",
headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
params={"url": "https://www.reed.co.uk/jobs/software-engineer-jobs", "parsed_data": True},
)
print(resp.text)import { ScrapeUnblockerClient } from 'scrapeunblocker';
const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });
const results = await su.getPageSource({
url: 'https://www.reed.co.uk/jobs/software-engineer-jobs',
parsedData: true,
});
console.log(results);Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.
Lire la documentation de l'API
Questions fréquentes
Est-il légal de scraper Reed ?
Collecter des données Reed publiques comme les intitulés de poste, les fourchettes de salaire et les noms des employeurs est licite dans de nombreuses juridictions, mais les règles dépendent de votre pays, des données collectées et de leur usage. Certaines de ces données peuvent être personnelles : respectez donc les règles de protection de la vie privée qui vous sont applicables. ScrapeUnblocker renvoie la page publique ; ce que vous collectez et la façon dont vous l'utilisez relève de votre responsabilité.
Comment scraper Reed sans me faire bloquer ?
Reed utilise la détection de bots et la limitation de débit. ScrapeUnblocker rend la page dans un vrai navigateur, fait tourner des sorties résidentielles et ISP et gère les défis, pour que vous obteniez la page que voit un visiteur plutôt qu'une page de blocage. Dans le benchmark de ScrapeUnblocker, 100 % des 1 000 appels ont renvoyé du contenu réel, en environ 2,7 s par appel.
Quelles données Reed puis-je obtenir ?
Les pages de recherche Reed vous donnent, pour chaque poste, l'intitulé, l'employeur et le lieu, la fourchette de salaire et la période de rémunération, le type de contrat et l'option de télétravail, la date de publication et la date limite de candidature, un extrait de la description du poste et l'URL de candidature. Prenez le HTML rendu, ou passez parsed_data=true pour obtenir du JSON structuré.
Ai-je besoin d'une API ou d'un compte Reed ?
Non. ScrapeUnblocker renvoie la page Reed publique en HTML, ou en JSON structuré avec parsed_data=true, vous n'avez donc pas besoin de compte API Reed. Envoyez une URL de recherche d'emploi Reed à /getPageSource avec votre clé ScrapeUnblocker. Utilisez steps pour les clics, la saisie ou le défilement lorsqu'une page en a besoin.
Puis-je surveiller Reed à grande échelle ?
Oui. Les appels s'exécutent en parallèle dans la limite de simultanéité de votre offre : de 20 à 100 requêtes simultanées sur les offres Pay as you go, Starter et Pro, et de 200 à 400 sur Business, Scale et Ultimate. Envoyez de nombreuses recherches par poste en même temps pour suivre au fil du temps les offres d'emploi, les salaires et les dates limites de candidature au Royaume-Uni.
Combien coûte le scraping de Reed ?
Chaque requête Reed coûte 1 crédit, de 1,00 EUR pour 1 000 en paiement à l'usage à environ 0,55 EUR pour 1 000 sur l'offre Ultimate. Les pages livrées sont facturées, y compris la propre page 404 ou 410 d'un site. Un blocage 403, un timeout, un 523 (origine injoignable), un 429 et les erreurs côté ScrapeUnblocker ne sont pas facturés. L'essai gratuit inclut 500 requêtes, sans carte bancaire.
Scrapers similaires
Commencez à scraper ce site dès aujourd'hui
Palier gratuit inclus. Aucune carte bancaire requise pour tester.