Moteurs de recherche

Bing Scraper

bing.com

Bing compte davantage que sa part de marché ne le laisse croire, car il alimente plusieurs assistants IA ; le suivre en parallèle de Google donne une vision plus complète des endroits où une page remonte réellement. Un endpoint de plugin dédié prend un mot-clé et renvoie la page de résultats déjà parsée : résultats organiques avec position, titre, URL, URL affichée, domaine et description, annonces du haut et du bas dans leurs propres listes, recherches associées et nombre total de résultats. Chaque page est rendue dans un vrai navigateur via une sortie dans le pays de votre choix, si bien que les annonces sont celles que voit un internaute sur place ; la réponse a le même format que notre endpoint Google /serpApi, donc un seul pipeline traite les deux moteurs.

Ce que vous pouvez extraire

• Résultats organiques avec position, titre, URL, URL affichée, domaine et description
• Annonces du haut et du bas en listes séparées, avec le domaine de l'annonceur
• Recherches associées
• Nombre total de résultats, pages consultées et un indicateur hasMore
• Jeux de résultats par pays et par langue (proxy_country + language)
• Jusqu'à 10 pages de résultats par appel

Endpoints dédiés

Comment le scraper

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/search/bing?keyword=car%20insurance&pages_to_check=1&proxy_country=GB"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/search/bing",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"keyword": "car insurance", "pages_to_check": "1", "proxy_country": "GB"},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.bingSearch('car insurance', {
  pagesToCheck: 1,
  proxyCountry: 'GB',
});
console.log(results);

Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.

Exemple de réponse

{
  "engine": "bing",
  "keyword": "car insurance",
  "country": "GB",
  "language": "en",
  "totalResults": 48600,
  "resultsCollected": 10,
  "topAdsCount": 5,
  "bottomAdsCount": 3,
  "organicResultsCount": 2,
  "topAds": [
    {
      "position": 1,
      "title": "Compare UK Car Insurance | Compare the Market ™ Car",
      "url": "https://www.bing.com/aclk?ld=e8rLZhoUrp6ZXr4IGK-mBmdT...",
      "displayedUrl": "https://www.comparethemarket.com › Car › Insurance",
      "domain": "comparethemarket.com",
      "description": "Accelerate Your Car Insurance, Get A Free Quote In Minutes..."
    }
  ],
  "bottomAds": [
    {
      "position": 3,
      "title": "Our Cheapest Car Insurance | Car Insurance Quote in Minutes",
      "url": "https://www.bing.com/aclk?ld=e8AAjwZ0pzbGlgaU86CyOk_z...",
      "displayedUrl": "https://www.uswitch.com › Insurance › Car",
      "domain": "uswitch.com",
      "description": "Save On Your Car Insurance By Using Our Free & Easy Website..."
    }
  ],
  "organic": [
    {
      "position": 1,
      "title": "Compare cheap car insurance quotes - Compare the Market",
      "url": "https://www.comparethemarket.com/car-insurance/",
      "displayedUrl": "https://www.comparethemarket.com › car-insurance",
      "domain": "comparethemarket.com",
      "description": "Compare car insurance from 187 provider products with the UK's preferred price comparison site..."
    }
  ],
  "relatedSearches": ["cheap car insurance uk", "car insurance comparison", "compare car insurance"],
  "pagesChecked": 1,
  "hasMore": true
}

Lire la documentation de l'API

Questions fréquentes

Scrapers similaires