Moteurs de recherche

Brave Images Scraper

search.brave.com

Brave Images n'affiche dans sa grille qu'une partie de ses résultats et aucune des pages sources : scraper ce que la page affiche vous donne donc des miniatures sans les pages dont elles proviennent. La page embarque pourtant l'ensemble complet des résultats, environ 200 images, dans ses données, et un endpoint de plugin dédié prend un mot-clé et y lit chaque résultat : l'URL de l'image originale sur le site de l'éditeur (pas une miniature Brave), le domaine et la page source, un titre et le nom du site, une miniature et les dimensions en pixels - en un seul appel facturé comme une requête, sans clé d'API Brave. Brave choisit la région des résultats selon la localisation de l'internaute, donc la page est rendue dans un vrai navigateur via une sortie dans le pays de votre choix, et les résultats sont ceux que voit un internaute sur place. La réponse reprend le format de notre plugin Google Images, donc un seul pipeline traite tous les moteurs.

Ce que vous pouvez extraire

• L'URL de l'image originale sur le site de l'éditeur, pour chaque résultat
• Le domaine source et l'URL de la page source qui affiche l'image, que la grille de Brave ne montre pas
• Le titre du résultat, ainsi que le nom du site
• Une URL de miniature hébergée par Brave, rapide à charger
• Largeur et hauteur de l'image en pixels
• L'ensemble complet des résultats, environ 200 images, en un seul appel facturé comme une requête
• Résultats par région : proxy_country fixe la région de Brave via l'IP de sortie

Endpoints dédiés

Comment le scraper

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/images/brave-search?q=eiffel%20tower&proxy_country=US"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/images/brave-search",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"q": "eiffel tower", "proxy_country": "US"},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.braveImages('eiffel tower', {
  proxyCountry: 'US',
});
console.log(results);

Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.

Exemple de réponse

{
  "engine": "brave",
  "query": "eiffel tower",
  "gl": "us",
  "proxyCountry": "US",
  "resultsCollected": 200,
  "pagesFetched": 1,
  "hasMore": false,
  "results": [
    {
      "position": 1,
      "imageUrl": "https://cms.tootbus.com/sites/default/files/styles/ratp_xs_webp/public/2021-02/shutterstock_183894290_jpg.jpg.webp?itok=MzNNRyGW",
      "sourceDomain": "tootbus.com",
      "sourcePageUrl": "https://www.tootbus.com/en/paris/inspiration/10-fascinating-facts-about-eiffel-tower-you-should-know",
      "title": "10 Fascinating Facts about the Eiffel Tower you should know",
      "sourceName": "tootbus.com",
      "thumbnailUrl": "https://imgs.search.brave.com/HNsoICjicELfOImcnq05q6XwB3w28exDdTTwO5vxIsg/rs:fit:500:0:1:0/g:ce/aHR0cHM6Ly9jbXMu...",
      "width": 348,
      "height": 205,
      "fileSize": null
    },
    {
      "position": 2,
      "imageUrl": "https://thephotoargus.com/wp-content/uploads/2019/04/eiffeltower05.jpg",
      "sourceDomain": "thephotoargus.com",
      "sourcePageUrl": "https://thephotoargus.com/eiffel-tower-pictures/",
      "title": "Tony Gravé - eiffel tower silhouette",
      "sourceName": "thephotoargus.com",
      "thumbnailUrl": "https://imgs.search.brave.com/XBlQ6_wPRlBfPsCZPnDBjrVcvjR0rkc5Z4alqbmcvgc/rs:fit:500:0:1:0/g:ce/aHR0cHM6Ly90aGVw...",
      "width": 683,
      "height": 1024,
      "fileSize": null
    }
  ]
}

Lire la documentation de l'API

Questions fréquentes

Scrapers similaires