Moteurs de recherche

Yahoo Images Scraper

images.search.yahoo.com

Yahoo Images sert des résultats issus de l'index d'images de Bing sur ses propres pages, avec un site régional pour de nombreux pays. Sa grille charge de nouvelles tuiles au fil du défilement et range l'image originale et la page source de chaque résultat dans des attributs de la tuile, si bien que scraper soi-même implique de rendre la page et de lire chaque tuile. Un endpoint de plugin dédié prend un mot-clé et renvoie chaque résultat déjà parsé : l'URL réelle de l'image en pleine résolution (pas une miniature), le domaine et la page source, un titre et le nom du site, une miniature et les dimensions originales en pixels - sans grille à rendre vous-même et sans compte Yahoo. proxy_country choisit le site régional de Yahoo (de.images.search.yahoo.com pour DE) et la sortie via laquelle la page est rendue dans un vrai navigateur, et pages collecte jusqu'à 10 pages d'environ 60 images chacune en un seul appel. La réponse reprend le format de nos plugins Google Images et Bing Images, donc un seul pipeline les traite tous.

Ce que vous pouvez extraire

• L'URL de l'image originale en pleine résolution sur le site de l'éditeur, pour chaque résultat
• Le domaine source et l'URL de la page source qui affiche l'image
• Le titre du résultat, ainsi que le site que Yahoo affiche pour lui
• Une URL de miniature hébergée par Bing, rapide à charger : celle que Yahoo affiche dans sa grille
• Largeur et hauteur originales de l'image en pixels
• Un lien vers la visionneuse Yahoo Images pour chaque résultat
• Environ 60 résultats par page, jusqu'à 10 pages par appel, depuis le site régional de Yahoo du pays de votre choix

Endpoints dédiés

Comment le scraper

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/images/yahoo-search?q=eiffel%20tower&pages=1"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/images/yahoo-search",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"q": "eiffel tower", "pages": "1"},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.yahooImages('eiffel tower', {
  pages: 1,
});
console.log(results);

Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.

Exemple de réponse

{
  "engine": "yahoo",
  "query": "eiffel tower",
  "gl": "us",
  "proxyCountry": "US",
  "resultsCollected": 60,
  "pagesFetched": 1,
  "hasMore": true,
  "results": [
    {
      "position": 1,
      "imageUrl": "https://cdn.britannica.com/54/75854-050-E27E66C0/Eiffel-Tower-Paris.jpg",
      "sourceDomain": "britannica.com",
      "sourcePageUrl": "https://www.britannica.com/topic/Eiffel-Tower-Paris-France",
      "title": "Eiffel Tower | History, Height, & Facts | Britannica",
      "sourceName": "www.britannica.com",
      "thumbnailUrl": "https://tse3.mm.bing.net/th/id/OIP.Z97bkX40h0DN2g8WwHpqJwHaLO?r=0&pid=Api&h=220&P=0",
      "width": 1056,
      "height": 1600,
      "fileSize": null,
      "yahooImagesUrl": "https://images.search.yahoo.com/search/images;_ylt=A2RRWreO_LlqFQMABYGJzbkF;_ylu=Y29sbwN1cy1lYXN0LTEEcG9zAzEEdnRpZAMEc2VjA3Ny?p=eiffel+tower&imgurl=https%3A%2F%2Fcdn.britannica.com..."
    },
    {
      "position": 2,
      "imageUrl": "https://cdn.britannica.com/52/245552-050-3D7334F9/Eiffel-Tower-Paris.jpg",
      "sourceDomain": "morilly.com",
      "sourcePageUrl": "https://morilly.com/blog/paris-attractions-eiffel-tower",
      "title": "Paris attractions eiffel tower 60 photos - Morilly.com",
      "sourceName": "morilly.com",
      "thumbnailUrl": "https://tse4.mm.bing.net/th/id/OIP.54RmpGCUWV9JgeBRQFxVjAHaHo?r=0&pid=Api&h=220&P=0",
      "width": 1551,
      "height": 1600,
      "fileSize": null,
      "yahooImagesUrl": "https://images.search.yahoo.com/search/images;_ylt=A2RRWreO_LlqFQMAB4GJzbkF;_ylu=Y29sbwN1cy1lYXN0LTEEcG9zAzIEdnRpZAMEc2VjA3Ny?p=eiffel+tower&imgurl=https%3A%2F%2Fcdn.britannica.com..."
    }
  ]
}

Lire la documentation de l'API

Questions fréquentes

Scrapers similaires