Suchmaschinen

Yahoo Images Scraper

images.search.yahoo.com

Die Yahoo-Bildersuche liefert Ergebnisse aus dem Bildindex von Bing auf eigenen Seiten, mit einer regionalen Website für viele Länder. Ihr Raster lädt beim Scrollen weitere Kacheln nach und legt das Originalbild und die Quellseite jedes Ergebnisses in Attributen der Kachel ab, sodass eigenes Scraping bedeutet, die Seite zu rendern und jede Kachel auszulesen. Ein dedizierter Plugin-Endpoint nimmt ein Stichwort und gibt jedes Ergebnis bereits geparst zurück: die echte Bild-URL in voller Auflösung (kein Thumbnail), die Quelldomain und -seite, einen Titel und den Website-Namen, ein Thumbnail und die originalen Pixelmaße - ohne Raster, das du selbst rendern musst, und ohne Yahoo-Konto. proxy_country wählt Yahoos regionale Website (de.images.search.yahoo.com für DE) und den Exit, über den die Seite in einem echten Browser gerendert wird, und pages sammelt in einem Aufruf bis zu 10 Seiten mit je etwa 60 Bildern. Die Antwort spiegelt unsere Plugins für Google Bilder und Bing Bilder, sodass eine Pipeline alle verarbeitet.

Was Sie extrahieren können

• Die Original-Bild-URL in voller Auflösung auf der Website des Anbieters, für jedes Ergebnis
• Die Quelldomain und die URL der Quellseite, die das Bild anzeigt
• Den Ergebnistitel sowie die Website, die Yahoo dafür anzeigt
• Eine schnell ladende, von Bing gehostete Thumbnail-URL: die, die Yahoo in seinem Raster zeigt
• Original-Breite und -Höhe des Bildes in Pixeln
• Ein Viewer-Link der Yahoo-Bildersuche für jedes Ergebnis
• Etwa 60 Ergebnisse pro Seite, bis zu 10 Seiten pro Aufruf, von Yahoos regionaler Website für das Land, das du wählst

Dedizierte Endpoints

So wird es gescrapt

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/images/yahoo-search?q=eiffel%20tower&pages=1"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/images/yahoo-search",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"q": "eiffel tower", "pages": "1"},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.yahooImages('eiffel tower', {
  pages: 1,
});
console.log(results);

Requests sind POST und übergeben ihre Parameter im Query-String. Browser-Rendering findet immer statt - dafür gibt es kein Flag.

Beispielantwort

{
  "engine": "yahoo",
  "query": "eiffel tower",
  "gl": "us",
  "proxyCountry": "US",
  "resultsCollected": 60,
  "pagesFetched": 1,
  "hasMore": true,
  "results": [
    {
      "position": 1,
      "imageUrl": "https://cdn.britannica.com/54/75854-050-E27E66C0/Eiffel-Tower-Paris.jpg",
      "sourceDomain": "britannica.com",
      "sourcePageUrl": "https://www.britannica.com/topic/Eiffel-Tower-Paris-France",
      "title": "Eiffel Tower | History, Height, & Facts | Britannica",
      "sourceName": "www.britannica.com",
      "thumbnailUrl": "https://tse3.mm.bing.net/th/id/OIP.Z97bkX40h0DN2g8WwHpqJwHaLO?r=0&pid=Api&h=220&P=0",
      "width": 1056,
      "height": 1600,
      "fileSize": null,
      "yahooImagesUrl": "https://images.search.yahoo.com/search/images;_ylt=A2RRWreO_LlqFQMABYGJzbkF;_ylu=Y29sbwN1cy1lYXN0LTEEcG9zAzEEdnRpZAMEc2VjA3Ny?p=eiffel+tower&imgurl=https%3A%2F%2Fcdn.britannica.com..."
    },
    {
      "position": 2,
      "imageUrl": "https://cdn.britannica.com/52/245552-050-3D7334F9/Eiffel-Tower-Paris.jpg",
      "sourceDomain": "morilly.com",
      "sourcePageUrl": "https://morilly.com/blog/paris-attractions-eiffel-tower",
      "title": "Paris attractions eiffel tower 60 photos - Morilly.com",
      "sourceName": "morilly.com",
      "thumbnailUrl": "https://tse4.mm.bing.net/th/id/OIP.54RmpGCUWV9JgeBRQFxVjAHaHo?r=0&pid=Api&h=220&P=0",
      "width": 1551,
      "height": 1600,
      "fileSize": null,
      "yahooImagesUrl": "https://images.search.yahoo.com/search/images;_ylt=A2RRWreO_LlqFQMAB4GJzbkF;_ylu=Y29sbwN1cy1lYXN0LTEEcG9zAzIEdnRpZAMEc2VjA3Ny?p=eiffel+tower&imgurl=https%3A%2F%2Fcdn.britannica.com..."
    }
  ]
}

API-Dokumentation lesen

Häufige Fragen

Ähnliche Scraper