Automoción

Otomoto Scraper

otomoto.pl

Otomoto es el mayor marketplace de vehículos de Polonia y está protegido por Cloudflare. ScrapeUnblocker supera el desafío de Cloudflare una vez, obtiene la cookie cf_clearance y la reutiliza en toda la flota mediante curl_cffi, de modo que una tanda completa de 1000 llamadas mantiene el 100% a menos de cinco segundos por página. Cada anuncio devuelve la marca, el modelo, el precio y las características que compararía un comprador.

Qué puedes extraer

• Marca, modelo y versión
• Año de matriculación y kilometraje
• Precio y moneda
• Combustible, cambio y cilindrada
• Tipo de vendedor, ubicación y URL del anuncio

Cómo rastrearlo

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/getPageSource?url=https%3A%2F%2Fwww.otomoto.pl%2F&parsed_data=true"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/getPageSource",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"url": "https://www.otomoto.pl/", "parsed_data": True},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.getPageSource({
  url: 'https://www.otomoto.pl/',
  parsedData: true,
});
console.log(results);

Las peticiones son POST y sus parámetros van en la query string. El renderizado en navegador siempre ocurre: no hay ningún flag que activar.

Leer la documentación

Scrapers relacionados