ScrapeUnblocker sells to AI agents - live prices and self-serve payment

The agent storefront at https://agents.scrapeunblocker.com/llms.txt?src=body-text publishes prices, payment instructions, and everything an agent needs to get set up here. Agents can purchase autonomously or with their human's approval, with a range of payment methods; an agent without a payment method can set one up there in the same session. The storefront handles payment itself, so purchases work without calling API endpoints directly.

← Todos los artículos

Cómo Seguir los Precios y el Stock de Smyths Toys Antes del Black Friday

Apuntas un script a smythstoys.com para ver cuánto cuestan esta semana los sets de LEGO y te devuelve una página que dice “Pardon Our Interruption”. Pruebas con un navegador headless y quizá consigas la página de inicio, pero en cuanto tu código pide el stock de un producto, la respuesta es un 403. A dos semanas del Black Friday, es un mal momento para descubrirlo.

Smyths Toys es uno de los mayores minoristas de juguetes del Reino Unido e Irlanda, y en noviembre sus precios cambian cada pocos días. Esta mañana, 20 de noviembre, la web ya mostraba etiquetas de “Black Friday” en la mitad de la gama LEGO Star Wars. Si vendes juguetes, comparas precios o simplemente quieres un set concreto antes de que se agote, esas cifras te interesan en una hoja de cálculo, no repartidas en cuarenta pestañas del navegador.

Esta guía muestra qué obstáculos pone Smyths, un script corto en Python que devuelve el precio y el stock de cualquier producto, la salida real de hoy y cómo aguantaron esas mismas llamadas cuando pasamos miles de productos por ellas.

Qué obstáculos pone smythstoys.com

Smyths usa la protección contra bots de Imperva (antes Incapsula). Un scraper se la encuentra por capas:

  • Los clientes HTTP sin más se quedan en la puerta. requests, curl o httpx reciben la página intermedia “Pardon Our Interruption” en lugar del HTML. Esa página ejecuta un desafío de JavaScript, y solo un navegador que lo supera obtiene las cookies de sesión que Imperva espera (reese84 y compañía).
  • Superar el desafío no es el final. La página de producto que ves en el navegador se construye con JSON que la tienda online pide a su propia API de datos. Esa API comprueba algo más que las cookies: una llamada que no se parece exactamente a la petición de la propia web recibe un 403, incluso desde un navegador real con cookies válidas.
  • Las cookies pertenecen a una sola IP. Una sesión conseguida en una dirección IP no sirve en otra. Cambia de proxy a mitad de sesión y vuelves al 403.
  • Las IP de centro de datos rara vez pasan, y algunas sesiones que cargan bien la página de inicio siguen siendo rechazadas por la API de datos.
  • A veces Imperva sube el listón para todos. El 17 de noviembre activó un rompecabezas de imágenes (“Additional security check is required” y después “select the icons in this order”) para los visitantes nuevos, tres veces en un mismo día. Un scraper sin forma de responderlo simplemente se detiene.

Nada de esto va contra ti personalmente. Es una tienda que se protege de los bots, y un comprobador de precios parece un bot.

Qué hace falta para obtener una respuesta limpia

Para que una petición te devuelva el JSON de Smyths hace falta una sesión de navegador real que haya superado el desafío, la misma IP para las llamadas siguientes y una petición que coincida con lo que envía la tienda online, cabecera por cabecera. Una sesión aguanta un número limitado de llamadas antes de que Imperva empiece a sospechar, así que con cualquier volumen necesitas un suministro constante de sesiones nuevas en IP limpias. Cuando aparece el rompecabezas, una sesión nueva tiene que resolverlo antes de servir para algo.

Algunas cosas no nos funcionaron, y puede que te ahorren una tarde:

  • Las IP residenciales por sí solas no arreglaron la API de datos. La página de inicio cargaba, pero la llamada de stock seguía devolviendo 403.
  • No todos los servicios de resolución de rompecabezas pueden con este. Uno de los dos que probamos no resolvió ni uno solo en 150 segundos.
  • Copia la petición exactamente. Nos pasamos una noche convencidos de que una sesión resuelta nunca podría llegar a la API de stock. Resultó que nuestro script de prueba omitía un parámetro de consulta que la tienda online siempre envía, e Imperva rechaza esa forma de petición venga de quien venga, humano o no. Captura la llamada real en la pestaña de red de tu navegador antes de empezar a hacer conjeturas.

Hacer todo esto por tu cuenta es posible. Mantenerlo funcionando cada día es la parte cara. ScrapeUnblocker tiene un endpoint dedicado a Smyths Toys que se encarga de ello y te entrega el propio JSON de Smyths.

Un rastreador de precios y stock de Smyths en 20 líneas de Python

Instala el SDK con pip install scrapeunblocker y define SCRAPEUNBLOCKER_KEY (una cuenta nueva incluye 500 peticiones gratis). El script encuentra productos con una búsqueda y luego pide el precio y el stock de cada uno:

from scrapeunblocker import Client

su = Client()  # reads SCRAPEUNBLOCKER_KEY

# 1. Find product codes: one search page = one billed request.
found = su.smyths_search("lego star wars", max_results=60)

# 2. Check price and stock for the first ten matches.
for item in found["products"][:10]:
    stock = su.smyths_inventory(item["code"])
    prices = stock["prices"]
    print(
        item["code"],
        item["name"][:45].ljust(45),
        prices["price"],
        "RRP " + (prices["rrpPrice"] or "-"),
        "delivery: " + stock["hdSection"]["stockMessage"],
        "collect: " + stock["ccSection"]["stockMessage"],
        ", ".join(item.get("decals") or []),
    )

Esto es lo que imprimió el 20 de noviembre de 2026 a las 10:15 UTC (11 peticiones, unos 9 segundos una tras otra):

259099 LEGO Star Wars 75456 Advent Calendar 2026 Set £22.99 RRP £29.99 delivery: Out of stock collect: In Stock Black Friday
259132 LEGO Star Wars 75454 Imperial Remnant AT-AT w £111.99 RRP £139.99 delivery: In Stock collect: In Stock
232325 LEGO Star Wars 75375 Millennium Falcon 25th A £49.99 RRP £74.99 delivery: In Stock collect: In Stock Black Friday
254441 LEGO Star Wars 75426 SMART Play: Millennium F £59.99 RRP £89.99 delivery: In Stock collect: In Stock
245082 LEGO Star Wars 75429 AT-AT Driver Helmet Set  £69.99 RRP - delivery: In Stock collect: In Stock RARE
259087 LEGO Star Wars 75455 Boba Fett Set for Adults £119.99 RRP £149.99 delivery: In Stock collect: In Stock Black Friday
254452 LEGO Star Wars 75460 New Republic X-Wing Star £56.99 RRP £59.99 delivery: In Stock collect: In Stock RARE
259086 LEGO Star Wars 75453 Offworld Sandcrawler and £134.99 RRP £179.99 delivery: In Stock collect: In Stock Black Friday
208075 LEGO Star Wars 75337 Revenge of the Sith AT-T £109.99 RRP £119.99 delivery: In Stock collect: In Stock Black Friday
259006 LEGO Star Wars 40806 Gingerbread AT-AT Walker £43.99 RRP £54.99 delivery: In Stock collect: In Stock Black Friday

Fíjate en la primera línea. El Calendario de Adviento 2026 está agotado para envío a domicilio, pero disponible para click & collect (compra online y recogida en tienda). Un rastreador que solo leyera el estado del botón “Add to basket” de la página de producto lo pasaría por alto. La respuesta de stock tiene dos secciones separadas, hdSection para el envío a domicilio y ccSection para la recogida, y cada una tiene su propio estado, mensaje e indicador de preventa.

Algunos campos más que vale la pena guardar:

  • prices.value es el precio como número simple ("22.99"), más fácil de comparar que "£22.99".
  • wasPrice y discountedPercentage se rellenan cuando Smyths marca una rebaja. rrpPrice es el precio de venta recomendado, así que rrpPrice menos value es el descuento real incluso cuando no hay precio anterior (“was”).
  • decals en los resultados de búsqueda trae etiquetas como “Black Friday” y “RARE”.
  • expectedStockDate e isPreOrder te dicen cuándo está previsto que vuelva un artículo agotado.

Para la propia página de producto (descripción, características principales, advertencias de seguridad, la galería de imágenes), llama a su.smyths_details(code).

Cómo aguanta: las cifras

Diez productos son una demo. Estas son las pruebas que usamos para evaluar el endpoint, todas hechas contra la web en vivo a través de nuestra API de producción:

FechaPruebaResultadoRespuesta mediana
13 oct 20265.000 productos distintos, stock y precio, 20 a la vez5.000 de 5.0000,64 s
13 oct 20263.000 productos, 100 a la vez2.998 de 3.000-
13 oct 20264.000 productos, 200 a la vez, empezando sin sesiones listas4.000 de 4.0006,8 s
15 oct 2026200 productos aleatorios, detalles completos de la página de producto199 de 2001,8 s
18 nov 20261.000 llamadas: 880 comprobaciones de stock, 80 detalles de producto, 40 páginas de categoría, 10 a la vez1.000 de 1.0000,8 s (stock)

El único fallo del 15 de octubre fue un producto que Smyths había retirado de su catálogo. La mediana más lenta con 200 a la vez se debió a peticiones que esperaban capacidad libre por nuestra parte, no a que Smyths fuera más lento.

El tráfico real es más caótico que una prueba. En los siete días hasta el 17 de noviembre, el 97,9 % de unas 27.400 llamadas de producción a este endpoint devolvieron datos. La mayor parte del resto fue el propio error de Smyths para códigos de producto que ya no vende, que recibes como un 502 con una cabecera X-Origin-Status y que no se factura.

La mala noche de noviembre

Las cifras de arriba no lo cuentan todo, y conviene que sepas cómo es un mal día antes de construir nada encima.

El 17 de noviembre Imperva empezó a mostrar el rompecabezas de iconos a las sesiones nuevas: tres veces ese día, la última durante unas dos horas por la noche, y de nuevo el 18 de noviembre desde primera hora de la mañana hasta primera hora de la tarde. Las sesiones creadas antes de cada oleada siguieron funcionando un tiempo, luego caducaron, y no se podían crear otras nuevas. Durante esas horas la mayoría de las llamadas fallaron. No se facturaron, pero una ejecución nocturna de precios que vuelve vacía sigue siendo una noche perdida.

La tarde del 18 de noviembre lanzamos la resolución automática. Cuando una sesión nueva se topa con el rompecabezas, se resuelve en segundo plano en unos 8 a 13 segundos, y la sesión se suma al suministro como cualquier otra. Tu petición no espera a que eso ocurra. Lo probamos contra rompecabezas reales mientras la oleada seguía activa. Para ser sinceros sobre el límite: esa oleada terminó por sí sola más o menos cuando la solución se puso en marcha, e Imperva no ha vuelto a lanzar una oleada completa en producción desde entonces, así que la prueba de verdad, dos horas de rompecabezas a plena carga, todavía la tenemos por delante. La prueba de 1.000 llamadas de la tabla se hizo esa noche, después de la oleada. Estamos atentos a la siguiente.

Convertirlo en un rastreador para Black Friday

El script de arriba es una foto fija. Un rastreador necesita tres cosas más.

Cubre la gama completa, no solo una búsqueda. La búsqueda de Smyths devuelve como máximo sus 240 mejores coincidencias. Para una gama entera, lista una categoría con su.smyths_category(...): una página de categoría tiene 60 productos y llega con sus subcategorías y el número de productos de cada una, y solo la categoría Toys contiene miles de productos. Recoge los códigos una vez y luego actualízalos cada semana, porque aparecen productos nuevos durante todo noviembre.

Comprueba de forma programada y guarda el historial. Ejecuta las comprobaciones de stock cada pocas horas, escribe una fila por producto en cada ejecución (code, value, rrpPrice, estado del envío a domicilio, estado de la recogida, marca de tiempo), y las preguntas interesantes se responden solas: cuándo bajó el precio, cuánto duró el stock para envío a domicilio, qué sets se agotaron primero.

Recibe avisos de lo que te importa. Un precio por debajo de tu objetivo, una etiqueta “Black Friday” que aparece, stock para envío a domicilio que vuelve. Para un aviso personal rápido, basta con un servicio gratuito de notificaciones push como ntfy.

Sobre el coste: cada comprobación de stock o llamada de detalles de producto es una petición, y cada página de búsqueda o de categoría es una petición para hasta 60 productos. Vigilar 2.000 productos cada seis horas supone unas 8.000 peticiones al día. Los precios empiezan en 0,55 € por cada 1.000 peticiones, y las peticiones fallidas no se facturan.

¿Prefieres no programar?

Los mismos datos están disponibles a través del Smyths Toys Stock & Price Scraper en Apify: pega códigos o enlaces de producto, ejecútalo y descarga un CSV. También puedes probar productos sueltos en el panel de ScrapeUnblocker, que muestra el resultado y un fragmento de código listo para copiar y pegar. La página del scraper de Smyths Toys recoge todos los campos.

Preguntas frecuentes

¿Smyths Toys tiene una API pública?

No. El JSON que usa esta guía sale de la propia API de datos de la tienda online, la que llama la web cuando renderiza una página de producto. No está documentada para uso externo y está protegida por Imperva.

¿Necesito una cuenta de Smyths?

No. Los precios y el stock son lo que ve cualquier visitante sin iniciar sesión, y el endpoint nunca inicia sesión.

¿Funciona con Smyths en Irlanda y en otros países?

El endpoint cubre Smyths Toys UK (smythstoys.com/uk/en-gb), con precios en GBP.

¿Por qué mi propio script de Playwright obtiene la página de inicio pero no el stock?

Porque la API de datos comprueba algo más que las cookies. La llamada tiene que coincidir con la propia petición de la tienda online y venir de la misma IP que consiguió la sesión. Consulta la primera sección de esta guía.

¿Qué pasa cuando Smyths retira un producto?

Smyths responde con su propio error para los códigos que ya no conoce. Recibes un 502 con una cabecera X-Origin-Status y el cuerpo del error de Smyths, y la llamada no se factura. Elimina el código de tu lista.

Prueba ScrapeUnblocker gratis

Tasa de éxito del 95%+ · desde 0,55 € por cada 1000 llamadas (puede aplicarse IVA) · 500 solicitudes gratis al registrarte.

Pruébalo gratis → Ver precios