ScrapeUnblocker sells to AI agents - live prices and self-serve payment

The agent storefront at https://agents.scrapeunblocker.com/llms.txt?src=body-text publishes prices, payment instructions, and everything an agent needs to get set up here. Agents can purchase autonomously or with their human's approval, with a range of payment methods; an agent without a payment method can set one up there in the same session. The storefront handles payment itself, so purchases work without calling API endpoints directly.

Todos los scrapers

E-commerce

Bed Bath & Beyond Scraper

bedbathandbeyond.com

99.7% Tasa de éxito
3s Respuesta media
Akamai Bot Manager Protección
1040 llamadas Medido sobre

La web de Bed Bath & Beyond la gestiona Beyond, Inc. (antes Overstock) y está protegida por Akamai Bot Manager, que rechaza de entrada las identidades de navegador de escritorio en las páginas de producto y aprende del volumen: una sola identidad que lleva todo el tráfico queda bloqueada en menos de una hora. El plugin bedbathandbeyond-search devuelve lo que el sitio muestra para una palabra clave, ya procesado: para cada producto el id de producto y el SKU, el título, el enlace y la imagen, el precio y el máximo del rango cuando las opciones tienen precios distintos, la etiqueta del precio (oferta o estándar), el precio de referencia con su tipo (MSRP, compare at o precio anterior), el descuento, el precio habitual, la valoración y el número de reseñas, el número de opciones, la insignia como Best Seller, el indicador de entrega rápida, el importe de Welcome Rewards y si el anuncio es patrocinado. Ordena por relevancia, ofertas, más vendidos, precio, valoración o novedad, empieza en cualquier página de unos 60 productos y recoge hasta 300 en una llamada; una palabra clave que el sitio envía a una página de departamento, como rugs o sofa, devuelve el listado de ese departamento e indica adónde fue. El plugin bedbathandbeyond-product acepta un id de producto o un enlace y devuelve la página de producto completa: el precio con su etiqueta, el precio de referencia, el ahorro, el stock, la valoración con su histograma, la descripción, las especificaciones, la ruta de navegación, el país de origen, las imágenes y los vídeos, y hasta 100 opciones (talla, color), cada una con su precio, su precio habitual y de referencia, el indicador de oferta y las unidades disponibles. Los precios son los que ve un comprador sin iniciar sesión.

Qué puedes extraer

  • Id de producto y SKU, título, enlace del producto e imagen
  • Precio y máximo de un rango de precios, texto y tipo de precio (oferta o estándar), moneda (USD)
  • Precio de referencia con su tipo (MSRP, compare at, precio anterior), porcentaje de descuento, precio habitual y ahorro
  • Valoración y número de reseñas; histograma de valoraciones en la página de producto
  • Número de opciones, insignia (p. ej. Best Seller), indicador de entrega rápida, importe de Welcome Rewards, indicador de patrocinado
  • Búsqueda ordenada por relevancia, ofertas, más vendidos, precio, valoración o novedad, desde cualquier página, hasta 300 productos por llamada; sigue las redirecciones a departamentos
  • Detalle de producto: etiqueta del precio, precio de referencia, ahorro, stock, descripción, especificaciones, ruta de navegación, país de origen, imágenes y vídeos
  • Hasta 100 opciones por producto (talla, color) con el precio de cada opción, su precio habitual y de referencia y las unidades disponibles

Endpoints dedicados

/marketplace/bedbathandbeyond-search

Búsqueda de productos en Bed Bath & Beyond

Productos que coinciden con query en bedbathandbeyond.com. Devuelve query, sort, page, url, redirectedTo (la página de departamento cuando el sitio envía allí la palabra clave, cuyos productos se devuelven), currency, totalResults, lastPage, resultsCollected, pagesFetched, hasMore, nextPage y products con productId, sku, title, url, image, price, priceMax, priceText, priceType, currency, comparePrice, compareType, discountPercent, regularPrice, hasOptions, optionCount, rating, reviewCount, badge, onSale, fastDelivery, rewards, sponsored y position. sort es relevance, on_sale, best_selling, price_low, price_high, rating o newest; page empieza en una página de unos 60; max_results es 1-300, y cada página obtenida es una petición. url acepta un enlace de búsqueda de bedbathandbeyond.com en lugar de query.

/marketplace/bedbathandbeyond-product

Página de producto de Bed Bath & Beyond

Un producto por product (un id de producto como 5296998 o un enlace de producto). Devuelve product con productId, sku, url, title, brand, brandUrl, manufacturerPartNumber, price, priceLabel, comparePrice, compareLabel, savings, savingsPercent, currency, inStock, rating, reviewCount, ratingHistogram, badge, shortDescription, description, countryOfOrigin, freeShipping, internationalShipping, firstListed, breadcrumbs, specifications (group, name, value), optionCount, defaultOptionId, options (hasta 100: optionId, title, attributes, price, regularPrice, comparePrice, onSale, inStock, quantityAvailable, lowStockMessage), images y videos. Un producto desconocido devuelve 404.

Cómo rastrearlo

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/marketplace/bedbathandbeyond-search?query=bath%20towels"
import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/marketplace/bedbathandbeyond-search",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"query": "bath towels"},
)
print(resp.text)
import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.bedbathandbeyondSearch('bath towels', {
  sort: 'price_low',
  maxResults: 60,
});
const product = await su.bedbathandbeyondProduct('5296998');
console.log(results);
console.log(product);

Las peticiones son POST y sus parámetros van en la query string. El renderizado en navegador siempre ocurre: no hay ningún flag que activar.

Ejemplo de respuesta

{
  "query": "bath towels",
  "sort": "relevance",
  "page": 1,
  "url": "https://www.bedbathandbeyond.com/search?keywords=bath+towels",
  "redirectedTo": null,
  "currency": "USD",
  "totalResults": 7467,
  "lastPage": 84,
  "resultsCollected": 1,
  "pagesFetched": 1,
  "lastPageFetched": 1,
  "hasMore": true,
  "nextPage": 2,
  "products": [
    {
      "productId": "5296998",
      "sku": "13108204",
      "title": "Superior Egyptian Cotton 6 Piece Towel Set Ultra Plush & Absorbent Bath, Hand & Face Towels, Heavyweight Spa Quality",
      "url": "https://www.bedbathandbeyond.com/Bedding-Bath/Superior-Egyptian-Cotton-900-GSM-Luxurious-Absorbent-6-piece-Towel-Set/5296998/product.html",
      "image": "https://ak1.ostkcdn.com/images/products/is/images/direct/15ef7fbaa12ba11cc6ba217faeb85da4c8e5ae8b/Superior-Egyptian-Cotton-6-Piece-Towel-Set-Ultra-Plush-%26-Absorbent-Bath%2C-Hand-%26-Face-Towels%2C-Heavyweight-Spa-Quality.jpg",
      "price": 63.98,
      "priceMax": 72.15,
      "priceText": "$63.98 - $72.15",
      "priceType": "SALE",
      "currency": "USD",
      "comparePrice": 157.5,
      "compareType": "MSRP",
      "discountPercent": 59,
      "regularPrice": 80.99,
      "hasOptions": true,
      "optionCount": 24,
      "rating": 4.52,
      "reviewCount": 3734,
      "badge": "Best Seller",
      "onSale": false,
      "fastDelivery": "twoDay",
      "rewards": 3.2,
      "sponsored": false,
      "position": 1
    }
  ]
}

Leer la documentación

Preguntas frecuentes

¿Es legal hacer scraping de Bed Bath & Beyond?

Recopilar datos públicos de Bed Bath & Beyond como nombres de productos, precios y valoraciones es lícito en muchas jurisdicciones, pero las normas dependen de tu país, de los datos que recopiles y de cómo los uses. ScrapeUnblocker devuelve los datos públicos de los productos; qué recopilas y cómo los usas es responsabilidad tuya.

¿Cómo hago scraping de Bed Bath & Beyond sin que me bloqueen?

Akamai Bot Manager protege bedbathandbeyond.com: responde a las identidades de navegador de escritorio en las páginas de producto con Access Denied y un desafío de comportamiento, y aprende del volumen, de modo que lo que lee páginas de producto una tras otra queda rechazado en menos de una hora. El plugin de búsqueda lee las páginas de resultados con varias identidades de Safari móvil en rotación y salidas nuevas, y recurre a un navegador real cuando son rechazadas; las páginas de departamento pasan siempre por el navegador. El plugin de producto no abre páginas de producto: un navegador real visita una página de departamento y esa sesión de Akamai lee después unas decenas de productos de los datos de producto del propio sitio, por salidas del mismo país, antes de que una nueva visita tome el relevo. En el benchmark de ScrapeUnblocker devolvió datos en el 99,7 % de 1.040 llamadas (620 búsquedas, cada una con un término, un orden o una página distintos, y 420 páginas de producto), con unos 3,5 s por búsqueda y 2,3 s por página de producto.

¿Qué datos de Bed Bath & Beyond puedo obtener?

Para cada producto de una búsqueda: el id de producto y el SKU, título, enlace e imagen, el precio y el máximo del rango, el tipo de precio, el precio de referencia y su tipo, el descuento, el precio habitual, la valoración y el número de reseñas, el número de opciones, la insignia, el indicador de entrega rápida, el importe de Welcome Rewards y si es patrocinado. El endpoint de producto añade la marca y la referencia del fabricante, la etiqueta del precio y el ahorro, el stock, el histograma de valoraciones, la descripción, las especificaciones, la ruta de navegación, el país de origen, imágenes, vídeos y hasta 100 opciones con el precio y las unidades disponibles de cada una.

¿Devuelve los precios que ven los miembros?

No. Los precios son los que bedbathandbeyond.com muestra a un comprador sin iniciar sesión, incluidos los precios de oferta y el precio de referencia. Los importes de Welcome Rewards se devuelven tal como el sitio los muestra en cada producto; los precios exclusivos para miembros no forman parte de la página pública.

¿Cuánto cuesta hacer scraping de Bed Bath & Beyond?

Una página de búsqueda de unos 60 productos es una petición, y una página de producto es una petición. 1 petición = 1 crédito, 1,00 EUR por cada 1.000 en Pay as you go, bajando hasta unos 0,55 EUR por cada 1.000 en el plan Ultimate. No se facturan los bloqueos ni los tiempos de espera agotados, y la prueba gratuita incluye 500 peticiones sin tarjeta.

Scrapers relacionados

Bed Bath & Beyond y los demás nombres y marcas de bedbathandbeyond.com pertenecen a su titular y aquí se usan solo para identificar el sitio web con el que funciona esta API. ScrapeUnblocker es un servicio independiente: no está afiliado al titular de bedbathandbeyond.com ni cuenta con su respaldo o patrocinio.

Empieza a rastrear este sitio hoy

Plan gratuito incluido. No necesitas tarjeta para probarlo.