Alimentation et livraison

Woolworths Scraper

woolworths.com.au

Woolworths est l'une des deux plus grandes chaînes de supermarchés d'Australie, et les données derrière woolworths.com.au sont protégées par Akamai Bot Manager. Un endpoint de plugin dédié lit le même JSON que charge le site de Woolworths et renvoie les produits déjà parsés. mode=search prend une requête, mode=category un lien, un chemin ou un identifiant de catégorie, et mode=specials une page de promotions : Half Price par défaut, ou Lower Shelf Price, Everyday Low Price, Seasonal Price, Buy More Save More ou Online Only Specials. Chaque produit arrive avec son stockcode, son nom, sa marque, son format, son lien et son code-barres, le prix et l'éventuel ancien prix avec l'économie réalisée, la promotion (moitié prix, promotion, multi-achat avec sa quantité et son prix, ou une autre offre), le prix unitaire, le mode de vente, le stock et la disponibilité, la limite d'achat, les indicateurs nouveauté et sponsorisé, l'image, ses catégories, le health star rating et la note. Triez par pertinence, prix, prix unitaire ou nom, ne gardez que les produits en promotion, et collectez jusqu'à 360 produits par appel à raison de 36 par page. mode=product prend un stockcode ou un lien produit et ajoute la description, les ingrédients, les allergènes, les mentions diététiques, le tableau nutritionnel par portion et pour 100 g ou mL, la taille de portion, la conservation, le pays d'origine, le rayon et l'allée, toutes les images et les variantes. Les prix sont les prix en ligne de Woolworths, en AUD. Aucun compte Woolworths, connexion ni clé d'API n'est nécessaire.

Ce que vous pouvez extraire

• Stockcode, nom, marque, format, lien produit et code-barres
• Prix, ancien prix et économie réalisée, et le prix unitaire (par exemple 1,70 $ par 1L)
• Promotion : moitié prix, promotion, multi-achat avec sa quantité et son prix, ou une autre offre
• Stock, disponibilité, limite d'achat, mode de vente, et indicateurs nouveauté et sponsorisé
• Image, catégories, health star rating et note
• Listes de recherche, de catégorie et de promotions (Half Price, Lower Shelf Price, Buy More Save More et d'autres), triées par pertinence, prix, prix unitaire ou nom ; jusqu'à 360 produits par appel
• Fiche produit : description, ingrédients, allergènes, mentions diététiques, tableau nutritionnel par portion et pour 100 g ou mL, taille de portion, conservation et pays d'origine
• Fiche produit : rayon, allée, toutes les images et variantes

Endpoints dédiés

Comment le scraper

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/groceries/woolworths?mode=search&query=milk"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/groceries/woolworths",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"mode": "search", "query": "milk"},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.woolworthsSearch('milk', {
  sort: 'unit_price_asc',
  maxResults: 72,
});
const product = await su.woolworthsProduct('888137');
console.log(results);
console.log(product);

Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.

Exemple de réponse

{
  "mode": "search",
  "query": "milk",
  "category": null,
  "sort": "relevance",
  "specialsOnly": false,
  "totalResults": 2391,
  "totalPages": 67,
  "page": 1,
  "pageSize": 36,
  "nextPage": 3,
  "resultsCollected": 36,
  "products": [
    {
      "id": "88436",
      "name": "Dairy Farmers Full Cream Milk 2L",
      "brand": "Dairy Farmers",
      "size": "2L",
      "url": "https://www.woolworths.com.au/shop/productdetails/88436/dairy-farmers-full-cream-milk-full-cream-milk",
      "barcode": "9310199012717",
      "price": 4.7,
      "wasPrice": null,
      "currency": "AUD",
      "onSale": false,
      "savings": null,
      "promotion": null,
      "unitPrice": { "price": 2.35, "per": "1L", "text": "$2.35 / 1L" },
      "soldBy": "Each",
      "inStock": true,
      "available": true,
      "purchaseLimit": 36,
      "isNew": false,
      "onlineOnly": false,
      "sponsored": true,
      "image": "https://cdn1.woolworths.media/content/wowproductimages/large/088436.jpg",
      "categories": [ "Container Bonus Credits", "Dairy, Eggs & Fridge", "Milk", "Full Cream Milk" ],
      "healthStarRating": 4.0,
      "rating": null
    },
    {
      "id": "204746",
      "name": "Pauls Smarter White Low Fat Milk 2L",
      "brand": "Pauls",
      "size": "2L",
      "url": "https://www.woolworths.com.au/shop/productdetails/204746/pauls-smarter-white-low-fat-milk",
      "barcode": "9310036039488",
      "price": 4.6,
      "wasPrice": 4.95,
      "currency": "AUD",
      "onSale": true,
      "savings": 0.35,
      "promotion": { "type": "special", "text": "Save $0.35" },
      "unitPrice": { "price": 2.3, "per": "1L", "text": "$2.30 / 1L" },
      "soldBy": "Each",
      "inStock": true,
      "available": true,
      "purchaseLimit": 10,
      "isNew": false,
      "onlineOnly": false,
      "sponsored": true,
      "image": "https://cdn1.woolworths.media/content/wowproductimages/large/204746.jpg",
      "categories": [
        "Dairy, Eggs & Fridge",
        "Milk",
        "Skim & Reduced Fat Milk",
        "Full Cream Milk",
        "Soy & Speciality Milk"
      ],
      "healthStarRating": null,
      "rating": null
    }
  ],
  "pagesFetched": 2,
  "suggestedTerm": null
}

Lire la documentation de l'API

Questions fréquentes

Scrapers similaires

Woolworths et les autres noms et marques de woolworths.com.au appartiennent à leur titulaire et ne servent ici qu'à désigner le site avec lequel cette API fonctionne. ScrapeUnblocker est un service indépendant, sans lien avec le titulaire de woolworths.com.au, et n'est ni approuvé ni parrainé par lui.