Lebensmittel & Lieferung

Woolworths Scraper

woolworths.com.au

Woolworths ist eine der beiden größten Supermarktketten Australiens, und die Daten hinter woolworths.com.au stehen hinter Akamai Bot Manager. Ein dedizierter Plugin-Endpoint liest dasselbe JSON, das die Woolworths-Website lädt, und gibt die Produkte bereits geparst zurück. mode=search nimmt einen Suchbegriff, mode=category einen Kategorie-Link, -Pfad oder eine Kategorie-ID und mode=specials eine Angebotsseite: standardmäßig Half Price, oder Lower Shelf Price, Everyday Low Price, Seasonal Price, Buy More Save More oder Online Only Specials. Jedes Produkt kommt mit seinem Stockcode, Namen, Marke, Größe, Link und Barcode, dem Preis und einem etwaigen Streichpreis mit der Ersparnis, der Aktion (Half Price, Special, Multibuy mit Menge und Preis oder ein anderes Angebot), dem Grundpreis, der Verkaufseinheit, Bestand und Verfügbarkeit, dem Kauflimit, Neu- und Sponsored-Kennzeichen, dem Bild, seinen Kategorien, dem Health Star Rating und der Bewertung. Sortiere nach Relevanz, Preis, Grundpreis oder Name, behalte nur Produkte im Angebot und sammle bis zu 360 Produkte pro Call bei 36 pro Seite. mode=product nimmt einen Stockcode oder Produktlink und ergänzt Beschreibung, Zutaten, Allergene, Ernährungsangaben, die Nährwerttabelle pro Portion und pro 100 g oder ml, Portionsgröße, Lagerung, Herkunftsland, Abteilung und Gang, alle Bilder und Varianten. Die Preise sind die Online-Preise von Woolworths in AUD. Es braucht weder ein Woolworths-Konto noch einen Login oder einen API-Schlüssel.

Was Sie extrahieren können

• Stockcode, Name, Marke, Größe, Produktlink und Barcode
• Preis, Streichpreis und Ersparnis sowie der Grundpreis (zum Beispiel 1,70 $ pro 1 l)
• Aktion: Half Price, Special, Multibuy mit Menge und Preis oder ein anderes Angebot
• Bestand, Verfügbarkeit, Kauflimit, Verkaufseinheit sowie Neu- und Sponsored-Kennzeichen
• Bild, Kategorien, Health Star Rating und Bewertung
• Such-, Kategorie- und Angebotslisten (Half Price, Lower Shelf Price, Buy More Save More und mehr), sortiert nach Relevanz, Preis, Grundpreis oder Name; bis zu 360 Produkte pro Call
• Produktdetail: Beschreibung, Zutaten, Allergene, Ernährungsangaben, Nährwerttabelle pro Portion und pro 100 g oder ml, Portionsgröße, Lagerung und Herkunftsland
• Produktdetail: Abteilung, Gang, alle Bilder und Varianten

Dedizierte Endpoints

So wird es gescrapt

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/groceries/woolworths?mode=search&query=milk"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/groceries/woolworths",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"mode": "search", "query": "milk"},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.woolworthsSearch('milk', {
  sort: 'unit_price_asc',
  maxResults: 72,
});
const product = await su.woolworthsProduct('888137');
console.log(results);
console.log(product);

Requests sind POST und übergeben ihre Parameter im Query-String. Browser-Rendering findet immer statt - dafür gibt es kein Flag.

Beispielantwort

{
  "mode": "search",
  "query": "milk",
  "category": null,
  "sort": "relevance",
  "specialsOnly": false,
  "totalResults": 2391,
  "totalPages": 67,
  "page": 1,
  "pageSize": 36,
  "nextPage": 3,
  "resultsCollected": 36,
  "products": [
    {
      "id": "88436",
      "name": "Dairy Farmers Full Cream Milk 2L",
      "brand": "Dairy Farmers",
      "size": "2L",
      "url": "https://www.woolworths.com.au/shop/productdetails/88436/dairy-farmers-full-cream-milk-full-cream-milk",
      "barcode": "9310199012717",
      "price": 4.7,
      "wasPrice": null,
      "currency": "AUD",
      "onSale": false,
      "savings": null,
      "promotion": null,
      "unitPrice": { "price": 2.35, "per": "1L", "text": "$2.35 / 1L" },
      "soldBy": "Each",
      "inStock": true,
      "available": true,
      "purchaseLimit": 36,
      "isNew": false,
      "onlineOnly": false,
      "sponsored": true,
      "image": "https://cdn1.woolworths.media/content/wowproductimages/large/088436.jpg",
      "categories": [ "Container Bonus Credits", "Dairy, Eggs & Fridge", "Milk", "Full Cream Milk" ],
      "healthStarRating": 4.0,
      "rating": null
    },
    {
      "id": "204746",
      "name": "Pauls Smarter White Low Fat Milk 2L",
      "brand": "Pauls",
      "size": "2L",
      "url": "https://www.woolworths.com.au/shop/productdetails/204746/pauls-smarter-white-low-fat-milk",
      "barcode": "9310036039488",
      "price": 4.6,
      "wasPrice": 4.95,
      "currency": "AUD",
      "onSale": true,
      "savings": 0.35,
      "promotion": { "type": "special", "text": "Save $0.35" },
      "unitPrice": { "price": 2.3, "per": "1L", "text": "$2.30 / 1L" },
      "soldBy": "Each",
      "inStock": true,
      "available": true,
      "purchaseLimit": 10,
      "isNew": false,
      "onlineOnly": false,
      "sponsored": true,
      "image": "https://cdn1.woolworths.media/content/wowproductimages/large/204746.jpg",
      "categories": [
        "Dairy, Eggs & Fridge",
        "Milk",
        "Skim & Reduced Fat Milk",
        "Full Cream Milk",
        "Soy & Speciality Milk"
      ],
      "healthStarRating": null,
      "rating": null
    }
  ],
  "pagesFetched": 2,
  "suggestedTerm": null
}

API-Dokumentation lesen

Häufige Fragen

Ähnliche Scraper

Woolworths sowie weitere Namen und Marken von woolworths.com.au gehören ihrem Inhaber und werden hier nur verwendet, um die Website zu bezeichnen, mit der diese API arbeitet. ScrapeUnblocker ist ein unabhängiger Dienst und steht in keiner Verbindung zum Inhaber von woolworths.com.au, der ScrapeUnblocker weder unterstützt noch sponsert.