Alimentation et livraison
Publix Scraper
publix.com
Publix présente son catalogue en ligne magasin par magasin : promotions, coupons et rayons dépendent du magasin choisi par le client, et publix.com ne sert ses pages qu'aux visiteurs situés aux États-Unis. Deux endpoints de plugin dédiés lisent les pages que Publix génère pour un magasin et renvoient les produits déjà analysés, pour le magasin indiqué avec store_id (un numéro de magasin Publix), le magasin le plus proche d'un zip ou, à défaut des deux, un magasin de Lakeland, en Floride ; la réponse indique toujours le magasin. publix-search renvoie 48 produits par page et jusqu'à 480 en un appel, chacun avec son identifiant produit et son code article Publix, titre, marque, format, lien et image et, tant que l'article est en promotion, son prix, le prix habituel qu'il remplace, le prix à la livre des articles vendus au poids et la promotion elle-même : Buy 1 Get 1 Free ou une offre avec son économie, ses conditions et ses dates de validité ; il indique aussi si un coupon numérique s'applique, le rayon et le chemin de catégories. Un mot-clé que Publix envoie vers une catégorie, comme milk, renvoie cette catégorie. publix-product accepte un identifiant produit ou un lien produit et ajoute la description, les ingrédients, les allergènes, le mode d'emploi, les badges affichés par Publix, le nombre de coupons et les produits associés. Publix ne publie un prix en ligne que pendant qu'un article est en promotion ; les articles hors promotion arrivent donc sans prix dans tous les magasins. Pour les prix courants de tous les articles, le plugin Instacart avec retailer=publix renvoie les prix de livraison de Publix, plus élevés qu'en magasin. Aucun compte Publix, aucune connexion ni clé d'API n'est nécessaire.
Ce que vous pouvez extraire
- Identifiant produit et code article Publix, titre, marque, format, lien du produit et image
- Prix et prix habituel des articles en promotion, prix à la livre des articles au poids (Publix ne publie pas de prix en ligne pour les autres articles)
- Promotion : type (Buy 1 Get 1 Free ou offre), texte, conditions, dates de validité et économie ; indicateur de coupon numérique
- Rayon dans le magasin choisi, catégorie et chemin de catégories
- Le magasin concerné : numéro, nom, adresse et téléphone, choisi par numéro de magasin, code ZIP ou magasin par défaut
- Recherche de 48 produits par page, jusqu'à 480 par appel, depuis n'importe quelle page ; redirections vers les catégories suivies
- Fiche produit : description, ingrédients, allergènes, mode d'emploi, badges, nombre de coupons et produits associés
Endpoints dédiés
/groceries/publix-search Recherche de produits sur Publix
Produits correspondant à query dans un magasin Publix : store_id (un numéro de magasin), le magasin le plus proche de zip ou un magasin de Lakeland, FL. Renvoie query, store (storeId, name, address, city, state, zip, phone), page, pageSize (48), totalResults, totalPages, nextPage, resultsCollected, redirectedTo (quand Publix envoie le mot-clé vers une catégorie, dont les produits sont renvoyés), sentElsewhere (true quand il l'envoie vers une page sans liste de produits, comme le prospectus de la semaine), url et products avec productId, itemCode, title, brand, size, url, image, price, priceText, unit, wasPrice, currency, onSale, promotion (type, message, conditions, validThrough, savings), hasCoupon, soldByWeight, aisle, category, categoryPath et storeId. price n'est renseigné que pour les articles en promotion, les seuls que Publix affiche avec un prix en ligne. page et max_results (1-480) permettent de paginer ; chaque page est une requête.
/groceries/publix-product Fiche produit Publix
Un produit via product (un identifiant produit Publix comme RIO-PCI-103438, son seul numéro ou un lien produit publix.com) dans store_id, le magasin le plus proche de zip ou le magasin par défaut. Renvoie store et product avec tous les champs de la recherche plus images, description, ingredients, directions, allergens, available, categories, badges, couponCount, smartLabelUrl et relatedProducts. Un produit inconnu, ou que le magasin ne vend pas, renvoie un 404.
Comment le scraper
curl -X POST \
-H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
"https://api.scrapeunblocker.com/groceries/publix-search?query=cereal&store_id=1614"import requests
resp = requests.post(
"https://api.scrapeunblocker.com/groceries/publix-search",
headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
params={"query": "cereal", "store_id": "1614"},
)
print(resp.text)import { ScrapeUnblockerClient } from 'scrapeunblocker';
const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });
const results = await su.publixSearch('cereal', {
storeId: '1614',
});
const product = await su.publixProduct('RIO-PCI-103438', {
zip: '33801',
});
console.log(results);
console.log(product); Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.
Exemple de réponse
{
"query": "cereal",
"store": {
"storeId": "1614",
"name": "3 Miami Central",
"address": "601 NW 2nd Ave",
"city": "Miami",
"state": "FL",
"zip": "33136",
"phone": "(305) 374-6806"
},
"page": 1,
"pageSize": 48,
"totalResults": 137,
"totalPages": 3,
"nextPage": 2,
"resultsCollected": 1,
"redirectedTo": "https://www.publix.com/c/cereals-and-granola/a09a497e-8647-45bc-8eb6-89f50e99b2de",
"url": "https://www.publix.com/search?searchTerm=cereal&srt=products",
"correctedQuery": null,
"pagesFetched": 1,
"products": [
{
"productId": "RIO-PCI-103365",
"itemCode": 8647,
"title": "Cheerios Honey Nut Cereal",
"brand": "Cheerios",
"size": "10.8 oz (306 g)",
"url": "https://www.publix.com/pd/cheerios-honey-nut-cereal/RIO-PCI-103365",
"image": "https://images.publixcdn.com/pct/images/products/5000/008647-600x600-A.jpg",
"price": 5.44,
"priceText": "$5.44",
"unit": null,
"wasPrice": null,
"currency": "USD",
"onSale": true,
"promotion": {
"type": "BOGO",
"message": "Buy 1 Get 1 Free",
"conditions": "of equal or lesser price",
"validThrough": "Valid 10/29-11/4",
"savings": 5.44
},
"hasCoupon": true,
"soldByWeight": false,
"aisle": "Aisle 2 - Cereal",
"category": "Cereals and Granola",
"categoryPath": [
"Grocery",
"Breakfast and Cereal",
"Cereals and Granola"
],
"storeId": "1614"
}
]
} Lire la documentation de l'API
Questions fréquentes
Est-il légal de scraper Publix ?
Collecter des données publiques de Publix comme les noms de produits, les formats et les promotions est licite dans de nombreuses juridictions, mais les règles dépendent de votre pays, des données collectées et de leur usage. ScrapeUnblocker renvoie les données produit publiques ; ce que vous collectez et la façon dont vous l'utilisez relèvent de votre responsabilité.
Comment scraper Publix sans être bloqué ?
Publix ne sert son site qu'aux visiteurs situés aux États-Unis, est protégé par Akamai Bot Manager, qui refuse sa propre API de recherche aux clients HTTP simples, et place de nombreuses fiches produit derrière une page intermédiaire Akamai avec preuve de travail. Les plugins /groceries/publix-search et /groceries/publix-product lisent les pages que Publix génère pour un magasin via des sorties FAI américaines, avec le magasin choisi comme publix.com l'enregistre, et répondent à la page intermédiaire comme la page elle-même, si bien qu'aucun navigateur n'est nécessaire. Dans le benchmark de ScrapeUnblocker, 99,8 % des 1 033 appels (613 recherches avec à chaque fois un terme différent dans l'un de 35 magasins ou ZIP, et 420 pages produit) ont renvoyé des données, en environ 3,6 s par appel.
Pourquoi certains produits Publix n'ont-ils pas de prix ?
Parce que Publix ne publie en ligne un prix magasin que pendant qu'un article est en promotion : le prix promotionnel, ou le prix habituel d'un article Buy 1 Get 1 Free, avec le prix habituel qu'il remplace. Aucun autre article n'a de prix sur publix.com, dans aucun magasin, donc price, priceText et currency valent null pour eux. Pour les prix courants de tous les articles, utilisez le plugin Instacart avec retailer=publix, qui renvoie les prix de livraison de Publix ; ils sont plus élevés que les prix en rayon.
Comment choisir un magasin Publix ?
Passez store_id, un numéro de magasin Publix comme 1614 (chaque réponse l'affiche dans store.storeId), ou zip, qui choisit le magasin Publix le plus proche. Sans l'un ni l'autre, un magasin de Lakeland, en Floride, est utilisé. Les promotions, coupons et rayons varient d'un magasin à l'autre, et la réponse indique toujours le magasin.
Faut-il un compte Publix ou une IP américaine ?
Aucun compte Publix, abonnement Club Publix ni connexion n'est nécessaire, ni adresse américaine de votre côté : les requêtes partent de sorties américaines chez nous, et le magasin vient de store_id ou de zip.
Combien coûte le scraping de Publix ?
Une page de recherche de 48 produits maximum est une requête, et une fiche produit est une requête. 1 requête = 1 crédit, 1,00 EUR les 1 000 en Pay as you go, jusqu'à environ 0,55 EUR les 1 000 avec le forfait Ultimate. Les blocages et les timeouts ne sont pas facturés, et l'essai gratuit comprend 500 requêtes sans carte.
Scrapers similaires
Publix et les autres noms et marques de publix.com appartiennent à leur titulaire et ne servent ici qu'à désigner le site avec lequel cette API fonctionne. ScrapeUnblocker est un service indépendant, sans lien avec le titulaire de publix.com, et n'est ni approuvé ni parrainé par lui.
Commencez à scraper ce site dès aujourd'hui
Palier gratuit inclus. Aucune carte bancaire requise pour tester.