E-commerce
idealo Scraper
idealo.de
idealo est le grand comparateur de prix européen, et ses sites en Allemagne, en Autriche, au Royaume-Uni, en France, en Italie et en Espagne sont servis par deux endpoints de plugin dédiés plutôt que par la récupération de page générique. Donnez à l'endpoint de recherche un mot-clé et un pays (comme 'kaffeevollautomat' sur idealo.de ou 'headphones' sur idealo.co.uk) et il renvoie les résultats d'idealo déjà analysés : identifiant produit, titre, les caractéristiques qu'idealo affiche, lien et image, le prix le plus bas, la boutique la moins chère avec ses frais de port et sa livraison, le nombre d'offres, la note en étoiles (arrondie à la demi-étoile par idealo) et le nombre d'avis, la note des tests presse, la classe énergétique, l'économie bon plan et le rang dans les meilleures ventes. Les offres de boutique isolées qu'idealo n'a pas rattachées à un produit sont signalées comme des offres. Triez par pertinence ou par prix croissant et récupérez jusqu'à 300 résultats en un appel, 60 par page idealo. L'endpoint des offres est celui dont les équipes de veille tarifaire ont besoin : donnez-lui un identifiant ou un lien produit et il renvoie le produit (titre, marque, images, fourchette de prix, nombre d'offres, note, points forts et points faibles, variantes) et toutes les offres de boutiques qu'idealo liste pour lui, de la moins chère à la plus chère : boutique, note de la boutique et nombre de notes, vendeur de la marketplace, titre du produit propre à la boutique, prix, frais de port et prix total, estimation de livraison, transporteurs, retours gratuits, moyens de paiement et lien de redirection vers la boutique, jusqu'à 200 offres par appel, 20 par requête. Aucun compte idealo n'intervient.
Ce que vous pouvez extraire
- Identifiant produit, titre, caractéristiques, lien, image et position dans les résultats
- Prix le plus bas, boutique la moins chère avec frais de port et livraison, nombre d'offres et indicateur occasion uniquement
- Note en étoiles (à la demi-étoile), nombre d'avis, note des tests presse, classe énergétique, économie bon plan et rang dans les meilleures ventes
- Recherche sur idealo.de, .at, .co.uk, .fr, .it ou .es par pertinence ou par prix croissant ; jusqu'à 300 résultats par appel
- Offres : toutes les offres des boutiques pour un produit, de la moins chère à la plus chère, jusqu'à 200 par appel
- Offre : boutique, note de la boutique et nombre de notes, vendeur de la marketplace, prix, frais de port, prix total, estimation de livraison, transporteurs, retours gratuits et moyens de paiement
- Produit sur la page des offres : marque, images, fourchette de prix, nombre d'offres, note, points forts et points faibles, et variantes avec leurs propres prix
Endpoints dédiés
/marketplace/idealo-search Une recherche de produits sur idealo
Les résultats de recherche idealo pour un mot-clé (query) sur un site : country vaut de (par défaut), at, uk, fr, it ou es. Un tableau products avec position, type (product ou offer), productId, offerId, title, subtitle, characteristics, url, image, lowestPrice, basePrice, offerCount, usedOnly, cheapestShop (id, name, shippingCost, delivery, freeReturnDays), rating, reviewCount, testGrade, energyClass, bargainSavingPercent, bestsellerRank, categoryId et variantOf, plus total, productCount, lastPage, pagesFetched, nextPage et currency. sort vaut relevance ou price_asc, page de 1 à 100 et max_results de 1 à 300 (60 par page, chaque page est une requête). Une recherche sans résultats répond 404.
/marketplace/idealo-offers Toutes les offres des boutiques pour un produit idealo
La comparaison de prix d'un produit par product_id (avec country) ou url (un lien de comparaison de prix idealo, dont le site prime) : productId, title, brand, url, images, lowestPrice, highestPrice, currency, offerCount, rating, reviewCount, pros, cons, variants (productId, name, gtin, lowestPrice, highestPrice, offerCount, url) et offers, de la moins chère à la plus chère, chacune avec position, offerKey, title, price, shippingCost, totalPrice, delivery, carriers, freeReturns, paymentMethods, shop (id, name, rating, ratingCount, marketplace, seller), variantId, variantName et url. max_results de 1 à 200 : les 20 premières offres arrivent avec le produit, chaque bloc supplémentaire de 20 est une requête de plus. Les offres sont les offres d'articles neufs qu'idealo affiche par défaut. Un produit inconnu répond 404.
Marketplaces pris en charge
Les prix sont renvoyés dans la devise locale de chaque marketplace, la sortie étant automatiquement rattachée à ce pays.
| Marketplace | Devise |
|---|---|
idealo.de | EUR |
idealo.at | EUR |
idealo.co.uk | GBP |
idealo.fr | EUR |
idealo.it | EUR |
idealo.es | EUR |
Comment le scraper
curl -X POST \
-H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
"https://api.scrapeunblocker.com/marketplace/idealo-search?query=kaffeevollautomat&country=de"import requests
resp = requests.post(
"https://api.scrapeunblocker.com/marketplace/idealo-search",
headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
params={"query": "kaffeevollautomat", "country": "de"},
)
print(resp.text)import { ScrapeUnblockerClient } from 'scrapeunblocker';
const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });
const results = await su.idealoSearch('kaffeevollautomat', {
country: 'de',
});
const offers = await su.idealoOffers('202691981', { maxResults: 40 });
console.log(results);
console.log(offers); Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.
Exemple de réponse
{
"productId": "202691981",
"title": "Philips LatteGo 5400 Series",
"brand": "Philips",
"url": "https://www.idealo.de/preisvergleich/OffersOfProduct/202691981_-lattego-5400-series-philips.html",
"images": [
"https://cdn.idealo.com/folder/Product/200474/6/200474612/s1_produktbild_max/philips-lattego-5400-series-ep5447-90.jpg",
"https://cdn.idealo.com/folder/Product/200474/6/200474619/s1_produktbild_max/philips-lattego-5400-series-ep5441-50.jpg"
],
"lowestPrice": 428.99,
"highestPrice": 949.0,
"currency": "EUR",
"offerCount": 38,
"rating": 4.67,
"reviewCount": 39,
"pros": [
"sehr einfache Bedienung",
"unkompliziertes Milchsystem",
"viele Kaffeespezialitäten und Individualeinstellungen"
],
"cons": [
"Milchbehälter etwas klein"
],
"variants": [
{
"productId": "200474612",
"name": "Philips LatteGo 5400 Series EP5447/90",
"gtin": "4251168330577",
"lowestPrice": 428.99,
"highestPrice": 624.01,
"offerCount": 23,
"url": "https://www.idealo.de/preisvergleich/OffersOfProduct/200474612_-lattego-5400-series-ep5447-90-philips.html"
}
],
"country": "de",
"offersCollected": 2,
"pagesFetched": 1,
"pagingStopped": null,
"offers": [
{
"offerKey": "66fbf5f693608a86f422fe74f53dddaa",
"title": "Philips EP5447/90 Series 5400",
"price": 428.99,
"shippingCost": 7.9,
"totalPrice": 436.89,
"delivery": "bis Mi. 04.11.",
"carriers": [
"DHL",
"DPD"
],
"freeReturns": null,
"paymentMethods": [
"paypal",
"visa",
"mastercard",
"american-express",
"diners-club",
"klarna",
"Nachnahme",
"Vorkasse",
"amzpay"
],
"shop": {
"id": "20481",
"name": "electronis.de",
"rating": 4.8,
"ratingCount": 6907,
"marketplace": false,
"seller": null
},
"variantId": "200474612",
"variantName": "Philips LatteGo 5400 Series EP5447/90",
"url": "https://www.idealo.de/relocator/relocate?categoryId=3487&offerKey=66fbf5f693608a86f422fe74f53dddaa&pos=1&price=428.99&productid=202691981&sid=20481&type=offer",
"position": 1
},
{
"offerKey": "f4592a4a035f79570daeb30f5a95af0f",
"title": "PHILIPS Series 5400 Kaffeevollautomat EP5447/90 beim autorisierter Fachhändler",
"price": 429,
"shippingCost": 0,
"totalPrice": 429,
"delivery": "bis Mo. 02.11.",
"carriers": [
"DHL",
"DPD"
],
"freeReturns": "Rücksendung 30 Tage kostenfrei",
"paymentMethods": [
"paypal",
"Rechnung",
"visa",
"mastercard",
"american-express",
"klarna",
"Lastschrift",
"Vorkasse",
"amzpay"
],
"shop": {
"id": "277785",
"name": "best-in-saeco.de",
"rating": 5,
"ratingCount": 6,
"marketplace": false,
"seller": null
},
"variantId": "200474612",
"variantName": "Philips LatteGo 5400 Series EP5447/90",
"url": "https://www.idealo.de/relocator/relocate?categoryId=3487&offerKey=f4592a4a035f79570daeb30f5a95af0f&pos=2&price=429.00&productid=202691981&sid=277785&type=offer",
"position": 2
}
]
} Lire la documentation de l'API
Questions fréquentes
Est-il légal de scraper idealo ?
Collecter des données publiques d'idealo comme les noms de produits, les prix, les noms des boutiques et les notes est licite dans de nombreuses juridictions, mais les règles dépendent de votre pays, des données collectées et de leur usage. ScrapeUnblocker renvoie les pages publiques que voit tout visiteur, sans autres données personnelles que celles que publient les boutiques ; ce que vous collectez et la manière dont vous l'utilisez relèvent de votre responsabilité.
Comment scraper idealo sans être bloqué ?
idealo est protégé par Akamai Bot Manager, qui répond à certains réseaux par une page de challenge comportemental au lieu de la comparaison de prix. Les plugins lisent les pages d'idealo via des exits ISP propres qu'Akamai accepte, reconnaissent le challenge comme un échec et non comme un résultat, le relancent sur un nouvel exit et, si tous les exits sont refusés, se replient sur la chaîne navigateur de ScrapeUnblocker. Un appel prend environ 1 à 3 secondes.
Quels pays idealo sont pris en charge ?
idealo.de (Allemagne), idealo.at (Autriche), idealo.co.uk (Royaume-Uni), idealo.fr (France), idealo.it (Italie) et idealo.es (Espagne). Les prix sont renvoyés en euros, ou en livres sterling sur idealo.co.uk.
Puis-je obtenir le prix de chaque boutique pour un produit ?
Oui, c'est précisément le rôle de l'endpoint des offres. Il renvoie toutes les offres d'articles neufs qu'idealo liste pour un produit, de la moins chère à la plus chère, avec la boutique, sa note, le prix, les frais de port, le prix total et l'estimation de livraison, jusqu'à 200 offres par appel. Les offres d'occasion et de second choix ne sont pas incluses.
Quelles données idealo puis-je obtenir avec une recherche ?
Chaque résultat contient l'identifiant produit, le titre, les caractéristiques, le lien et l'image, le prix le plus bas, la boutique la moins chère avec ses frais de port, le nombre d'offres, la note en étoiles arrondie à la demi-étoile, le nombre d'avis, la note des tests presse, la classe énergétique, l'économie bon plan et le rang dans les meilleures ventes, jusqu'à 300 résultats par appel, 60 par page.
Combien coûte le scraping d'idealo ?
Chaque page de recherche (jusqu'à 60 produits) est une requête, et les offres d'un produit coûtent une requête par tranche de 20 offres. 1 requête = 1 crédit, 1,00 EUR pour 1 000 en Pay as you go, jusqu'à environ 0,55 EUR pour 1 000 avec le plan Ultimate. Les blocages et les timeouts ne sont pas facturés, et l'essai gratuit comprend 500 requêtes sans carte.
Scrapers similaires
idealo et les autres noms et marques de idealo.de appartiennent à leur titulaire et ne servent ici qu'à désigner le site avec lequel cette API fonctionne. ScrapeUnblocker est un service indépendant, sans lien avec le titulaire de idealo.de, et n'est ni approuvé ni parrainé par lui.
Commencez à scraper ce site dès aujourd'hui
Palier gratuit inclus. Aucune carte bancaire requise pour tester.