E-Commerce
idealo Scraper
idealo.de
idealo ist Europas großes Preisvergleichsportal, und seine Seiten in Deutschland, Österreich, Großbritannien, Frankreich, Italien und Spanien werden über zwei eigene Plugin-Endpoints bedient statt über den generischen Seitenabruf. Gib dem Such-Endpoint ein Stichwort und ein Land - etwa 'kaffeevollautomat' auf idealo.de oder 'headphones' auf idealo.co.uk - und er liefert die idealo-Ergebnisse bereits ausgewertet: Produkt-ID, Titel, die Eigenschaften, die idealo aufführt, Link und Bild, den niedrigsten Preis, den günstigsten Shop mit Versandkosten und Lieferzeit, die Zahl der Angebote, die Sternebewertung (von idealo auf halbe Sterne gerundet) und die Zahl der Bewertungen, die Testnote der Fachpresse, die Energieklasse, die Schnäppchen-Ersparnis und den Bestseller-Rang. Einzelne Shop-Angebote, die idealo keinem Produkt zugeordnet hat, kommen als Angebote gekennzeichnet zurück. Sortiere nach Relevanz oder günstigstem Preis zuerst und sammle bis zu 300 Ergebnisse in einem Call, 60 pro idealo-Seite. Der Angebots-Endpoint ist der, den Teams für Preis-Monitoring brauchen: Gib ihm eine Produkt-ID oder einen Link, und er liefert das Produkt (Titel, Marke, Bilder, Preisspanne, Zahl der Angebote, Bewertung, Vor- und Nachteile, Varianten) und jedes Shop-Angebot, das idealo dazu listet, das günstigste zuerst - Shop, Shop-Bewertung und Zahl der Shop-Bewertungen, Marktplatz-Verkäufer, der eigene Produkttitel des Shops, Preis, Versandkosten und Gesamtpreis, voraussichtliche Lieferzeit, Versanddienstleister, kostenlose Rücksendung, Zahlungsarten und der Click-out-Link zum Shop - bis zu 200 Angebote pro Call, 20 pro Anfrage. Kein idealo-Konto nötig.
Was Sie extrahieren können
- Produkt-ID, Titel, Eigenschaften, Link, Bild und Position in den Ergebnissen
- Niedrigster Preis, günstigster Shop mit Versandkosten und Lieferzeit, Zahl der Angebote und Kennzeichen für nur gebrauchte Angebote
- Sternebewertung (auf halbe Sterne), Zahl der Bewertungen, Testnote der Fachpresse, Energieklasse, Schnäppchen-Ersparnis und Bestseller-Rang
- Suche auf idealo.de, .at, .co.uk, .fr, .it oder .es nach Relevanz oder günstigstem Preis zuerst; bis zu 300 Ergebnisse pro Call
- Angebote: jedes Shop-Angebot zu einem Produkt, das günstigste zuerst, bis zu 200 pro Call
- Angebot: Shop, Shop-Bewertung und Zahl der Bewertungen, Marktplatz-Verkäufer, Preis, Versandkosten, Gesamtpreis, voraussichtliche Lieferzeit, Versanddienstleister, kostenlose Rücksendung und Zahlungsarten
- Produkt auf der Angebotsseite: Marke, Bilder, Preisspanne, Zahl der Angebote, Bewertung, Vor- und Nachteile sowie Varianten mit ihren eigenen Preisen
Dedizierte Endpoints
/marketplace/idealo-search Eine Produktsuche bei idealo
idealo-Suchergebnisse zu einem Stichwort (query) auf einer Länderseite: country ist de (Standard), at, uk, fr, it oder es. Ein products-Array mit position, type (product oder offer), productId, offerId, title, subtitle, characteristics, url, image, lowestPrice, basePrice, offerCount, usedOnly, cheapestShop (id, name, shippingCost, delivery, freeReturnDays), rating, reviewCount, testGrade, energyClass, bargainSavingPercent, bestsellerRank, categoryId und variantOf, dazu total, productCount, lastPage, pagesFetched, nextPage und currency. sort ist relevance oder price_asc, page 1-100 und max_results 1-300 (60 pro Seite, jede Seite eine Anfrage). Eine Suche ohne Ergebnisse antwortet mit 404.
/marketplace/idealo-offers Jedes Shop-Angebot zu einem idealo-Produkt
Der Preisvergleich eines Produkts per product_id (mit country) oder url (ein idealo-Preisvergleichslink, dessen Länderseite Vorrang hat): productId, title, brand, url, images, lowestPrice, highestPrice, currency, offerCount, rating, reviewCount, pros, cons, variants (productId, name, gtin, lowestPrice, highestPrice, offerCount, url) und offers, das günstigste zuerst, jeweils mit position, offerKey, title, price, shippingCost, totalPrice, delivery, carriers, freeReturns, paymentMethods, shop (id, name, rating, ratingCount, marketplace, seller), variantId, variantName und url. max_results 1-200: Die ersten 20 Angebote kommen mit dem Produkt, jeder weitere Block von 20 ist eine weitere Anfrage. Angebote sind die Angebote für Neuware, die idealo standardmäßig listet. Ein unbekanntes Produkt antwortet mit 404.
Unterstützte Marketplaces
Preise kommen in der lokalen Währung des jeweiligen Marketplace zurück, der Exit wird automatisch auf dieses Land festgelegt.
| Marketplace | Währung |
|---|---|
idealo.de | EUR |
idealo.at | EUR |
idealo.co.uk | GBP |
idealo.fr | EUR |
idealo.it | EUR |
idealo.es | EUR |
So wird es gescrapt
curl -X POST \
-H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
"https://api.scrapeunblocker.com/marketplace/idealo-search?query=kaffeevollautomat&country=de"import requests
resp = requests.post(
"https://api.scrapeunblocker.com/marketplace/idealo-search",
headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
params={"query": "kaffeevollautomat", "country": "de"},
)
print(resp.text)import { ScrapeUnblockerClient } from 'scrapeunblocker';
const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });
const results = await su.idealoSearch('kaffeevollautomat', {
country: 'de',
});
const offers = await su.idealoOffers('202691981', { maxResults: 40 });
console.log(results);
console.log(offers); Requests sind POST und übergeben ihre Parameter im Query-String. Browser-Rendering findet immer statt - dafür gibt es kein Flag.
Beispielantwort
{
"productId": "202691981",
"title": "Philips LatteGo 5400 Series",
"brand": "Philips",
"url": "https://www.idealo.de/preisvergleich/OffersOfProduct/202691981_-lattego-5400-series-philips.html",
"images": [
"https://cdn.idealo.com/folder/Product/200474/6/200474612/s1_produktbild_max/philips-lattego-5400-series-ep5447-90.jpg",
"https://cdn.idealo.com/folder/Product/200474/6/200474619/s1_produktbild_max/philips-lattego-5400-series-ep5441-50.jpg"
],
"lowestPrice": 428.99,
"highestPrice": 949.0,
"currency": "EUR",
"offerCount": 38,
"rating": 4.67,
"reviewCount": 39,
"pros": [
"sehr einfache Bedienung",
"unkompliziertes Milchsystem",
"viele Kaffeespezialitäten und Individualeinstellungen"
],
"cons": [
"Milchbehälter etwas klein"
],
"variants": [
{
"productId": "200474612",
"name": "Philips LatteGo 5400 Series EP5447/90",
"gtin": "4251168330577",
"lowestPrice": 428.99,
"highestPrice": 624.01,
"offerCount": 23,
"url": "https://www.idealo.de/preisvergleich/OffersOfProduct/200474612_-lattego-5400-series-ep5447-90-philips.html"
}
],
"country": "de",
"offersCollected": 2,
"pagesFetched": 1,
"pagingStopped": null,
"offers": [
{
"offerKey": "66fbf5f693608a86f422fe74f53dddaa",
"title": "Philips EP5447/90 Series 5400",
"price": 428.99,
"shippingCost": 7.9,
"totalPrice": 436.89,
"delivery": "bis Mi. 04.11.",
"carriers": [
"DHL",
"DPD"
],
"freeReturns": null,
"paymentMethods": [
"paypal",
"visa",
"mastercard",
"american-express",
"diners-club",
"klarna",
"Nachnahme",
"Vorkasse",
"amzpay"
],
"shop": {
"id": "20481",
"name": "electronis.de",
"rating": 4.8,
"ratingCount": 6907,
"marketplace": false,
"seller": null
},
"variantId": "200474612",
"variantName": "Philips LatteGo 5400 Series EP5447/90",
"url": "https://www.idealo.de/relocator/relocate?categoryId=3487&offerKey=66fbf5f693608a86f422fe74f53dddaa&pos=1&price=428.99&productid=202691981&sid=20481&type=offer",
"position": 1
},
{
"offerKey": "f4592a4a035f79570daeb30f5a95af0f",
"title": "PHILIPS Series 5400 Kaffeevollautomat EP5447/90 beim autorisierter Fachhändler",
"price": 429,
"shippingCost": 0,
"totalPrice": 429,
"delivery": "bis Mo. 02.11.",
"carriers": [
"DHL",
"DPD"
],
"freeReturns": "Rücksendung 30 Tage kostenfrei",
"paymentMethods": [
"paypal",
"Rechnung",
"visa",
"mastercard",
"american-express",
"klarna",
"Lastschrift",
"Vorkasse",
"amzpay"
],
"shop": {
"id": "277785",
"name": "best-in-saeco.de",
"rating": 5,
"ratingCount": 6,
"marketplace": false,
"seller": null
},
"variantId": "200474612",
"variantName": "Philips LatteGo 5400 Series EP5447/90",
"url": "https://www.idealo.de/relocator/relocate?categoryId=3487&offerKey=f4592a4a035f79570daeb30f5a95af0f&pos=2&price=429.00&productid=202691981&sid=277785&type=offer",
"position": 2
}
]
} Häufige Fragen
Ist das Scrapen von idealo legal?
Das Sammeln öffentlich verfügbarer idealo-Daten wie Produktnamen, Preise, Shopnamen und Bewertungen ist in vielen Rechtsordnungen zulässig, aber die Regeln hängen von deinem Land, den gesammelten Daten und ihrer Verwendung ab. ScrapeUnblocker liefert die öffentlichen Seiten, die jeder Besucher sieht, und keine personenbezogenen Daten über das hinaus, was Shops veröffentlichen; was du sammelst und wie du es nutzt, liegt in deiner Verantwortung.
Wie scrape ich idealo, ohne blockiert zu werden?
idealo liegt hinter Akamai Bot Manager, der manchen Netzwerken statt des Preisvergleichs eine Challenge-Seite mit Verhaltensprüfung ausliefert. Die Plugins lesen die idealo-Seiten über saubere ISP-Exits, die Akamai akzeptiert, erkennen die Challenge als Fehlschlag statt als Ergebnis, wiederholen sie über einen frischen Exit und weichen, wenn jeder Exit abgewiesen wird, auf die Browser-Kette von ScrapeUnblocker aus. Ein Call dauert etwa 1-3 Sekunden.
Welche idealo-Länder werden unterstützt?
idealo.de (Deutschland), idealo.at (Österreich), idealo.co.uk (Großbritannien), idealo.fr (Frankreich), idealo.it (Italien) und idealo.es (Spanien). Preise kommen in Euro zurück, auf idealo.co.uk in Pfund.
Bekomme ich den Preis jedes Shops für ein Produkt?
Ja - genau dafür ist der Angebots-Endpoint da. Er liefert jedes Angebot für Neuware, das idealo zu einem Produkt listet, das günstigste zuerst, mit dem Shop, seiner Bewertung, dem Preis, den Versandkosten, dem Gesamtpreis und der voraussichtlichen Lieferzeit, bis zu 200 Angebote pro Call. Gebrauchte Angebote und B-Ware sind nicht enthalten.
Welche idealo-Daten bekomme ich aus einer Suche?
Jedes Ergebnis hat Produkt-ID, Titel, Eigenschaften, Link und Bild, den niedrigsten Preis, den günstigsten Shop mit seinen Versandkosten, die Zahl der Angebote, die auf halbe Sterne gerundete Sternebewertung, die Zahl der Bewertungen, die Testnote der Fachpresse, die Energieklasse, die Schnäppchen-Ersparnis und den Bestseller-Rang, bis zu 300 Ergebnisse pro Call, 60 pro Seite.
Was kostet das Scrapen von idealo?
Jede Suchseite mit bis zu 60 Produkten ist eine Anfrage, und die Angebote eines Produkts kosten eine Anfrage pro 20 Angebote. 1 Anfrage = 1 Credit, 1,00 EUR pro 1.000 bei Pay-as-you-go, bis hinunter zu etwa 0,55 EUR pro 1.000 im Ultimate-Tarif. Blockierungen und Timeouts werden nicht berechnet, und die kostenlose Testphase umfasst 500 Anfragen ohne Karte.
Ähnliche Scraper
idealo sowie weitere Namen und Marken von idealo.de gehören ihrem Inhaber und werden hier nur verwendet, um die Website zu bezeichnen, mit der diese API arbeitet. ScrapeUnblocker ist ein unabhängiger Dienst und steht in keiner Verbindung zum Inhaber von idealo.de, der ScrapeUnblocker weder unterstützt noch sponsert.
Starten Sie noch heute mit dieser Seite
Kostenloses Kontingent inklusive. Zum Testen ist keine Kreditkarte nötig.