Ein Jahr am Markt: The Web Scraping Club hat ScrapeUnblocker mit Google, Shopee und Shein getestet

ScrapeUnblocker ist seit etwa einem Jahr am Markt. Im Web Scraping ist das nicht lange: Die Unternehmen, mit denen wir meist verglichen werden, verkaufen seit zehn Jahren oder länger Proxys und Scraping-APIs.

Umso mehr hat es uns bedeutet, dass Pierluigi Vinciguerra, Gründer von The Web Scraping Club, einem der meistgelesenen Newsletter unserer Branche, zugestimmt hat, uns zu testen. Sein Review, “Testing ScrapeUnblocker on Google and Shopee”, ist jetzt online. Wir haben um den Test gebeten. Er hat die Ziele gewählt, seinen eigenen Client geschrieben, die Aufrufe durchgeführt und veröffentlicht, was er gesehen hat, auch die Teile, die ihm nicht gefallen haben.

Dieser Beitrag fasst zusammen, was er getestet hat, was er gefunden hat und was wir in den Tagen danach geändert haben. Die Details, den Code und seine eigenen Worte findest du im vollständigen Artikel.

Warum genau diese drei Ziele

Pierluigi hat sich keine leichten Websites ausgesucht. Er hat die genommen, über die die Branche spricht, wenn etwas nicht mehr funktioniert:

• Google, das immer schwerer zu scrapen ist und die Ergebnislinks für Clients, die es für automatisiert hält, inzwischen umschreibt.
• Shopee, mit eigenem Bot-Schutz, Konten und strengen geografischen Kontrollen. Einer seiner eigenen früheren Lab-Artikel endete ohne funktionierenden Shopee-Scraper.
• Shein, über das er schrieb:

Shein is another hard target, and when talking with other professionals, it’s sometimes not even economically viable to extract data from there

Er hat ScrapeUnblocker als Blackbox behandelt. Sein Client hat pro Aufruf genau einen Versuch gemacht, ohne Wiederholungen, damit jeder Fehler in den Zahlen sichtbar wird. Alle Aufrufe liefen am 25. Oktober 2026 von seinem Laptop in Italien.

Die Ergebnisse

Ziel	Aufrufe	Ergebnis	Latenz
Google (/serpApi)	10	10 von 10 beim ersten Versuch	3,8 bis 8,1 s, Median 6,3 s
Shopee-Plugin	10	10 von 10 beim ersten Versuch	2,6 bis 9,3 s, Median 4,8 s
Shein-Plugin + Produktseiten	10	10 von 10	1,7 bis 6,7 s nach einem langsamen ersten Aufruf

Nach seinen Worten haben alle drei Ziele bei jeder Anfrage funktioniert: 32 Aufrufe ohne einen einzigen Fehler.

Einige Details aus dem Review, die für alle wichtig sind, die auf diesen Daten aufbauen:

• Google-Ergebnisse mit echten URLs. Google versteckt das Ziel eines Ergebnisses für automatisierte Clients inzwischen hinter einem eigenen Link. Von den 89 organischen Ergebnissen, die er gesammelt hat, zeigte keines auf eine Google-Domain: Jedes kam mit der echten Ziel-URL zurück.
• AI Overviews inklusive. Die AI Overview war bei 8 von 10 Suchanfragen dabei, als Text und Markdown, mit den zitierten Quellen und Referenzen. Für das Monitoring von Marken in KI-Antworten nannte er sie wahrscheinlich den nützlichsten Teil der Antwort.
• Shopee über mehrere Märkte. Sechs Suchen in sechs Märkten lieferten 240 Produkte in sechs Währungen in rund 25 Sekunden Gesamtwartezeit, ein großer Unterschied zu seinem früheren Versuch.
• Shein-Produktdaten. Jede Suche lieferte 20 Produkte mit Preis, Rabatt, Bewertung, Anzahl der Bewertungen und Shop, und die Produktseiten kamen als strukturiertes JSON mit Material, Passform, Pflegehinweisen und Bildern zurück, ohne eine Zeile Parsing-Code.

Sein Fazit zum schwierigen Teil:

the hard part of Google and Shopee, the part where a whole Lab article ended without a working scraper, is handled on their side.

Neben einem der größten Anbieter

Wenige Tage zuvor hatte Pierluigi die Web-Scraping-API eines der größten Anbieter der Branche getestet, also hat er die beiden Produkte nebeneinandergestellt. Auf diesen Vergleich sind wir am meisten stolz: Nach einem Jahr am Markt werden wir an Unternehmen gemessen, die seit weit über zehn Jahren dabei sind.

Er hat einen echten Unterschied im Ansatz beschrieben, und zwar fair. Beim größeren Anbieter wählst du, wie jede Seite abgerufen wird, und zahlst für jede Option einen anderen Preis. Bei ScrapeUnblocker schickst du die URL, der Dienst wählt den Weg, und jeder Aufruf kostet gleich viel. Weniger Kontrolle, dafür besser planbare Kosten, und was dir lieber ist, hängt vom Projekt ab.

Bei fertigen Scrapern überschneiden sich die Kataloge weniger, als er erwartet hatte: Nur 12 Websites stehen auf beiden Listen. Unsere 75 Plugins decken asiatische und europäische Marktplätze (Shopee, Taobao, 1688, Zalando, Vinted, Leboncoin), Reisen (Booking, Airbnb, Skyscanner, Tripadvisor), Immobilien, Jobs, Bewertungsportale und SEO-Tools tief ab, und bei Google haben wir Images, Jobs, News und das Ads Transparency Center. Der andere Katalog ist stärker bei US-Lebensmittelketten und lateinamerikanischen Marktplätzen. Beide haben einen generischen Endpoint für jede URL.

Auch unser Abrechnungsmodell hat ihm gefallen. Eine Anfrage ist ein Credit, egal was das Ziel braucht, und Blockaden, Timeouts und unsere eigenen Fehler sind kostenlos:

The billing rules are simple, and in my opinion they’re the best part of the docs.

Der gesamte Test, 35 abgerechnete Anfragen, hätte mit Pay-as-you-go-Preisen 0,035 € gekostet, weit innerhalb der kostenlosen Testphase mit 500 Anfragen.

Was er angemerkt hat und was wir ausgeliefert haben

Ein gutes Review ist nützlich, weil es ehrlich ist. Pierluigi hat jede Stelle aufgelistet, an der die Daten Sorgfalt brauchen, bevor sie in einem Dashboard landen. Wir sind die Liste in derselben Woche durchgegangen, und alles ist jetzt live:

• Cookie-Banner im Markdown. Auf einer Seite mit großem Consent-Manager begann das Markdown im Modus “nur Hauptinhalt” mit dem Cookie-Banner. Die Markdown-Ausgabe entfernt jetzt Consent-Manager wie Cookiebot und OneTrust, bevor sie den Hauptinhalt auswählt.
• Der Preis einer Größe in parsed_data. Bei Shein ist jede Größe ein eigenes Angebot in den Schema.org-Daten der Seite, und parsed_data lieferte eines davon statt des angezeigten Preises. Jetzt wird das niedrigste Angebot genommen, also der Preis, den die Seite anzeigt.
• Preisfilter. Shopee und Shein ließen einige beworbene Produkte durch den Preisfilter. Die Plugins für Shopee und Shein setzen min_price und max_price jetzt auf den zurückgegebenen Preis durch.
• Der durchgestrichene Preis bei Shopee-Produkten. Wenn eine Produktseite einen Rabatt ohne Originalpreis zeigte, übernimmt das Plugin ihn jetzt aus dem Suchergebnis.
• Anzahl der Bewertungen bei Shein. Shein meldet jede Zahl über 1.000 als 1001. Das Plugin liefert jetzt zusätzlich reviewCountText (“1000+”), damit du beides unterscheiden kannst.
• Google totalResults. Liest jetzt nur noch die Ergebnisanzahl, die Google anzeigt, und der SERP-Guide listet die tatsächlich verfügbaren Länder, Brasilien eingeschlossen.

Alle Punkte stehen in unserem Changelog.

Wie es weitergeht

Zehn Aufrufe pro Ziel sind ein erster Check, und das sagt Pierluigi selbst. Sein nächster Schritt ist eine größere Stichprobe mit Parallelität, um zu sehen, wie sich die Erfolgsquote am Limit eines Plans hält. Wir freuen uns darauf. Für unsere eigenen Zahlen im großen Maßstab führt unser Benchmark Tausende Aufrufe pro Ziel aus, und jede Scraper-Seite zeigt ihre eigene gemessene Erfolgsquote.

Danke, Pierluigi, für die Zeit, die Sorgfalt und die ehrlichen Anmerkungen.

FAQ

Wer ist Pierluigi Vinciguerra?

Er ist der Gründer von The Web Scraping Club, einem Newsletter und einer Community rund um Web Scraping, die von Ingenieuren und Datenteams in der ganzen Branche gelesen wird. Er schreibt Praxistests von Scraping-Tools und lange technische “Lab”-Artikel über schwierige Ziele.

Wie kam das Review zustande?

Wir haben Pierluigi kontaktiert und ihn gebeten, das Produkt zu testen. Er hat die Ziele und die Methode gewählt, seinen eigenen Client geschrieben und seine Ergebnisse veröffentlicht, einschließlich der oben genannten Punkte.

Kann ich den Test selbst wiederholen?

Ja. Seine Testskripte sind in dem Artikel verlinkt, und du kannst sie mit einem kostenlosen ScrapeUnblocker-Konto ausführen: 500 Anfragen, keine Karte nötig.

Welche Endpoints hat er genutzt?

/serpApi für Google, die Plugins für Shopee und Shein sowie /getPageSource mit parsed_data=true für die Shein-Produktseiten. Alle sind in der Dokumentation beschrieben.

Teste es mit deinen eigenen Zielen

Wenn Google, Shopee oder Shein auf deiner Liste stehen, oder eine andere Website, die dich immer wieder blockiert, erstelle ein kostenloses Konto und sende in wenigen Minuten deine erste Anfrage. Die Dokumentation hat für jeden Endpoint und jedes Plugin einen Quickstart.