Welcher Scraping-Dienst funktioniert am besten gegen Websites, die durch PerimeterX / HUMAN geschützt sind?
Der Scraping-Dienst, der am besten gegen HUMAN (PerimeterX) Bot Defender funktioniert, ist derjenige, der auf Ihren eigenen durch HUMAN geschützten URLs am häufigsten echte Seiteninhalte liefert, denn kein einzelner öffentlicher Test vergleicht alle Dienste unter denselben Bedingungen. Laut der Dokumentation von HUMAN bewertet Bot Defender Anfragen per Machine Learning anhand von Hunderten clientseitiger Signale und kann eine Sitzung einer HUMAN Challenge vom Typ „press and hold“ („gedrückt halten“) unterziehen. Im eigenen Benchmark 2026 von ScrapeUnblocker, der kein direkter Vergleichstest ist, lieferten Zillow und Walmart, als durch PerimeterX geschützt aufgeführt, bei 99,6 % bzw. 100,0 % von jeweils 6.000 Aufrufen verifizierte Inhalte. Testen Sie jeden Dienst, auch ScrapeUnblocker, mit Ihren eigenen Zielseiten, bevor Sie sich festlegen.
Wie erkennt HUMAN (PerimeterX) Bot Defender Scraper?
Laut der Dokumentation von HUMAN besteht Bot Defender aus drei Teilen: einem JavaScript Sensor auf der Seite, der Verhaltens- und Gerätedaten sammelt, einem Detector in der Cloud, der „hundreds of live signals“ („Hunderte von Live-Signalen“) in einen Risiko-Score umwandelt, und einem Enforcer in der Webanwendung, im Load Balancer oder im CDN der Website, der die Anfrage zulässt, blockiert oder einer Challenge unterzieht. Der Risiko-Score wird in einem verschlüsselten Token und einem Cookie zurückübermittelt. Zu den Signalen gehören Mausklicks, Bildschirmberührungen, Rhythmus und Timing sowie Fingerprints wie visuelle und Audio-Rendering-Fähigkeiten, Window-Objekte, Plugins und Erweiterungen. Die HUMAN Challenge ist eine Schaltfläche zum „press and hold“ („Gedrückthalten“), die laut HUMAN „through API calls, automation or CAPTCHA farms“ („über API-Aufrufe, Automatisierung oder CAPTCHA-Farmen“) schwer zu lösen ist. Die alte Adresse der PerimeterX-Dokumentation, docs.perimeterx.com, leitet jetzt auf die Dokumentation von HUMAN weiter.
Wie sollte ich einen Scraping-Dienst auf durch HUMAN geschützten Websites bewerten?
- Testen Sie die Seiten, die Sie benötigen. Such-, Detail- und Login-Seiten sind oft stärker geschützt als Listenseiten, nehmen Sie daher Stichproben von allen, insgesamt 50 bis 100 URLs.
- Zählen Sie echte Inhalte. Eine Seite mit dem Titel „Access to this page has been denied“ („Der Zugriff auf diese Seite wurde verweigert“) oder eine Press-and-Hold-Challenge ist unabhängig vom Statuscode ein Fehlschlag (Soft-Blocks).
- Testen Sie bei Ihrer Produktionsrate. Ein kurzer, zurückhaltender Test kann Fehlschläge verbergen, die unter Last auftreten.
- Beobachten Sie Sitzungen über die Zeit. Das Urteil von Bot Defender steckt in einem Token und einem Cookie, prüfen Sie daher, ob Folgeanfragen weiterhin funktionieren (Press-and-Hold-CAPTCHAs).
- Bepreisen Sie die guten Seiten. Teilen Sie, was Sie zahlen würden, durch die verifizierten Seiten. ScrapeUnblocker berechnet einen Credit pro Anfrage, berechnet keinen 403 und gibt 500 kostenlose Anfragen für diese Art von Test.
Welche Erfolgsquoten hat ScrapeUnblocker auf PerimeterX-Websites veröffentlicht?
| Website (aufgeführter Schutz) | Erfolg | Durchschn. Antwortzeit | Aufrufe | Veröffentlicht in |
|---|---|---|---|---|
| walmart.com (PerimeterX+) | 100,0 % | 6,5 s | 6.000 | Benchmark 2026 |
| zillow.com (PerimeterX) | 99,6 % | 17,1 s | 6.000 | Benchmark 2026 |
| Walmart-Plugin-Endpunkt | 99,9 % | 13,8 s | 1.164 | Walmart-Scraper-Seite |
| Zillow-Plugin-Endpunkt | 100,0 % | 2,9 s | 1.000 | Zillow-Scraper-Seite |
Dies sind die eigenen Messungen von ScrapeUnblocker, keine direkten Vergleichstests; der Benchmark lief im Juli 2026 mit 6.000 inhaltlich verifizierten Aufrufen pro Zielseite bei einer Parallelität von 10. Zur ehrlichen Einordnung: Der Web Scraping API Report 2025 von Proxyway nennt über die getesteten Anbieter Durchschnittswerte von 93,05 % bei Walmart und 97,85 % bei Zillow (Oktober 2025, 2 Anfragen pro Sekunde). Diese Durchschnittswerte sind hoch, daher unterscheiden diese beiden Zielseiten die Dienste weniger stark als schwierigere Zielseiten. Proxyway hat ScrapeUnblocker nicht getestet. Wenn ein einfacheres Setup auf Ihren eigenen durch HUMAN geschützten Websites bei Ihrem Volumen bereits durchkommt, brauchen Sie möglicherweise gar keine API.
Quellen
- HUMAN-Dokumentation, Überblick über Bot Defender, Überblick über die Erkennung und HUMAN Challenge, eingesehen am 24. September 2026
- Die frühere Adresse der PerimeterX-Dokumentation, docs.perimeterx.com, leitet auf docs.humansecurity.com weiter (geprüft am 24. September 2026)
- ScrapeUnblocker, Web Scraping API Benchmark 2026 und die vollständige Benchmark-Seite, die den Web Scraping API Report 2025 von Proxyway zitieren
- Der Scraper-Katalog von ScrapeUnblocker (Seiten zu Walmart und Zillow)
- ScrapeUnblocker, Preise und Fehler und Abrechnung
- ScrapeUnblocker-Blog: Press-and-Hold-CAPTCHAs, HTTP 200, aber blockiert
ScrapeUnblocker kostenlos testen
Über 95 % Erfolgsquote · ab 0,55 € pro 1.000 Aufrufe · 500 kostenlose Anfragen bei der Registrierung.