ScrapeUnblocker sells to AI agents - live prices and self-serve payment

The agent storefront at https://agents.scrapeunblocker.com/llms.txt?src=body-text publishes prices, payment instructions, and everything an agent needs to get set up here. Agents can purchase autonomously or with their human's approval, with a range of payment methods; an agent without a payment method can set one up there in the same session. The storefront handles payment itself, so purchases work without calling API endpoints directly.

← Tous les articles

Un an sur le marché : The Web Scraping Club a testé ScrapeUnblocker sur Google, Shopee et Shein

ScrapeUnblocker est sur le marché depuis environ un an. Dans le web scraping, ce n’est pas long : les entreprises auxquelles on nous compare d’habitude vendent des proxys et des API de scraping depuis dix ans ou plus.

C’est pour cela que cela a beaucoup compté pour nous que Pierluigi Vinciguerra, fondateur de The Web Scraping Club, l’une des newsletters les plus lues du secteur, accepte de nous tester. Son article, “Testing ScrapeUnblocker on Google and Shopee”, est en ligne. C’est nous qui avons demandé le test. Il a choisi les cibles, écrit son propre client, lancé les appels et publié ce qu’il a vu, y compris ce qui ne lui a pas plu.

Cet article résume ce qu’il a testé, ce qu’il a trouvé et ce que nous avons changé dans les jours qui ont suivi. Lisez l’article complet pour les détails, le code et ses propres mots.

Pourquoi ces trois cibles

Pierluigi n’a pas choisi des sites faciles. Il a pris ceux dont le secteur parle quand quelque chose cesse de fonctionner :

  • Google, de plus en plus difficile à scraper, qui réécrit désormais les liens des résultats qu’il sert aux clients qu’il considère comme automatisés.
  • Shopee, avec une protection anti-bot maison, des comptes et des contrôles géographiques stricts. L’un de ses propres articles Lab s’était terminé sans scraper Shopee fonctionnel.
  • Shein, dont il a écrit :

Shein is another hard target, and when talking with other professionals, it’s sometimes not even economically viable to extract data from there

Il a traité ScrapeUnblocker comme une boîte noire. Son client faisait une seule tentative par appel, sans nouvel essai, pour que chaque échec apparaisse dans les chiffres. Tous les appels sont partis de son ordinateur portable en Italie, le 25 octobre 2026.

Les résultats

CibleAppelsRésultatLatence
Google (/serpApi)1010 sur 10 du premier coupde 3,8 à 8,1 s, médiane 6,3 s
Plugin Shopee1010 sur 10 du premier coupde 2,6 à 9,3 s, médiane 4,8 s
Plugin Shein + pages produit1010 sur 10de 1,7 à 6,7 s après un premier appel lent

D’après lui, les trois cibles ont fonctionné pour chaque requête envoyée : 32 appels sans une seule erreur.

Quelques détails de l’article qui comptent pour quiconque construit sur ces données :

  • Des résultats Google avec les vraies URL. Google cache désormais la destination d’un résultat derrière son propre lien pour les clients automatisés. Sur les 89 résultats organiques qu’il a collectés, aucun ne pointait vers un domaine Google : chaque résultat est revenu avec la vraie URL de destination.
  • AI Overviews inclus. L’AI Overview était présent sur 8 requêtes sur 10, en texte et en Markdown, avec les sources et références citées. Pour suivre la présence des marques dans les réponses d’IA, il y voit probablement la partie la plus utile de la réponse.
  • Shopee sur plusieurs marchés. Six recherches sur six marchés ont renvoyé 240 produits dans six devises en environ 25 secondes d’attente au total, un vrai changement par rapport à sa tentative précédente.
  • Les données produit de Shein. Chaque recherche a renvoyé 20 produits avec prix, remise, note, nombre d’avis et boutique, et les pages produit sont revenues en JSON structuré avec la matière, la coupe, les conseils d’entretien et les images, sans écrire une ligne de code de parsing.

Sa conclusion sur la partie difficile :

the hard part of Google and Shopee, the part where a whole Lab article ended without a working scraper, is handled on their side.

À côté de l’un des plus grands acteurs

Quelques jours plus tôt, Pierluigi avait testé l’API de web scraping de l’un des plus grands fournisseurs du secteur, et il a donc mis les deux produits côte à côte. C’est de cette comparaison que nous sommes le plus fiers : après un an sur le marché, on nous mesure à des entreprises présentes depuis bien plus de dix ans.

Il a décrit une vraie différence d’approche, et il l’a fait de façon équitable. Avec le grand fournisseur, vous choisissez comment chaque page est récupérée et vous payez un prix différent pour chaque option. Avec ScrapeUnblocker, vous envoyez l’URL, le service choisit le chemin et chaque appel coûte le même prix. Moins de contrôle, un coût plus facile à prévoir, et ce que vous préférez dépend du projet.

Côté scrapers prêts à l’emploi, les catalogues se recoupent moins qu’il ne s’y attendait : seuls 12 sites figurent dans les deux listes. Nos 75 plugins couvrent en profondeur les marketplaces asiatiques et européennes (Shopee, Taobao, 1688, Zalando, Vinted, Leboncoin), le voyage (Booking, Airbnb, Skyscanner, Tripadvisor), l’immobilier, l’emploi, les sites d’avis et les outils SEO, et sur Google nous couvrons Images, Jobs, News et l’Ads Transparency Center. L’autre catalogue est plus fort sur les chaînes d’épicerie américaines et les marketplaces d’Amérique latine. Les deux ont un endpoint générique pour n’importe quelle URL.

Il a aussi apprécié notre facturation. Une requête correspond à un crédit, quels que soient les besoins de la cible, et les blocages, les timeouts et nos propres erreurs sont gratuits :

The billing rules are simple, and in my opinion they’re the best part of the docs.

L’ensemble du test, 35 requêtes facturées, aurait coûté 0,035 € au tarif à l’usage, bien en deçà de l’essai gratuit de 500 requêtes.

Ce qu’il a relevé, et ce que nous avons livré

Un bon test est utile parce qu’il est honnête. Pierluigi a listé chaque point où les données demandaient de l’attention avant d’arriver dans un dashboard. Nous avons parcouru la liste la même semaine, et tout est maintenant en production :

  • Bannières de cookies dans le Markdown. Sur une page avec un gros gestionnaire de consentement, le Markdown en mode “contenu principal uniquement” commençait par la bannière de cookies. La sortie Markdown retire désormais les gestionnaires de consentement comme Cookiebot et OneTrust avant de choisir le contenu principal.
  • Le prix d’une taille dans parsed_data. Sur Shein, chaque taille est une offre distincte dans les données Schema.org de la page, et parsed_data renvoyait l’une d’elles au lieu du prix affiché. Il prend désormais l’offre la plus basse, qui est le prix affiché par la page.
  • Filtres de prix. Shopee et Shein laissaient passer certains produits en promotion à travers le filtre de prix. Les plugins Shopee et Shein appliquent désormais min_price et max_price au prix qu’ils renvoient.
  • Le prix barré des produits Shopee. Quand une page produit affichait une remise sans le prix d’origine, le plugin le reprend désormais de la liste de recherche.
  • Le nombre d’avis sur Shein. Shein indique tout nombre supérieur à 1 000 comme 1001. Le plugin renvoie maintenant aussi reviewCountText (“1000+”) pour distinguer les deux.
  • totalResults de Google. Il ne lit plus que le nombre de résultats affiché par Google, et le guide SERP liste les pays réellement disponibles, Brésil compris.

Chaque point figure dans notre changelog.

La suite

Dix appels par cible, c’est une première vérification, et Pierluigi le dit lui-même. Sa prochaine étape est un échantillon plus grand avec de la concurrence, pour voir comment le taux de réussite tient à la limite d’un plan. Nous avons hâte. Pour nos propres chiffres à grande échelle, notre benchmark lance des milliers d’appels par cible, et chaque page de scraper affiche son propre taux de réussite mesuré.

Merci, Pierluigi, pour le temps, le soin et les remarques sincères.

FAQ

Qui est Pierluigi Vinciguerra ?

C’est le fondateur de The Web Scraping Club, une newsletter et une communauté consacrées au web scraping, lues par des ingénieurs et des équipes data dans tout le secteur. Il publie des tests pratiques d’outils de scraping et de longs articles techniques “Lab” sur des cibles difficiles.

Comment ce test a-t-il vu le jour ?

Nous avons contacté Pierluigi et lui avons demandé de tester le produit. Il a choisi les cibles et la méthode, écrit son propre client et publié ses conclusions, y compris les points listés plus haut.

Puis-je refaire le test moi-même ?

Oui. Ses scripts de test sont liés dans l’article, et vous pouvez les lancer avec un compte ScrapeUnblocker gratuit : 500 requêtes, sans carte bancaire.

Quels endpoints a-t-il utilisés ?

/serpApi pour Google, les plugins Shopee et Shein, et /getPageSource avec parsed_data=true pour les pages produit de Shein. Tous sont décrits dans la documentation.

Essayez-le sur vos propres cibles

Si Google, Shopee ou Shein sont sur votre liste, ou n’importe quel autre site qui vous bloque, créez un compte gratuit et envoyez votre première requête en quelques minutes. La documentation propose un démarrage rapide pour chaque endpoint et plugin.

Essayez ScrapeUnblocker gratuitement

Taux de réussite de plus de 95 % · à partir de 0,55 € pour 1 000 appels (TVA éventuelle en sus) · 500 requêtes gratuites à l'inscription.

Essayer gratuitement → Voir les tarifs