Les Nouveautés de ScrapeUnblocker : Septembre 2026
Voici le premier récapitulatif mensuel du blog ScrapeUnblocker. Une fois par mois, nous rassemblons ce qui a été publié, nous le regroupons par thème et nous nous concentrons sur ce qui compte pour vous : ce que vous pouvez construire avec.
Celui-ci couvre la période de fin août à fin septembre, et elle a été chargée. L’essentiel du travail est allé aux plugins dédiés. Un plugin prend quelques entrées simples, comme un mot-clé, une ville ou un trajet aérien, et renvoie du JSON structuré. Vous n’analysez jamais de HTML et vous n’affrontez jamais vous-même la couche anti-bot.
Septembre en Bref
- Commerce : des plugins de recherche de produits pour Walmart, Target, Best Buy, The Home Depot, Etsy, SHEIN, AliExpress et Zalando.
- Places de marché : les annonces de Vinted, Craigslist et leboncoin en JSON.
- Voyage : les tarifs Southwest Airlines en dollars ou en points, les hôtels Booking.com et les logements Airbnb.
- Emploi : les offres d’Indeed, Naukri et LinkedIn avec salaires analysés et filtres.
- Immobilier et automobile : Zillow, Redfin, Rightmove, ImmobilienScout24, mobile.de et AutoScout24.
- Réseaux sociaux, vidéo et publicité : un plugin TikTok à cinq endpoints, la recherche et les commentaires YouTube, les profils Threads et la Bibliothèque publicitaire de Meta.
- Commerces locaux, applis et avis : les fiches de lieux Google Maps, Yelp, Trustpilot, Google Play et Product Hunt.
- Plateforme : plus de résultats sur Google Images, les étapes de navigateur, un connecteur ChatGPT et des codes d’erreur plus clairs.
Chaque plugin présenté ici a sa page dans le catalogue de scrapers, avec ses champs, une requête d’exemple et son benchmark public. Vous les appelez tous avec votre seule clé ScrapeUnblocker. Aucun compte développeur, aucune clé d’API ni aucune validation partenaire n’est nécessaire sur le site cible.
Nouveaux Plugins E-commerce
Huit enseignes ont désormais leur propre plugin de recherche de produits. Ils fonctionnent tous de la même façon : vous envoyez un mot-clé, éventuellement un ordre de tri et une fourchette de prix, et vous recevez un tableau products. La pagination est intégrée : vous indiquez le nombre de résultats voulu au lieu de parcourir les pages vous-même.
Ce que renvoie chacun :
- Walmart - titre, prix et ancien prix, note, nombre d’avis, marque, vendeur et disponibilité.
- Target - TCIN, titre, marque, prix, image et une URL produit propre.
- Best Buy - SKU, marque, référence du modèle, prix et prix habituel, note et nombre d’avis.
- The Home Depot - identifiant de l’article, marque, référence du modèle, prix, note et nombre d’avis.
- Etsy - titre, prix et devise, nom de la boutique, image et URL de l’annonce.
- SHEIN - identifiant produit, SKU, prix, prix catalogue, remise, note, nombre d’avis, catégorie et statut de rupture de stock.
- AliExpress - prix, prix d’origine, note et nombre de commandes, avec la devise fixée par le pays de sortie.
- Zalando - SKU, marque, nom, prix et devise sur la boutique du pays de votre choix.
Amazon a reçu son propre plugin fin août, avec des endpoints produit et recherche sur 20 places de marché régionales et des prix dans la bonne devise locale. Nous l’avons détaillé dans How to Scrape Amazon Prices.
Ce Que Vous Pouvez Construire
- Suivi des prix et repricing. L’ancien prix chez Walmart et le prix habituel chez Best Buy vous indiquent quand un article est démarqué, pas seulement ce qu’il coûte aujourd’hui. Lancez une recherche quotidienne sur votre liste de produits et recevez une alerte à chaque nouvelle démarque.
- Respect du MAP et contrôle de marque. Les marques peuvent vérifier comment les revendeurs affichent leurs produits chez Walmart, Target, Best Buy et The Home Depot. Les références de modèle et les SKU facilitent beaucoup l’appariement d’un même article entre enseignes.
- Repérage des tendances. Les remises et le nombre d’avis chez SHEIN, ainsi que le nombre de commandes chez AliExpress, montrent ce qui se vend réellement, ce qui est bien plus parlant que ce qui est simplement en ligne. Etsy joue le même rôle pour le fait main et les catégories de niche.
- Jeux de données produits pour l’IA. Marque, modèle, prix et catégorie issus de plusieurs enseignes forment un jeu propre et structuré pour entraîner ou évaluer des modèles d’appariement et de classification de produits.
Voici un petit détecteur de démarques pour Walmart, avec les paramètres de la documentation du plugin Walmart :
import requests
r = requests.post(
"https://api.scrapeunblocker.com/marketplace/walmart-search",
params={"query": "laptop", "sort": "price_low", "max_results": 60},
headers={"x-scrapeunblocker-key": "YOUR_API_KEY"},
timeout=180,
)
r.raise_for_status()
for p in r.json()["products"]:
price, was = p.get("price"), p.get("wasPrice")
if price and was and price < was:
drop = round(100 * (was - price) / was)
print(f"{drop}% off {price} (was {was}) {p['name'][:60]} {p['url']}")
Les champs sans valeur sont absents du produit, utilisez donc .get() plutôt qu’un accès direct par index.
Places de Marché et Petites Annonces
Trois sites d’occasion et de petites annonces rejoignent le catalogue :
- Vinted - annonces de revente avec titre, prix et devise, marque, taille, état et une photo, sur n’importe quelle place de marché régionale.
- Craigslist - petites annonces pour toute métropole et catégorie aux États-Unis, avec titre, prix, localisation et image.
- leboncoin - le plus grand site de petites annonces de France, avec prix, ville, code postal, département et région, catégorie, date, type de vendeur (pro ou particulier) et attributs de l’annonce.
Ce que vous pouvez construire :
- Cotes de revente. Récupérez les annonces Vinted d’une marque, regroupez-les par taille et par état, et publiez un prix médian. C’est exactement ce que cherchent revendeurs et acheteurs.
- Alertes de bonnes affaires. Surveillez Craigslist dans quelques villes pour une catégorie que vous revendez, et recevez une alerte dès qu’une nouvelle annonce passe sous votre seuil de prix.
- Études de marché locales. Le type de vendeur et les champs de localisation de leboncoin vous permettent de mesurer la part d’une catégorie vendue par des professionnels ou par des particuliers, région par région.
Voyage : Southwest, Booking.com et Airbnb
Les tarifs Southwest Airlines comblent un vrai manque, car Southwest ne vend pas ses tarifs via les API de recherche de vols habituelles. Vous passez les codes IATA des aéroports, les dates et le nombre d’adultes, et vous choisissez fare_type=dollars ou fare_type=points. La réponse liste chaque vol de la ligne avec un prix pour chaque produit tarifaire (Wanna Get Away, Wanna Get Away Plus, Anytime et Business Select), taxes et frais compris. La requête, tirée directement de la documentation Southwest :
curl -X POST "https://api.scrapeunblocker.com/flights/southwest-quotes?origin=DAL&dest=HOU&depart_date=2026-10-20&return_date=2026-10-27&fare_type=dollars&adults=1" \
-H "x-scrapeunblocker-key: YOUR_API_KEY"
Omettez return_date pour un aller simple.
Les hôtels Booking.com renvoient les établissements d’une destination pour des dates données : nom, prix de votre séjour, note et nombre d’avis, adresse complète, coordonnées, une photo et des badges. Vous choisissez le nombre de voyageurs, de chambres et la devise.
Les logements Airbnb renvoient le nom, le type de logement, le prix (en USD par défaut) avec un éventuel prix d’origine barré, la note, le nombre d’avis, des badges comme Guest favourite, les coordonnées et une URL du logement. Vous pouvez filtrer par dates, voyageurs, prix et type de logement.
Ce que vous pouvez construire :
- Alertes tarifaires et valeur des points. Interrogez une ligne Southwest chaque jour et recevez une alerte quand un tarif baisse. En récupérant le tarif en dollars et le tarif en points pour le même vol, vous voyez ce que vaut réellement un point sur cette ligne.
- Comparaison des tarifs hôteliers. Les hôtels et les revenue managers peuvent suivre leur propre prix et ceux de leurs concurrents sur Booking.com pour les mêmes dates.
- Études de location courte durée. Les coordonnées, le prix et la note d’Airbnb vous permettent de cartographier les prix à la nuit par quartier avant d’acheter ou de mettre un bien en location.
La location de voitures Skyscanner gagne aussi en précision. Vous pouvez désormais passer les identifiants de lieu propres à Skyscanner (pickup_entity et dropoff_entity) pour chercher un endroit exact, et un nom de lieu impossible à résoudre renvoie une erreur au lieu de chercher discrètement ailleurs. Les en-têtes de réponse indiquent le lieu réellement recherché. L’article d’origine sur les plugins Skyscanner couvre les bases.
Emploi : Indeed, Naukri et LinkedIn
- Indeed - titre, entreprise, localisation avec indicateur de télétravail, texte du salaire avec minimum et maximum analysés, types de contrat, note de l’entreprise et un extrait, sur n’importe quel site pays d’Indeed.
- Naukri - le plus grand site d’emploi d’Inde, avec mode de travail, fourchette d’expérience, salaire analysé, compétences, note de l’entreprise et date de publication.
- Offres LinkedIn - titre, entreprise, localisation et date de publication, filtrables avec les filtres invités de LinkedIn (date de publication, mode de travail, type de contrat, expérience et salaire). Un mode détail ajoute la description complète, le niveau hiérarchique, le type de contrat, la fonction et les secteurs.
Ce que vous pouvez construire :
- Benchmark des salaires. Les salaires minimum et maximum déjà analysés transforment les offres en jeu de données de rémunération par poste et par ville, sans expressions régulières sur des chaînes de texte.
- Suivi de la demande de compétences. Naukri renvoie les compétences de chaque offre. Comptez-les semaine après semaine et vous verrez quelles technologies les employeurs demandent de plus en plus.
- Signaux de recrutement pour la vente. Une entreprise qui publie cinq postes de data engineering ce mois-ci s’apprête probablement à acheter des outils data. Recruteurs et équipes commerciales B2B construisent leurs listes de leads précisément à partir de ce signal.
Immobilier et Automobile
Immobilier :
- Zillow - prix, chambres, salles de bain, surface, adresse, coordonnées, type de bien et statut, plus le Zestimate, le Zestimate locatif et la valeur fiscale. À vendre, à louer ou vendus.
- Redfin - prix, chambres, salles de bain, surface en pieds carrés, taille du terrain, statut MLS, jours sur le marché et prix au pied carré. Un mode détail ajoute les agents, l’historique des prix, le Redfin Estimate, les données fiscales et les écoles à proximité.
- Rightmove - ventes et locations au Royaume-Uni avec prix, fréquence du loyer, chambres, adresse, coordonnées et l’agence immobilière.
- ImmobilienScout24 - annonces allemandes avec prix et loyer charges comprises (Warmmiete), pièces, surface habitable, année de construction, classe énergétique et agent.
Automobile :
- mobile.de - marque et modèle, prix en EUR, première immatriculation, kilométrage, puissance et carburant, avec des filtres de prix, d’année, de kilométrage et de carburant.
- AutoScout24 - marque, modèle, version, prix, immatriculation, kilométrage, carburant, boîte de vitesses, puissance ainsi que le nom, le type et la localisation du vendeur.
Ce que vous pouvez construire :
- Comparables et estimation. L’historique des prix et les jours sur le marché de Redfin, ou les biens vendus sur Zillow, vous donnent des ventes comparables pour un modèle de prix.
- Filtres de rendement locatif. Zillow renvoie le prix et le Zestimate locatif dans un même enregistrement, de quoi calculer rapidement un rendement brut par annonce. Les recherches à la vente et à la location sur Rightmove pour un même secteur font le même travail au Royaume-Uni.
- Analyse énergétique et rénovation. La classe énergétique et l’année de construction d’ImmobilienScout24 vous permettent de mesurer l’écart de prix entre logements performants et énergivores dans une ville allemande.
- Prix des voitures d’occasion. Le prix en fonction du kilométrage, de l’année et de la puissance sur mobile.de et AutoScout24 est le cœur d’un modèle d’estimation de véhicules d’occasion. Les concessionnaires utilisent aussi ces données pour surveiller le stock de leurs concurrents.
Réseaux Sociaux, Vidéo et Publicité
TikTok dispose désormais d’un plugin complet avec cinq endpoints :
tiktok-profile- nombres exacts d’abonnés, de likes et de vidéos, bio et indicateurs, plus jusqu’à 200 des vidéos les plus récentes du créateur.tiktok-video- une vidéo ou une publication photo avec vues, likes, commentaires, partages, enregistrements et reposts exacts, hashtags, musique, URLs des médias, pistes de sous-titres et une transcription en option.tiktok-hashtag- vues totales et nombre de vidéos d’un hashtag, avec ses meilleures vidéos.tiktok-search- les vidéos que TikTok classe pour un mot-clé, avec une région au choix.tiktok-comments- les commentaires d’une publication avec auteur, likes et réponses.
« Exact » est le mot important. TikTok affiche 1.6M à l’écran, et le plugin renvoie le vrai chiffre qui se cache derrière. Deux remarques pratiques tirées de la documentation TikTok : la recherche et les commentaires sont plus lents, environ 20 à 45 secondes par appel, et les URLs des médias expirent au bout de quelques heures, alors téléchargez ce dont vous avez besoin dans la même exécution.
YouTube gagne des plugins de recherche et de commentaires. La recherche renvoie l’identifiant de la vidéo, le titre, la chaîne, le nombre de vues sous forme de nombre, la durée en secondes, l’ancienneté et les badges, avec des filtres de type et de tri. Les commentaires renvoient l’auteur, le texte, le nombre de likes et de réponses et les indicateurs épinglé ou cœur, triés par pertinence ou par date. L’endpoint de chaîne renvoie aussi désormais les vues, likes et commentaires exacts, comme nous l’avons expliqué dans How to Scrape YouTube Channel Data as JSON.
Les profils Threads renvoient la bio, le nombre d’abonnés, le nombre de threads et les publications récentes avec likes, commentaires, reposts et partages.
La Bibliothèque publicitaire de Meta renvoie les publicités Facebook et Instagram d’un annonceur : texte de l’annonce, titre, appel à l’action, format, URLs des visuels image et vidéo, page de destination, plateformes et dates de diffusion. Via l’API officielle de la Bibliothèque publicitaire de Meta, les données complètes sont réservées aux publicités politiques et d’enjeux sociaux : c’est donc la façon pratique de voir ce que diffuse un annonceur commercial ordinaire. Cet extrait affiche depuis combien de temps chaque annonce active tourne :
from datetime import date
import requests
r = requests.post(
"https://api.scrapeunblocker.com/ads/meta-ad-library",
params={"advertiser": "Nike", "country": "US", "active_status": "active", "max_ads": 30},
headers={"x-scrapeunblocker-key": "YOUR_API_KEY"},
timeout=180,
)
r.raise_for_status()
for ad in r.json()["results"]:
if not ad.get("started_running"):
continue
days = (date.today() - date.fromisoformat(ad["started_running"])).days
print(f"{days:>4} days {ad['display_format']:<9} {ad.get('cta_text')} {ad.get('link_url')}")
Ce que vous pouvez construire :
- Évaluation d’influenceurs. Comparez le nombre d’abonnés d’un créateur aux vues et likes exacts de ses vidéos récentes. Une grande audience avec peu d’engagement saute aux yeux.
- Veille de marque et analyse de sentiment. Récupérez les commentaires des vidéos TikTok et YouTube qui mentionnent votre produit et passez-les dans un modèle d’analyse de sentiment.
- Recherche de contenus. Les recherches TikTok et YouTube montrent ce qui se classe sur un sujet en ce moment, chiffres d’engagement à l’appui.
- Analyse des publicités concurrentes. Une annonce qui tourne depuis 60 jours est généralement une annonce qui fonctionne. Triez les annonces d’un concurrent par durée de diffusion, étudiez les plus anciennes et notez où elles envoient le clic.
Commerces Locaux, Applis et Avis
- Fiches de lieux Google Maps - la fiche complète d’un lieu : nom, adresse, téléphone, site web, note, catégories, coordonnées, plus code et horaires du jour avec un indicateur ouvert maintenant. Elle se combine bien avec le plugin Google Local, qui trouve d’abord les établissements d’une recherche.
- Yelp - recherchez des commerces américains par terme et par ville, ou récupérez-en un par son URL. Vous obtenez la note, le nombre d’avis, la gamme de prix et les catégories, et le mode détail ajoute téléphone, site web, horaires et plats populaires.
- Trustpilot - le TrustScore d’une entreprise, sa répartition de 1 à 5 étoiles et chaque avis avec son texte, l’indicateur vérifié, le pays de l’auteur et la réponse de l’entreprise.
- Google Play - pour une appli : titre, développeur, note, histogramme complet des notes, installations, prix, classification du contenu, version et notes de mise à jour ; ou une liste classée d’applis pour une recherche.
- Product Hunt - le classement du jour, la recherche par mot-clé, les thématiques ou un produit précis, avec votes, commentaires, rang, thématiques et makers.
Ce que vous pouvez construire :
- Génération de leads locaux. Cherchez une catégorie et une ville sur Google Local, puis ajoutez la gamme de prix et le nombre d’avis Yelp pour prioriser les prospects. Vous obtenez une liste qualifiée avec téléphones et sites web.
- Tableaux de bord de réputation. Suivez la répartition des étoiles d’une entreprise sur Trustpilot et la fréquence à laquelle elle répond aux avis, à côté de ses concurrents.
- Veille sur les stores d’applis. Surveillez les histogrammes de notes et les dates de mise à jour de vos concurrents sur Google Play. Une baisse de la part de cinq étoiles juste après une version est un signal clair.
- Suivi des lancements. Les thématiques et classements de Product Hunt montrent quels produits se lancent dans votre catégorie et comment la communauté réagit.
Google Images S’Améliore
Le plugin Google Images a été lancé mi-septembre et a été amélioré deux fois depuis :
- Un nouveau paramètre
pagesrécupère jusqu’à 5 pages de résultats d’environ 100 images chacune. Chaque page est facturée comme une requête, etpagesFetcheddans la réponse indique combien ont été utilisées.max_resultsmonte désormais jusqu’à 500. - Le marché Google suit désormais automatiquement
proxy_country, les résultats correspondent donc au pays choisi.glreste disponible pour forcer une autre valeur. - Chaque résultat contient désormais
googleImagesUrl, le lien vers la visionneuse Google Images pour cette image.
Ensemble, ces changements rendent le plugin bien plus utile pour constituer des jeux de données d’images pour l’IA, vérifier où apparaissent vos photos produits et mener toute recherche qui demande plus d’une page de résultats.
Améliorations de la Plateforme
Étapes de navigateur et découverte d’éléments. getPageSource peut désormais cliquer, saisir du texte, sélectionner, faire défiler et attendre dans un vrai navigateur avant de renvoyer le HTML, et list_elements=true vous donne les éléments interactifs d’une page avec des sélecteurs prêts à l’emploi. Interact With a Page, Then Scrape It détaille la démarche.
Connecteur ChatGPT. Le serveur MCP hébergé fonctionne désormais comme connecteur personnalisé dans ChatGPT sur le web, avec un guide de configuration pas à pas. ChatGPT dispose de quatre outils : récupérer le HTML d’une page, récupérer du JSON analysé, lancer une recherche Google et lister les éléments interactifs d’une page. Il vous faut un abonnement ChatGPT payant avec le mode développeur activé.
Des erreurs plus claires. Deux changements facilitent la gestion des échecs :
- Un site cible injoignable renvoie désormais
523au lieu de403. Un 523 n’est pas un blocage anti-bot et n’est jamais facturé. Réessayez après une pause. - Une page qui n’existe pas sur le site cible (
404ou410) revient désormais en200avec un en-têteX-Origin-Statusqui porte le vrai statut du site. Réessayer n’y changera rien : supprimez ou corrigez l’URL.
La référence des erreurs liste désormais chaque statut en précisant s’il est facturé, et le guide de gestion des échecs propose une marche à suivre pour chacun. Si votre logique de relance ne regardait que le 403, mettez-la à jour dans cet esprit :
import time
import requests
RETRYABLE = {500, 502, 503, 504, 523}
def fetch(url, key, max_attempts=4):
for attempt in range(max_attempts):
r = requests.post(
"https://api.scrapeunblocker.com/getPageSource",
params={"url": url},
headers={"x-scrapeunblocker-key": key},
timeout=125,
)
if r.status_code == 200:
if r.headers.get("X-Origin-Status"):
return None # le site indique que cette URL est morte : supprimez-la ou corrigez-la
return r.text
if r.status_code in RETRYABLE:
time.sleep(5 * 2 ** attempt)
continue
r.raise_for_status()
return None
Offres. Chaque offre a désormais deux limites par clé d’API, appliquées en même temps : de 10 à 50 requêtes simultanées et de 2 à 10 requêtes par seconde sur Pay as you go, Starter et Pro, et de 100 à 400 requêtes simultanées et de 20 à 50 requêtes par seconde sur Business, Scale et Ultimate. Une requête qui dépasse l’une ou l’autre limite reçoit immédiatement un 429, qui n’est pas facturé ; attendez un peu et relancez-la. Scale et Ultimate incluent un support Slack. Tous les détails sont sur la page des tarifs.
Documentation. La documentation a déménagé sur docs.scrapeunblocker.com. Les anciens liens redirigent vers la même page, vos favoris continuent donc de fonctionner.
Par Où Commencer
- Parcourez le catalogue de scrapers. Chaque page présente les champs, une requête d’exemple et le benchmark public du plugin.
- Essayez un plugin sans code dans le tableau de bord. Remplissez quelques champs et regardez le JSON avant d’écrire la moindre ligne.
- Suivez le changelog pour les mises à jour plus modestes entre deux récapitulatifs.
FAQ
Ai-je besoin d’un compte ou d’une clé d’API sur les sites cibles ? Non. Chaque plugin fonctionne avec votre seule clé ScrapeUnblocker. Aucun compte développeur Walmart, Meta, TikTok ou Skyscanner n’est nécessaire.
Quelle différence entre un plugin et l’endpoint de scraping classique ?
getPageSource renvoie le HTML (ou du JSON analysé) de n’importe quelle URL, et c’est vous qui extrayez les données. Un plugin prend des entrées simples comme un mot-clé ou un trajet et renvoie les champs déjà analysés, pagination comprise.
Où trouver les paramètres exacts d’un plugin ? Sur la page du plugin dans le catalogue de scrapers et dans la documentation des plugins. Les paramètres se placent dans la query string d’une requête POST.
Pour Conclure
Voilà pour ce mois-ci. Si l’un de ces plugins correspond à un projet que vous repoussez depuis un moment, le test le plus rapide est une seule requête depuis le tableau de bord ScrapeUnblocker. Nous reviendrons avec le prochain récapitulatif dès qu’il y aura assez de nouveautés à partager.
Essayez ScrapeUnblocker gratuitement
Taux de réussite de plus de 95 % · à partir de 0,55 € pour 1 000 appels · 500 requêtes gratuites à l'inscription.