Données d'entreprise

Trustpilot Scraper

trustpilot.com

Trustpilot agrège les avis d'entreprises, et ses pages servent un défi intersticiel aux requêtes simples. ScrapeUnblocker les rend telles qu'un visiteur les verrait et renvoie le score, le nombre d'avis et le texte de chaque entreprise, tenant un 100% propre sur un run complet de 1000 appels à environ quatre secondes par page.

Ce que vous pouvez extraire

• Nom de l'entreprise, domaine et catégorie
• TrustScore et nombre total d'avis
• Répartition des étoiles entre les notes
• Texte de chaque avis, auteur et date
• Réponse de l'entreprise et statut de vérification

Comment le scraper

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/getPageSource?url=https%3A%2F%2Fwww.trustpilot.com%2F&parsed_data=true"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/getPageSource",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"url": "https://www.trustpilot.com/", "parsed_data": True},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.getPageSource({
  url: 'https://www.trustpilot.com/',
  parsedData: true,
});
console.log(results);

Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.

Lire la documentation de l'API

Scrapers similaires