Emploi

Indeed Scraper

indeed.com

Indeed est le plus grand site d'emploi et protège ses résultats de recherche derrière une détection de bots qu'une requête simple ne peut pas franchir. ScrapeUnblocker rend les annonces dans un vrai moteur de navigateur et renvoie l'intitulé, l'entreprise, le lieu et le salaire de chaque offre, tenant 99,4% sur un éventail de recherches de postes.

Ce que vous pouvez extraire

• Intitulé du poste, entreprise et lieu
• Fourchette de salaire lorsqu'indiquée
• Type de contrat et date de publication
• Note de l'entreprise et nombre d'avis
• Extrait de la description et URL de candidature

Comment le scraper

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/getPageSource?url=https%3A%2F%2Fwww.indeed.com%2Fjobs%3Fq%3Dsoftware%2Bengineer&parsed_data=true"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/getPageSource",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"url": "https://www.indeed.com/jobs?q=software+engineer", "parsed_data": True},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.getPageSource({
  url: 'https://www.indeed.com/jobs?q=software+engineer',
  parsedData: true,
});
console.log(results);

Les requêtes sont en POST et passent leurs paramètres dans la query string. Le rendu navigateur a toujours lieu : aucun flag à activer.

Lire la documentation de l'API

Scrapers similaires