Jobs & Karriere

Indeed Scraper

indeed.com

Indeed ist die größte Jobbörse und sichert seine Suchergebnisse hinter einer Bot-Erkennung, die eine einfache Anfrage nicht überwindet. ScrapeUnblocker rendert die Anzeigen in einer echten Browser-Engine und liefert Titel, Unternehmen, Standort und Gehalt jeder Stelle und hält dabei 99,4% über eine Reihe von Rollensuchen.

Was Sie extrahieren können

• Stellentitel, Unternehmen und Standort
• Gehaltsspanne, wo angegeben
• Beschäftigungsart und Veröffentlichungsdatum
• Unternehmensbewertung und Anzahl der Bewertungen
• Auszug der Beschreibung und Bewerbungs-URL

So wird es gescrapt

curl -X POST \
  -H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
  "https://api.scrapeunblocker.com/getPageSource?url=https%3A%2F%2Fwww.indeed.com%2Fjobs%3Fq%3Dsoftware%2Bengineer&parsed_data=true"

import requests

resp = requests.post(
    "https://api.scrapeunblocker.com/getPageSource",
    headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
    params={"url": "https://www.indeed.com/jobs?q=software+engineer", "parsed_data": True},
)
print(resp.text)

import { ScrapeUnblockerClient } from 'scrapeunblocker';

const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });

const results = await su.getPageSource({
  url: 'https://www.indeed.com/jobs?q=software+engineer',
  parsedData: true,
});
console.log(results);

Requests sind POST und übergeben ihre Parameter im Query-String. Browser-Rendering findet immer statt - dafür gibt es kein Flag.

API-Dokumentation lesen

Ähnliche Scraper