Unternehmensdaten
Ahrefs Scraper
ahrefs.com
Ahrefs bietet auf seiner Website eine Reihe kostenloser SEO-Tools für nicht angemeldete Besucher an, und jedes davon verlangt ein Cloudflare-Turnstile-Token, bevor es antwortet. Ein dedizierter Plugin-Endpoint führt sieben dieser Tools aus und gibt ihre Antworten bereits geparst zurück. Das Tool wählst du mit tool. authority liefert das Domain Rating, Backlinks, verweisende Domains und jeweils den Dofollow-Anteil; backlinks ergänzt die Top-Backlinks mit der verlinkenden Seite, ihrem Titel, dem Ankertext, dem Text rund um den Link und dem DR der verlinkenden Website; traffic liefert den monatlichen organischen Traffic und seinen Wert in USD, den Traffic-Verlauf, Top-Seiten, Top-Länder und Top-Keywords, weltweit oder für ein Land; broken-links liefert defekte Backlinks, die auf die Website zeigen, und defekte Links auf ihren Seiten. Diese Tools nehmen eine Domain oder URL als target, und mode legt den Umfang fest: die Domain mit ihren Subdomains, nur die Domain, alles unter einem URL-Präfix oder genau eine URL. Die Keyword-Tools nehmen keyword und ein Land: keyword-difficulty liefert den KD-Wert von 0 bis 100, wie viele verweisende Domains eine Seite für die Top 10 braucht, und die SERP, aus der er gelesen wurde; keywords liefert Google-Keyword-Ideen und Fragen-Ideen mit ihrer Difficulty und ihrem Suchvolumen-Bereich; serp liefert die Top-Ergebnisse bei Google mit DR, UR, Backlinks, verweisenden Domains, Traffic und Keywords für jedes organische Ergebnis, dazu die Blöcke AI Overview, Shopping, Local, News und Fragen. Die Zahlen sind die von Ahrefs selbst, so wie seine kostenlosen Tools sie zeigen; es braucht weder ein Ahrefs-Konto noch einen Login oder einen API-Schlüssel.
Was Sie extrahieren können
- Domain Rating (DR), Gesamtzahl der Backlinks und verweisenden Domains, jeweils mit dem Dofollow-Anteil
- Top-Backlinks: verlinkende URL, Ziel-URL, Seitentitel, Ankertext, der Text rund um den Link und der DR der verlinkenden Website
- Monatlicher organischer Traffic und sein Wert in USD, Traffic-Verlauf, Top-Seiten, Top-Länder und Top-Keywords, weltweit oder für ein Land
- Defekte Backlinks, die auf eine Website zeigen, und defekte ausgehende Links auf ihren Seiten
- Keyword Difficulty (KD 0-100) und die verweisenden Domains, die eine Seite für die Top 10 braucht
- Google-Keyword-Ideen und Fragen-Ideen mit Difficulty und Suchvolumen-Bereichen
- Die Google-SERP für ein Keyword mit DR, UR, Backlinks, verweisenden Domains, Traffic, Wert und Keywords pro organischem Ergebnis, dazu die Blöcke AI Overview, Shopping, Local, News und Fragen
- Umfang des Ziels: eine Domain mit oder ohne ihre Subdomains, ein URL-Präfix oder genau eine URL
Dedizierte Endpoints
/seo/ahrefs Die kostenlosen SEO-Tools von Ahrefs
Sieben der kostenlosen Tools von Ahrefs hinter einem Endpoint, ausgewählt mit tool. authority, backlinks, traffic und broken-links nehmen target (eine Domain oder URL) und mode (subdomains, domain, prefix oder exact): domainRating, backlinks, referringDomains, dofollowBacklinksPercent und dofollowReferringDomainsPercent; backlinks ergänzt topBacklinks (urlFrom, urlTo, title, anchor, textBefore, textAfter, domainRating); traffic liefert organicTraffic, trafficValueUsd, trafficHistory, topPages, topCountries und topKeywords, mit country für einen Markt und protocol; broken-links liefert eingehende und ausgehende defekte Links (inbound, outbound). keyword-difficulty, keywords und serp nehmen keyword und country (Standard us): difficulty, referringDomainsToRank und results; ideas und questionIdeas mit difficulty und volume, dazu totalIdeas und totalQuestionIdeas (questions=false lässt die Fragen weg); results mit Metriken für jedes organische Ergebnis und die übrigen SERP-Blöcke. Jede Antwort enthält tool, query, source und found.
So wird es gescrapt
curl -X POST \
-H "X-ScrapeUnblocker-Key: $SU_API_KEY" \
"https://api.scrapeunblocker.com/seo/ahrefs?tool=backlinks&target=github.com"import requests
resp = requests.post(
"https://api.scrapeunblocker.com/seo/ahrefs",
headers={"X-ScrapeUnblocker-Key": SU_API_KEY},
params={"tool": "backlinks", "target": "github.com"},
)
print(resp.text)import { ScrapeUnblockerClient } from 'scrapeunblocker';
const su = new ScrapeUnblockerClient({ apiKey: process.env.SU_API_KEY });
const backlinks = await su.ahrefs('backlinks', { target: 'github.com' });
const ideas = await su.ahrefs('keywords', { keyword: 'running shoes', country: 'us' });
console.log(backlinks);
console.log(ideas);Requests sind POST und übergeben ihre Parameter im Query-String. Browser-Rendering findet immer statt - dafür gibt es kein Flag.
Beispielantwort
{
"tool": "backlinks",
"query": { "target": "github.com", "mode": "subdomains" },
"source": "https://ahrefs.com/backlink-checker",
"found": true,
"domainRating": 97.0,
"backlinks": 4800493963,
"referringDomains": 2387109,
"dofollowBacklinksPercent": 91,
"dofollowReferringDomainsPercent": 95,
"topBacklinks": [
{
"urlFrom": "https://openai.com/index/chatgpt/",
"urlTo": "https://github.com/openai",
"title": "Introducing ChatGPT | OpenAI",
"anchor": "(opens in a new window)",
"textBefore": "",
"textAfter": "",
"domainRating": 93,
"redirectChain": [],
"inRenderedHtml": true,
"inRawHtml": true
},
{
"urlFrom": "https://duckduckgo.com/",
"urlTo": "https://github.com/duckduckgo/tracker-blocklists",
"title": "DuckDuckGo - Protection. Privacy. Peace of mind.",
"anchor": "list of trackers",
"textBefore": "more , which all help cover different tracking angles. Our",
"textAfter": "is open source, along with the list of exceptions we",
"domainRating": 91,
"redirectChain": [],
"inRenderedHtml": true,
"inRawHtml": false
}
]
}Häufige Fragen
Ist das Scrapen von Ahrefs legal?
Das Sammeln der Zahlen, die Ahrefs in seinen kostenlosen, öffentlichen SEO-Tools zeigt, ist in vielen Rechtsordnungen zulässig, aber die Regeln hängen von deinem Land, den erhobenen Daten und ihrer Verwendung ab. Die Zahlen sind Schätzungen und Indexdaten von Ahrefs, nicht die Analytics der Website, stelle sie also als Ahrefs-Zahlen dar. ScrapeUnblocker gibt zurück, was die kostenlosen Tools zeigen; was du sammelst und wie du es nutzt, ist deine Entscheidung.
Wie scrape ich Ahrefs, ohne blockiert zu werden?
Die kostenlosen Tools von Ahrefs antworten nur auf eine Anfrage mit einem gültigen Cloudflare-Turnstile-Token, das ein Browser erhält, wenn er die Prüfung von Cloudflare besteht, und Ahrefs weist manche Adressen direkt ab. Das Plugin /seo/ahrefs holt dieses Token in einem echten Chrome, teilt es zwischen Calls, solange es gültig ist, und sendet jede Tool-Anfrage über einen ISP-Exit an die eigene API der kostenlosen Tools von Ahrefs, wobei es zu einem frischen Exit wechselt, wenn einer abgewiesen wird. Die meisten Calls brauchen überhaupt keinen Browser; ein Call, der zuerst ein neues Token holen muss, dauert meist weniger als zehn Sekunden länger. Im Benchmark von ScrapeUnblocker kamen bei 99,1 % von 1.139 Calls über alle sieben Tools, mit einer anderen Domain oder einem anderen Keyword pro Call, Daten zurück, etwa 2,7 s pro Call.
Welche Ahrefs-Tools deckt das Plugin ab?
Sieben der kostenlosen Tools von Ahrefs: Website Authority Checker (tool=authority), Backlink Checker (backlinks), Traffic Checker (traffic), Broken Link Checker (broken-links), Keyword Difficulty Checker (keyword-difficulty), Keyword Generator (keywords) und SERP Checker (serp). Die Seitennamen von Ahrefs und Kürzel wie dr, kd oder keyword-generator funktionieren ebenfalls. Die kostenlosen Tools zeigen eine Zusammenfassung statt des vollständigen Berichts, den ein bezahltes Ahrefs-Konto sieht: die Top-Backlinks, -Seiten, -Länder und -Keywords statt aller, und Keyword-Volumen als Bereiche wie 10K+, mit volumeMin als Zahl.
Brauche ich ein Ahrefs-Konto oder einen API-Schlüssel?
Nein. Die API von Ahrefs braucht ein Ahrefs-Abonnement und einen API-Schlüssel; das Plugin braucht beides nicht und auch keinen Login: Sende das Tool mit einer Domain oder einem Keyword und deinem ScrapeUnblocker-Schlüssel und bekomme die Antwort als JSON zurück. Du bekommst dieselben Zahlen, die Ahrefs nicht angemeldeten Besuchern in seinen kostenlosen Tools zeigt. Die Keyword-Tools durchsuchen den Google-Markt, den du als country übergibst (standardmäßig us), und traffic ist weltweit, solange du kein Land übergibst.
Was passiert, wenn Ahrefs keine Daten zu einer Domain oder einem Keyword hat?
Eine Domain oder ein Keyword, zu dem Ahrefs keine Daten hat, kommt mit found: false und leeren oder null gesetzten Feldern des Tools zurück, sodass du es von einem Fehler unterscheiden kannst, der einen Fehlerstatus liefert: 400, wenn Ahrefs das Ziel oder Keyword ablehnt, 502, wenn Ahrefs nicht erreichbar war, was einen erneuten Versuch wert ist. query gibt das aufgelöste target, mode, keyword und country zurück, sodass sich eine Reihe von Calls ihren Eingaben zuordnen lässt.
Wie viel kostet das Scrapen von Ahrefs?
Jeder Call ist eine Anfrage: ein Tool, eine Domain oder ein Keyword. 1 Anfrage = 1 Credit, 1,00 EUR pro 1.000 bei Pay-as-you-go, bis hinunter zu etwa 0,55 EUR pro 1.000 im Ultimate-Tarif. Blockierungen und Timeouts werden nicht berechnet, und die kostenlose Testphase umfasst 500 Anfragen ohne Karte.
Ähnliche Scraper
Ahrefs sowie weitere Namen und Marken von ahrefs.com gehören ihrem Inhaber und werden hier nur verwendet, um die Website zu bezeichnen, mit der diese API arbeitet. ScrapeUnblocker ist ein unabhängiger Dienst und steht in keiner Verbindung zum Inhaber von ahrefs.com, der ScrapeUnblocker weder unterstützt noch sponsert.
Starten Sie noch heute mit dieser Seite
Kostenloses Kontingent inklusive. Zum Testen ist keine Kreditkarte nötig.