Gratis værktøj
Robots.txt-tjekker
Indtast et domæne for at hente robots.txt direkte fra sitet. Værktøjet viser User-agent-grupper, regler og om forsiden ser ud til at være blokeret for Googlebot (*).
Indtast domæne
Vi henter https://domæne/robots.txt og parser reglerne for dig.
Tolkningen er forenklet. Crawlers kan opføre sig forskelligt, og regler afhænger af præcis path-matching.