Tilføj regler til robots.txt.

Hvis du f.eks. i forbindelse med søgemaskineoptimering vil tilpasse din robots.txt kan det sagtens lade sig gøre.

Du kan læse mere om robots.txt bl.a. her hos Google:

Introduktion til robots.txt hos Google Search Central (åbner i en ny fane)

Du tilføjer dine egne indstillinger ved at lægge dem ind i filen direkte fra menuen ‘SEO’ -> ‘Robots.txt’

(åbner et større billede)

Test dine ændringer

Når du har lavet ændringer til din robots.txt er det en god sikkerhed lige at tjekke om du har fået blokeret noget der ikke skulle. Tjek derfor både f.eks. webadressen til en kategori, produkt samt den som du ville blokere. Du kan bruge et gratis online værktøj som for eksempel robots.txt-testeren fra technicalseo.com (åbner i en ny fane).