robots.txt fortæller søgemaskiner hvad de må og ikke må indeksere

Filen robots.txt ligger i roden af hjemmesiden og bruges blandt andet til at fortælle søgemaskiner hvilke mapper der skal søges i og ikke søges i

Introduktion

Filen robots.txt ligger typisk i roden af hjemmesiden og bruges blandt andet til at fortælle søgemaskiner hvilke mapper der skal søges i og ikke søges i.

Her er et eksempel på en robots.txt fil.

Her kommer en forklaring.

Man kan have flere Allow: og Disallow: alt efter hvad man ønsker.

Her ses indholdet af min robots.txt.

Lær mere

The Web Robots Pages kan forklare mere om robots.txt filen.

Skriv din kommentar

Spørg mig om hvad som helst
Du kan også skrive direkte til mig på
Stem
Søg
Language

Select English to navigate the website in English. Things like the navigation menu and contact form will be in English, but the main content on each page will not be translated.