robots.txt er en fil mange web -designere plass på sine servere for å kontrollere hvordan søke roboter " gjennomgå" deres nettsted . En sterk robots.txt -fil kan hjelpe direkte nettsteder, som Google og Bing , til relevant innhold og blokkere dem fra å få tilgang beskyttet database . Aktivering av robots.txt kan ta litt arbeid , men invalidiserende det er mye enklere . Du kan alltid aktivere den senere . Instruksjoner
en

Logg inn på serveren mappen som inneholder robots.txt-filen .
2

Gi nytt navn robots.txt-filen noe annet, for eksempel " robotsdisabled.txt " eller " robotsoff.txt . " I mange server tilgang konfigurasjoner , kan du bare klikke filnavnet og vente et par sekunder for navnet for å markere å gjøre det. Alt annet enn den nøyaktige stavemåten " robots.txt " vil slå den av, mens du holder filen på serveren din. Du kan aktivere det når som helst ved å endre navnet tilbake .
3

Lagre endringene i serveren din. Neste gang en søkemotor gjennomsøker nettstedet ditt , vil den ignorere funksjonshemmede filen.