robots.txt är en fil många webbdesigners plats på sina servrar för att styra hur sökrobotar " krypa " deras webbplats . En stark robots.txt -fil kan hjälpa direkta platser , som Google och Bing , till relevant innehåll och blockera dem från att komma åt skyddad databas . Aktivera robots.txt kan ta lite arbete , men inaktivera det är mycket lättare . Du kan alltid aktivera den igen senare . Instruktioner
1
logga in på servern mapp som innehåller filen robots.txt.
2
Döp din något filen robots.txt annat , till exempel " robotsdisabled.txt " eller " robotsoff.txt . " I många konfigurationer server tillgång , kan du helt enkelt klicka på filnamnet och vänta ett par sekunder för namnet för att markera att göra så . Något annat än den exakta stavningen " robots.txt " kommer att stänga av den , samtidigt som filen på din server . Du kan aktivera den igen när som helst genom att ändra namnet tillbaka .
3
Spara ändringarna till din server . Nästa gång någon sökmotor genomsöker din webbplats , kommer den att ignorera funktionshindrade filen .
