Robots.txt-generatorverktyg

Robots.txt-generatorverktyg

Robots.txt är en textfil som går in i domänroten och genomsöks av sökmotorer. Den innehåller grundliga direktiv om webbsidors indexering för sökrobotar. Noggrannheten och hastigheten på en webbplatss indexering beror direkt på giltigheten hos en robots.txt-fil, så sökmotorer som Google kan identifiera vilka sidor från en webbplats som inte är relevanta.

Det här verktyget tillåter snabb generering av robots.txt-filer som måste kopieras och sparas i domänroten på en webbplats. För att skapa en text behöver du bara välja en sökmotor som du tycker är lämplig för indexering (eller så kan du också välja att inte indexera några sökmotorer du vill ha) och ange en webbplatskarta i en inmatningsfält.