Jak używać
- W polu „Wzór” wybierz ustawienie początkowe, a w razie potrzeby wpisz ścieżki w polach „Zablokowane ścieżki” i „Dozwolone ścieżki”, po jednej w wierszu.
- Przy każdym bocie ustaw „Domyślny”, „Zezwól” lub „Blokuj”.
- W polu „Crawl-delay” wybierz opóźnienie albo pozostaw „Brak”. W polu „URL mapy witryny” wpisz adres mapy witryny.
- Zaznacz „Dodaj komentarz nagłówkowy”, jeśli chcesz umieścić komentarz na początku pliku.
- Sprawdź wybrany adres w sekcji „Testuj URL”, a potem użyj „Kopiuj” lub „Pobierz”.
Przykłady
WordPress z mapą witryny
Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php Sitemap: https://pracownia-ceramiki.example.pl/sitemap.xml
# robots.txt generated by AllRight Tools – https://allrighttools.com/robots-txt-generator/ User-agent: * Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php Sitemap: https://pracownia-ceramiki.example.pl/sitemap.xml
Blokada wszystkich botów z wyjątkiem Googlebota
Wzór: Blokuj wszystkich Googlebot: Zezwól URL lub ścieżka: /oferta/
User-agent: * Disallow: / User-agent: Googlebot Allow: /
FAQ
Gdzie umieścić plik robots.txt?
Wgraj plik robots.txt do katalogu głównego witryny, aby był dostępny pod adresem takim jak https://twoja-domena.pl/robots.txt.
Czy robots.txt zabezpiecza prywatne strony?
Robots.txt to prośba do robotów, a nie kontrola dostępu. Nie traktuj go jako zabezpieczenia prywatnych treści.
Czy tester pobiera robots.txt z mojej strony?
Tester sprawdza tylko wygenerowany plik lub wklejoną treść robots.txt. Działa w przeglądarce: nie pobiera podanego adresu URL ani nie wysyła wklejonego pliku na serwer.
Która reguła ma pierwszeństwo: Allow czy Disallow?
W testerze wygrywa najdłuższy pasujący wzorzec. Przy jednakowej długości pierwszeństwo ma Allow; wielkość liter w ścieżkach ma znaczenie.
Czy generator zapamięta moje reguły?
Zapamiętywane są tylko ustawienia: wzór, polityka dostępu, Crawl-delay, komentarz nagłówkowy i stany botów. Ścieżki, adresy map witryny, własne grupy user-agent i dane testera nie są zapisywane.