Najpotężniejszy darmowy kreator robots.txt – wszystko na żywo
Włącz opcje po lewej → kod generuje się automatycznie
– wszystko, co musisz wiedzieć przed kliknięciem „Pobierz”
Wklejasz pełne adresy do sitemap.xml (np. sitemap-index.xml, sitemap-images.xml). To najważniejsza linijka w całym pliku – bez niej Google, Yandex i Bing mogą przegapić nawet 30% Twoich podstron.
Tylko dla Yandexa. Wskazujesz preferowaną wersję domeny (np. twojastrona.pl). Działa jak globalny canonical.
Googlebot, Bingbot, YandexBot, DuckDuckBot, Baiduspider – zawsze Allow: / Opcjonalnie własny crawl-delay (Yandex i Baidu potrafią zalać serwer – 2 i 5 sekund to złoty standard 2025).
Yandex i Baidu ignorują globalny crawl-delay – trzeba ustawić osobno. 2 sekundy dla Yandexa i 5 dla Baidu = spokój na serwerze.
Usuwa śmieci z URL-i (fbclid, gclid, utm_*, ref, sessionid itp.). Czyste logi, mniej duplikatów w Google Search Console.
Przykład:
/wp-admin/
/admin/
/private/
/cgi-bin/
*.pdf$
*?replytocom=
/tag/*/?sortby=
Obsługa wildcardów * i $ (koniec ścieżki) – dokładnie tak, jak lubią Google i Yandex.
| Typ strony | Co obowiązkowo włączyć |
|---|---|
| 99% zwykłych stron i sklepów | Sitemap + blokada katalogów admin (/wp-admin/, /admin/ itp.) + Clean-param (fbclid, gclid, utm_* itp.) + blokada GPTBot / ClaudeBot / CCBot |
| Blogi i sklepy z własnymi grafikami | Wszystko z góry + blokada botów obrazków (Googlebot-Image, Bingbot-Image itp. – żeby AI nie kradło zdjęć) |
| Strony, które NIE chcą być w żadnym AI | Wszystkie blokady AI: • GPTBot + ChatGPT-User • ClaudeBot + anthropic-ai • PerplexityBot • Applebot-Extended • CCBot + Bytespider + Amazonbot + blokada obrazków (opcjonalnie) |
robots.txt to tylko „grzeczna prośba”. Złe boty i tak wejdą. Do prawdziwej, twardej blokady po IP, klasach sieci i User-Agent używaj generatora .htaccess na Pro-Link.pl.
Generator działa 100% w Twojej przeglądarce – nic nie wysyłamy na serwer, zero logów, zero reklam.
Niezbędne ciasteczka umożliwiają prawidłowe funkcjonowanie strony internetowej, zapewniając podstawowe funkcje, takie jak nawigacja po stronie i dostęp do jej zabezpieczonych obszarów. Bez tych ciasteczek strona nie może działać prawidłowo.
Niezbędne ciasteczka umożliwiają prawidłowe funkcjonowanie strony internetowej, zapewniając podstawowe funkcje, takie jak nawigacja po stronie i dostęp do jej zabezpieczonych obszarów. Bez tych ciasteczek strona nie może działać prawidłowo.
Wyrażam zgodę na wykorzystywanie plików cookie Google Analytics w celu prowadzenia anonimowych statystyk, analizy sposobu korzystania ze strony oraz jej ulepszania, przy czym część danych może być także używana przez Google do personalizacji i pomiaru skuteczności reklam.
Wyrażam zgodę na wykorzystywanie przez Google plików cookie i podobnych technologii w celu wyświetlania reklam spersonalizowanych, pomiaru ich skuteczności oraz zapewnienia bezpieczeństwa strony poprzez odróżnianie użytkowników od botów.
Ciasteczka (cookies) to małe pliki tekstowe, które mogą być wykorzystywane przez strony internetowe, by usprawnić doświadczenie użytkownika. Zgodnie z przepisami prawa, możemy przechowywać na Twoim urządzeniu ciasteczka, które są ściśle niezbędne do funkcjonowania tej strony. W przypadku wszystkich innych typów ciasteczek potrzebujemy Twojej zgody. Oznacza to, że ciasteczka klasyfikowane jako niezbędne są przetwarzane na podstawie art. 6 ust. 1 lit. f RODO. Wszystkie pozostałe ciasteczka, czyli te z kategorii preferencji i marketingu, są przetwarzane na podstawie art. 6 ust. 1 lit. a RODO. Nasza strona korzysta z różnych rodzajów ciasteczek. Niektóre ciasteczka są umieszczane przez usługi stron trzecich, które pojawiają się na naszych stronach. W każdej chwili możesz zmienić lub wycofać swoją zgodę z Oświadczenia o ciasteczkach na naszej stronie internetowej. Dowiedz się więcej o tym, kim jesteśmy, jak możesz się z nami skontaktować i jak przetwarzamy dane osobowe, zapoznając się z naszą Polityką Prywatności.