Tester robots.txt
Ostatnia aktualizacja: 2026-10-30
Wklej plik robots.txt, podaj adres URL i wybierz robota. Tester stosuje udokumentowane reguły Google (najbardziej szczegółowa grupa user-agent, najdłuższa pasująca reguła, wieloznaczniki i kotwica $) i pokazuje, czy adres może być pobrany oraz który wiersz o tym decyduje.
Zablokowany adres może nadal pojawiać się w wynikach wyszukiwania, bez opisu, jeśli inne strony prowadzą do niego linki. Aby strona nie pojawiała się w wynikach, zezwól na pobieranie i użyj znacznika noindex.
Działa w Twojej przeglądarce. Nic, co wpiszesz, nie jest nigdzie wysyłane.
Jak to działa
Jedna grupa na robota
Robot przestrzega grupy ze swoją nazwą user-agent i ignoruje pozostałe; kilka grup o tej samej nazwie jest łączonych. Grupy * przestrzega tylko wtedy, gdy żadna grupa go nie wymienia. Numery wersji i gwiazdka na końcu nazwy są ignorowane.
Wygrywa najdłuższa reguła
Spośród reguł allow i disallow pasujących do ścieżki decyduje ta z najdłuższą ścieżką. Jeśli reguła allow i disallow są tej samej długości, wygrywa allow.
Wieloznaczniki i kotwica końca
* oznacza dowolny ciąg znaków, a $ na końcu — że adres musi się tam kończyć. Ścieżki rozróżniają wielkość liter i obejmują ciąg zapytania.
Liczą się tylko cztery pola
Google czyta user-agent, allow, disallow i sitemap. Inne wiersze, np. crawl-delay, są ignorowane, a tester je wypisuje, żebyś o nich wiedział.
Na podstawie: Google: jak Google interpretuje specyfikację robots.txt
Zrób to dla każdej strony z GSC Magic
To sprawdzenie jednego adresu względem wklejonego pliku. Z GSC Magic Twój agent AI może przejrzeć setki adresów przez API inspekcji URL Google i zobaczyć, które Google naprawdę zgłasza jako zablokowane przez robots.txt.
Sprawdź adresy z naszej mapy witryny i wypisz te, które Google zgłasza jako zablokowane przez robots.txt.
Które strony z wyświetleniami w ostatnich 90 dniach są teraz zablokowane przez robots.txt?
Pytania
Gdzie podział się tester robots.txt z Search Console?
Google wycofał stary tester i zastąpił go raportem robots.txt w Search Console, który pokazuje pobrane pliki i ich błędy. To narzędzie sprawdza, jak konkretny adres jest traktowany przez reguły.
Czy zablokowanie strony w robots.txt usuwa ją z Google?
Nie. Zablokowany adres nadal może być zaindeksowany, bez treści, jeśli inne strony linkują do niego. Użyj znacznika noindex na stronie dostępnej do pobrania, żeby nie pojawiała się w wynikach.
Czy roboty AI przestrzegają robots.txt?
Roboty z listy, np. GPTBot, OAI-SearchBot, ClaudeBot i PerplexityBot, są opisane przez swoich operatorów jako przestrzegające robots.txt. Każdy z nich stosuje własną grupę, a gdy jej nie ma — grupę *.
Czy wynik jest dokładnie tym, co robi Googlebot?
Tester stosuje opublikowaną przez Google interpretację Robots Exclusion Protocol. Google dodatkowo buforuje robots.txt nawet przez dobę i inaczej traktuje błędy serwera, więc po zmianie pliku sprawdź raport robots.txt w Search Console.
Poradniki na blogu: Zablokowano przez plik robots.txt: znajdź regułę i zdecyduj, czy odblokować