Agent AI to nie robot wyszukiwarki
Robot wyszukiwarki, taki jak Googlebot czy Claude-SearchBot, automatycznie przegląda sieć i buduje indeks. Agent działa inaczej: odwiedza stronę dlatego, że konkretna osoba poprosiła go o zadanie, na przykład „znajdź trzy firmy, które w przyszłym tygodniu wymienią okna w Gliwicach, i wyślij im zapytanie”. Za taką wizytą stoi więc realny klient.
Definicję i przykłady samego zjawiska znajdziesz w haśle o wyszukiwaniu agentowym. Ten poradnik skupia się na praktyce: jak agenci się przedstawiają, jak ich nie zablokować i co poprawić w kodzie strony.
Jak agenci identyfikują się na Twojej stronie
Dostawcy różnie opisują swoich agentów i różnie podchodzą do robots.txt. Poniżej zestawienie na podstawie dokumentacji Anthropic, OpenAI i Google, stan na październik 2026. Szczegóły zmieniają się często, więc przed zmianą reguł sprawdź aktualne strony dostawców.
| Agent lub fetcher | Kto wywołuje wizytę | Jak się identyfikuje | robots.txt według dostawcy |
|---|---|---|---|
| Claude-User (Anthropic) | Użytkownik Claude zadający pytanie | User-agent Claude-User, publikowana lista adresów IP | Anthropic deklaruje, że jego roboty respektują robots.txt |
| Claude w przeglądarce (Anthropic) | Użytkownik rozszerzenia w swojej przeglądarce Chrome | Anthropic nie opisuje osobnego user-agenta, rozszerzenie działa w przeglądarce użytkownika z jego logowaniami | Brak osobnego opisu w dokumentacji dla właścicieli stron |
| ChatGPT-User (OpenAI) | Użytkownik ChatGPT | User-agent ChatGPT-User | OpenAI pisze, że przy działaniach użytkownika reguły robots.txt mogą nie mieć zastosowania |
| ChatGPT agent (OpenAI) | Użytkownik trybu agenta w ChatGPT | Podpisane żądania HTTP (RFC 9421), nagłówek Signature-Agent z adresem chatgpt.com | OpenAI opisuje dopuszczanie ruchu w zaporach i CDN |
| Google-Agent (Google) | Użytkownik usługi Google z funkcjami agenta | User-agent Google-Agent, Google testuje też Web Bot Auth | Google pisze, że fetchery wywołane przez użytkownika zwykle ignorują robots.txt |
Zapora sieciowa i CDN: najczęstsza przyczyna problemów
Wiele stron blokuje agentów nie w robots.txt, ale w ustawieniach ochrony przed botami u dostawcy CDN lub w zaporze aplikacji (WAF). Agent dostaje wtedy stronę z wyzwaniem, błąd 403 albo pustą odpowiedź i wraca do użytkownika z informacją, że nie udało się odczytać strony.
Sprawdź reguły dla botów AI
Część dostawców CDN ma gotowe przełączniki blokujące „boty AI” jedną opcją. Zanim je włączysz, sprawdź, czy blokada obejmuje tylko roboty trenujące modele, czy także agentów działających na prośbę użytkownika.
Korzystaj z weryfikacji podpisów
OpenAI podaje, że ChatGPT agent jest rozpoznawany jako zweryfikowany lub podpisany agent m.in. w Cloudflare, Akamai, HUMAN i Vercel. Zamiast dopuszczać ruch po samej nazwie user-agenta, którą łatwo podrobić, oprzyj reguły na weryfikacji, którą wykonuje dostawca.
Nie usuwaj nagłówków po drodze
Jeśli ruch przechodzi przez dodatkowe proxy, upewnij się, że nie wycina ono nagłówków Signature, Signature-Input i Signature-Agent. Bez nich weryfikacja podpisu nie zadziała.
Wyzwania i CAPTCHA tylko tam, gdzie trzeba
Agenci nie powinni obchodzić zabezpieczeń typu CAPTCHA. Jeśli wyzwanie pojawia się na każdej podstronie, agent nie przeczyta nawet cennika. Ochronę zostaw tam, gdzie chroni coś realnego, na przykład przy logowaniu.
HTML, który agent rozumie
Część agentów przeglądających strony korzysta z kodu strony i jej struktury, podobnie jak technologie wspierające osoby z niepełnosprawnościami. Strona dobrze obsługiwana przez czytnik ekranu jest zwykle łatwiejsza także dla agenta.
- Kluczowa treść jest w HTML od razu po załadowaniu, a nie dopiero po przewinięciu, najechaniu kursorem czy kliknięciu w niestandardowy element.
- Przyciski są elementami button, a linki elementami a z opisowym tekstem, a nie klikalnymi blokami div.
- Każde pole formularza ma etykietę label powiązaną z polem, a komunikaty o błędach są tekstem przy polu.
- Nagłówki h1, h2 i h3 tworzą logiczny spis treści strony.
- Ikony i grafiki z informacją mają tekst alternatywny, a ceny nie są wyłącznie elementem obrazka.
- Okna typu pop-up i banery zgód da się zamknąć zwykłym przyciskiem i nie zasłaniają całej treści.
Informacje, których agent szuka najczęściej
Agent wykonuje zadanie użytkownika, więc szuka konkretów potrzebnych do porównania lub działania. Jeśli ich nie znajdzie, zwykle przejdzie do konkurencji, która je podaje.
Ceny lub widełki
Nawet orientacyjny cennik albo przykładowe koszty pozwalają agentowi uwzględnić firmę w porównaniu.
Obszar działania i terminy
Miasta, w których działasz, czas realizacji, godziny pracy, dostępność terminów.
Kontakt i sposób zamówienia
Telefon, e-mail, formularz, adres, a przy sklepie jasne zasady dostawy, zwrotu i płatności.
Dane strukturalne
Oznaczenia schema.org, takie jak Organization, LocalBusiness, Product czy Offer, porządkują nazwę, adres, ceny i dostępność w formie, którą łatwo odczytać maszynowo.
Formularze i akcje: co zostawić człowiekowi
Agenci zwykle proszą użytkownika o potwierdzenie przed działaniami, których nie da się cofnąć, takimi jak płatność czy wysłanie zamówienia. Po Twojej stronie warto zadbać o to, by każdy formularz kończył się jasnym podsumowaniem i potwierdzeniem, które da się odczytać jako tekst.
Nie musisz otwierać wszystkiego dla agentów. Panel klienta, płatności i dane osobowe powinny pozostać chronione logowaniem i zabezpieczeniami. Chodzi o to, by publiczna część strony, czyli oferta, ceny, kontakt i formularz zapytania, była dla agenta dostępna i zrozumiała.
Jak to przetestować
- Poproś agenta w ChatGPT lub Claude o wykonanie typowego zadania na Twojej stronie, na przykład znalezienie ceny i wysłanie zapytania, i obserwuj, gdzie się zatrzymuje.
- Przejrzyj logi serwera i zapory pod kątem odrzuconych żądań od Claude-User, ChatGPT-User, ChatGPT agent i Google-Agent.
- Przejdź stronę samą klawiaturą i czytnikiem ekranu. Miejsca, w których utkniesz, są zwykle problemem także dla agenta.
- Sprawdź stronę narzędziem do audytu dostępności i popraw błędy dotyczące etykiet, kontrastu i struktury nagłówków.
Najczęstsze pytania
Czy agenci AI respektują robots.txt?
To zależy od dostawcy. Anthropic deklaruje, że jego roboty, w tym Claude-User, respektują robots.txt. OpenAI pisze, że przy działaniach wywołanych przez użytkownika reguły robots.txt mogą nie mieć zastosowania, a Google podaje, że fetchery wywołane przez użytkownika zwykle je ignorują.
Czy powinienem blokować agentów AI?
Zwykle nie w publicznej części strony, bo za wizytą agenta stoi konkretny użytkownik, często potencjalny klient. Blokuj tylko tam, gdzie masz ku temu powód, na przykład przy masowym pobieraniu danych lub w strefach wymagających logowania.
Jak odróżnić prawdziwego agenta od bota podszywającego się pod niego?
Nazwę user-agenta łatwo podrobić. Pewniejsze są weryfikacja adresów IP z list publikowanych przez dostawców oraz weryfikacja podpisów żądań, którą dla ChatGPT agent wykonują m.in. Cloudflare, Akamai, HUMAN i Vercel.
Czy agent może złożyć zamówienie w moim sklepie?
W niektórych narzędziach tak, zwykle z potwierdzeniem przez użytkownika przed płatnością. Zakres funkcji zależy od dostawcy i kraju, dlatego warto testować swój proces zamówienia z popularnymi agentami.
Czy dostępność strony ma znaczenie dla agentów AI?
Tak. Agenci korzystają ze struktury strony, a poprawne etykiety, przyciski i nagłówki pomagają im tak samo jak użytkownikom czytników ekranu. Poprawa dostępności to jedna z najprostszych dróg do strony przyjaznej agentom.
Zobacz także
- Wyszukiwanie agentowe
- Roboty AI w robots.txt
- Dane strukturalne
- Optymalizacja konwersji (CRO)
- Tworzenie stron internetowych
- Audyt widoczności w AI
- Fora, Reddit i opinie a widoczność firmy w odpowiedziach AI
- Jak pojawić się w Google Discover: poradnik dla blogów firmowych i wydawców
- Produkty sklepu w odpowiedziach AI: jak trafić do wyników zakupowych Google i ChatGPT
