Dwie różne rzeczy, które łatwo pomylić
W dyskusji o robotach AI miesza się dwie sprawy, które mają zupełnie inne konsekwencje.
| Co robi robot | Kto to | Co dla Ciebie znaczy |
|---|---|---|
| Pobiera strony, żeby uczyć model | GPTBot, ClaudeBot, Google-Extended | Twoja treść trafia do modelu na stałe, bez odnośnika i bez ruchu zwrotnego |
| Szuka w trakcie odpowiedzi | OAI-SearchBot, PerplexityBot, ChatGPT-User | Twoja firma może zostać wymieniona w odpowiedzi na pytanie klienta |
Blokując pierwszą grupę, chronisz treść. Blokując drugą, znikasz z poleceń. To nie jest ta sama decyzja i nie musi zapadać razem.
Kiedy blokada ma sens
- Wydawca albo autor. Sprzedajesz artykuły, kursy, raporty. Model, który wchłonie całość, zacznie odpowiadać zamiast Ciebie.
- Baza danych jako produkt. Katalog, wyszukiwarka, zestawienie cen. Twoja wartość siedzi w kompletności zbioru.
- Treść objęta umową. Materiały, do których nie masz pełnych praw albo które są objęte licencją zakazującą dalszego wykorzystania.
Kiedy blokada szkodzi
- Usługa świadczona na miejscu. Restauracja, warsztat, gabinet, salon. Klient nie kupuje Twojego tekstu, tylko przychodzi pod adres.
- Handel lokalny. Sklep, w którym trzeba być, żeby coś kupić.
- Każda firma, która chce, żeby ktoś ją polecił. A to większość.
Dla tej grupy blokada jest kosztem bez korzyści. Chronisz opis wnętrza lokalu przed modelem, a w zamian tracisz szansę, że model wskaże Twój adres komuś, kto właśnie szuka miejsca na kolację.
Jak zrobić jedno bez drugiego
Wpisz w robots.txt zgodę dla robotów wyszukujących i blokadę dla uczących:
User-agent: OAI-SearchBot
Allow: /
User-agent: ChatGPT-User
Allow: /
User-agent: PerplexityBot
Allow: /
User-agent: GPTBot
Disallow: /Pełną listę robotów i gotowy plik dla firmy, która chce być polecana, podajemy we wpisie o GPTBot i robots.txt.
Pułapka: blokada, której nie ustawiłeś
W audytach częściej znajdujemy blokadę przypadkową niż celową. Najczęstsze źródła to wtyczka do prywatności, ustawienie WordPressa z czasów budowy strony oraz włączona w panelu Cloudflare opcja blokowania robotów AI, która działa ponad plikiem robots.txt.
Jeśli poprawiłeś plik, a nic się nie zmienia, sprawdź właśnie Cloudflare. To najczęstszy powód, dla którego poprawka nie działa.
Nie masz pewności, jak stoisz? W darmowym skanie sprawdzamy przy okazji Twój robots.txt i piszemy w raporcie, czy coś blokuje asystentów.