Narzędzie · bezpłatne

Czy boty AI mają dostęp do Twojej strony?

Sprawdzamy Twój plik robots.txt pod kątem 14 najważniejszych robotów skanujących sztucznej inteligencji (m.in. GPTBot, ClaudeBot, PerplexityBot, Google-Extended, CCBot), a dodatkowo samą stronę – nagłówki, meta robots i to, czy zapora WAF nie odrzuca ruchu botów. Odbierz wynik bez konieczności logowania.

Pobieramy publicznie dostępny plik robots.txt oraz wskazany adres (kilka żądań testowych) – nie wykonujemy żadnych zmian na Twojej stronie i nie zapisujemy Twoich danych.

14 botów AI w 4 kategoriach funkcjonalnych

Każdy z robotów AI ma własny identyfikator sieciowy (tzw. User-agent) i zupełnie inaczej wpływa na widoczność Twojej marki. Roboty wyszukiwawcze decydują o tym, czy AI zacytuje Cię w swoich odpowiedziach, natomiast roboty treningowe pobierają Twoje teksty, by uczyć na nich swoje modele.

Treningowe 3 boty

Skanują i pobierają Twoje treści, by uczyć na nich sztuczną inteligencję.

  • GPTBot OpenAI
  • ClaudeBot Anthropic
  • Google-Extended Google
Wyszukiwawcze 3 boty

Indeksują stronę na żywo. Jeśli je zablokujesz, znikniesz z gotowych odpowiedzi wyszukiwarek AI.

  • OAI-SearchBot OpenAI
  • PerplexityBot Perplexity
  • Claude-SearchBot Anthropic
Na żądanie 4 boty

Pobierają stronę na potrzeby konkretnej rozmowy lub akcji użytkownika (albo, jak OAI-AdsBot, sprawdzają stronę docelową reklamy). Uwaga: według dokumentacji OpenAI i Perplexity ich boty ChatGPT-User i Perplexity-User mogą nie stosować się do robots.txt – realnie zatrzyma je dopiero reguła na zaporze (WAF). Claude-User respektuje robots.txt.

  • ChatGPT-User OpenAI
  • Claude-User Anthropic
  • Perplexity-User Perplexity
  • OAI-AdsBot OpenAI
Common Crawl 4 boty

Zbierają dane do potężnego, otwartego archiwum (Common Crawl), z którego korzysta większość twórców dużych modeli AI na świecie.

  • CCBot Common Crawl
  • Applebot-Extended Apple
  • GoogleOther Google
  • Google-NotebookLM Google