Crawler

ProtanAIBot

Se hai visto questo crawler sul tuo sito, qualcuno ha misurato la visibilità AI del tuo sito tramite protan.ai. Di seguito cosa fa, cosa non fa e come fermarlo.

User-agent ProtanAIBot/1.0 (+https://protan.ai/bot)
Limite di frequenza Al massimo 1 richiesta al secondo per host
Percorsi letti / · /robots.txt · /llms.txt · /sitemap.xml
Metodo Solo GET. Non invia moduli, non effettua login, non scrive nulla.
Timeout Connessione 5 s · totale 15 s · al massimo 5 MB

Come fermarlo

bastano due righe in robots.txt

User-agent: ProtanAIBot
Disallow: /

Dopo aver aggiunto questa regola il tuo sito non viene più scansionato. Non aggiriamo la regola; un crawler che ignora robots.txt farebbe qualcosa che nemmeno le AI che misuriamo fanno.

Una cosa utile da sapere: un robots.txt che blocca tutti con User-agent: * blocca anche GPTBot e ClaudeBot. Se vuoi fermare solo noi, scrivi una regola dedicata a noi come mostrato sopra; un blocco generale azzera la tua visibilità nelle AI.

Per domande o segnalazioni, scrivici; possiamo trovare il record della scansione e spiegarti cosa è successo.