Verificatore Compatibilità AI Crawlers
I bot IA possono vedere il tuo sito web? Inserisci un URL per verificare la compatibilità con 12 crawler IA. Analizziamo robots.txt, header X-Robots-Tag e meta tag robots per fornirti un quadro completo.
Recupereremo il robots.txt e la pagina per analizzare tutte e 3 le livelli di controllo degli accessi.
Compatibilità AI Crawlers
Punteggio
Compatibilità per Bot IA
Livelli di Controllo degli Accessi
Nessuna restrizione trovata Non trovato
Trovato Non rilevato
Trovato Non rilevato
Non rilevato
Verifiche
Sitemap
Cosa sono gli AI crawlers?
Gli AI crawlers sono bot automatizzati utilizzati da aziende come OpenAI, Anthropic, Google e altre per scoprire e indicizzare contenuti web per prodotti IA. Come i crawler dei motori di ricerca (Googlebot), gli AI crawlers rispettano le direttive robots.txt, gli header X-Robots-Tag e i tag <meta> robots.
Tre livelli di controllo degli accessi:robots.txt — Controlla quali bot possono accedere a quali percorsi sul tuo sito (a livello di sito).X-Robots-Tag — Header HTTP che controlla l'indicizzazione a livello di pagina o risorsa.Meta robots — Tag HTML che controllano l'indicizzazione per pagina, con override specifici per bot.
Questo strumento verifica tutti e 3 i livelli simultaneamente per 12 principali crawler IA, fornendo una vista unificata della compatibilità.
Scopri di più su robots.txt e meta tag robots.