Vai al contenuto

Centro di Ricerca

Studi mensili su come i siti più visitati di ogni paese dell’UE trattano i crawler di IA e l’accessibilità. Solo totali, nessun sito nominato, riutilizzo libero con CC BY 4.0.

Come sono fatti gli studi

Ogni mese prendiamo fino a 200 siti popolari per paese dell’UE — domini nazionali in HTTPS, uno per dominio registrato — dall’elenco pubblico Chrome UX Report dei primi 10.000 siti di ogni paese. Ne risulta un campione fino a 5400 siti in 27 paesi.

Il nostro crawler, RankProofBot, legge il robots.txt di ogni sito e lo rispetta, poi recupera /llms.txt e la home page. Conta ciò che trova e non conserva dati per sito: i risultati sono totali per paese e per l’UE. I siti che ci bloccano, non rispondono o costruiscono la home page solo con JavaScript sono indicati come esclusi, non conteggiati come risultati.

Sono controlli volutamente ristretti di una pagina per sito. Lo studio sull’accessibilità cerca cinque barriere nell’HTML grezzo, che non è un audit di accessibilità; lo studio sui crawler di IA legge le regole del robots.txt, non ciò che i crawler fanno davvero.

Ogni pagina di studio ha la tabella completa per paese, download CSV e JSON e risultati pronti da citare con licenza CC BY 4.0. Se trovi un errore, segnalacelo dalla pagina dei contatti e lo correggeremo.

CC BY 4.0 — attribuzione richiesta.