Migliaia di richieste attribuite a un bot AI non equivalgono a migliaia di persone interessate alla tua attività.
I registri del server, i report di Cloudflare e gli strumenti di analisi descrivono fenomeni diversi. Questa guida aiuta a preparare un controllo con chi gestisce il sito: riconoscere le richieste automatiche, capire quali pagine vengono lette e tenere separati i risultati commerciali. Non serve modificare tutte le protezioni per iniziare a raccogliere le informazioni.
Indice della guida
Separa richieste automatiche, visite e contatti
Un crawler è un programma che recupera risorse dal web. Può richiedere pagine, immagini o altri file; la quantità delle richieste non corrisponde al numero delle persone che hanno visitato il sito. Anche una singola attività automatica può coinvolgere più risorse e ripetersi nel tempo.
Un referral, invece, indica una provenienza riconoscibile di una visita. Un contatto commerciale richiede un ulteriore passaggio, come una richiesta ricevuta. Prepara tre colonne separate nel resoconto: accessi automatici, visite attribuibili e contatti verificati. Se un dato manca, scrivi “non disponibile” anziché considerarlo zero. Per leggere le sorgenti nei report puoi approfondire il traffico da assistenti AI in GA4.
Riconosci lo scopo del bot prima di interpretarlo
La documentazione ufficiale OpenAI sui crawler distingue OAI-SearchBot, dedicato alla ricerca, da GPTBot, relativo all’addestramento. ChatGPT-User riguarda determinate azioni avviate dagli utenti e non determina l’inclusione nella ricerca. Le preferenze per OAI-SearchBot e GPTBot sono indipendenti.
Anthropic distingue a sua volta tre bot: Claude-SearchBot per la ricerca, Claude-User per recuperi collegati alle richieste degli utenti e ClaudeBot per contenuti potenzialmente utilizzabili nell’addestramento. Quindi una riga con “Claude” non basta per concludere che un cliente abbia ricevuto una raccomandazione.
Chiedi al tecnico di riportare il nome completo e la funzione. Conserva le decisioni dell’azienda sui diversi accessi: un interesse per la ricerca non implica la stessa scelta per ogni utilizzo dei contenuti.
Prepara un controllo dei registri con il tecnico
Per una verifica iniziale bastano poche pagine pubbliche: homepage, servizio principale, contatti e una guida. Indica il periodo da esaminare e l’eventuale momento di una prova. Il tecnico può cercare hostname, percorso richiesto, agente dichiarato, stato della risposta e volume dei dati, utilizzando i registri effettivamente disponibili.
Il nome nell’intestazione User-Agent è un elemento dichiarato dalla richiesta: va confrontato con i metodi e i riferimenti ufficiali del fornitore. OpenAI pubblica intervalli IP per i propri agenti; Anthropic rimanda a un elenco di provenienze. Una verifica d’identità è distinta dalla valutazione del contenuto letto.
Non condividere l’intero registro se contiene parametri o dati estranei alla verifica. Chiedi un estratto utile, con il contesto necessario a interpretarlo, e concorda come conservare il risultato insieme alla configurazione esaminata.
Leggi risposte e percorsi senza trasformarli in vendite
Se il sito usa Cloudflare, la documentazione di AI Crawl Control descrive viste per richieste, trasferimento dati e codici di risposta. I percorsi più richiesti aiutano a capire quali parti del sito vengono recuperate. Le analisi dei referral hanno disponibilità legata al piano.
Un codice 2xx indica una risposta riuscita; un 3xx segnala un reindirizzamento, mentre 4xx e 5xx richiedono una valutazione dell’errore. Chiedi anche che cosa è stato restituito: il solo volume non dimostra che il contenuto atteso fosse presente.
Se aumentano le richieste a un catalogo, controlla se sono cambiate pagine, file o frequenza degli accessi. Non dedurre che siano aumentate le vendite. Se invece un errore coincide con una prova fallita, passa alla diagnosi dei blocchi Cloudflare.
Esempio: molte richieste a un catalogo, poche visite
Un laboratorio vede 2.400 richieste attribuite a servizi AI in una settimana e 18 sessioni da provenienze AI riconoscibili. Sono numeri inventati per illustrare il controllo. Il titolare inizialmente pensa di aver perso migliaia di clienti; il tecnico osserva invece che molte richieste riguardano immagini e pagine dello stesso catalogo.
Il resoconto separa bot per l’addestramento, bot di ricerca e accessi collegati alle richieste degli utenti. Non divide 18 per 2.400 per calcolare una conversione: i due conteggi hanno unità e perimetri diversi. Esamina poi le pagine di ingresso delle sessioni riconoscibili e verifica quali richieste commerciali sono state realmente ricevute.
Il controllo porta a una decisione concreta: migliorare il collegamento dal catalogo alla richiesta di lavorazione e far approfondire un errore ricorrente su un PDF. Nessuno dei due interventi richiede di attribuire vendite a ogni accesso automatico.
Decidi l’intervento dal problema osservato
Se il sito funziona e le letture sono coerenti con le scelte dell’azienda, non occorre cambiare regole soltanto per ridurre un numero. Se emerge un carico problematico, chiedi di quantificare l’effetto sul servizio. Se una pagina pubblica necessaria non è raggiungibile, individua il blocco preciso prima di autorizzare la correzione.
Conserva un riepilogo con domanda iniziale, fonte dei dati, periodo, esito e prossimo controllo. “Il bot ha recuperato queste pagine” è una conclusione diversa da “l’attività viene consigliata”. Per il secondo obiettivo usa un registro di verifiche delle risposte AI, mantenendolo separato dai log.
Valuta i risultati aziendali con richieste utili, appuntamenti e clienti effettivi. Il controllo dei crawler serve soprattutto a comprendere l’accesso tecnico e a evitare decisioni basate su contatori interpretati male.
Domande frequenti
Una visita di GPTBot significa che ChatGPT consiglierà la mia attività?
No. GPTBot riguarda l’addestramento, mentre OAI-SearchBot ha una funzione di ricerca. Nessun singolo accesso dimostra una futura raccomandazione.
Posso confrontare direttamente richieste del server e sessioni GA4?
Puoi affiancarle per capire il contesto, ma non sono conteggi equivalenti. Richieste di risorse, sessioni e contatti descrivono eventi diversi.
Basta leggere il nome del bot per identificarlo?
No. Il nome dichiarato nella richiesta va verificato con i riferimenti e i metodi ufficiali pertinenti. Chiedi al tecnico di documentare il controllo.
Devo bloccare tutti i bot se vedo molte richieste?
Prima verifica che cosa stanno richiedendo e se esiste un problema concreto. Una modifica indiscriminata può ostacolare accessi che vuoi consentire; l’intervento deve riguardare la causa osservata.
Fonti ufficiali e approfondimenti
Consulta i riferimenti ufficiali per verificare funzioni, impostazioni e limiti dei servizi utilizzati.