Come costruire un benchmark di visibilità AI ripetibile

Il dato da ricostruire è una prova, non soltanto una percentuale

Se due report dicono «40% di citazioni», chiedi quali risposte sono entrate nel calcolo. Uno potrebbe aver raccolto tutte le domande previste; l’altro soltanto quelle per cui il servizio ha risposto senza errori. La percentuale, da sola, non rende visibile la differenza.

La guida al monitoraggio della visibilità AI distingue report nativi, test, visite e contatti. Qui prepariamo il dataset dei test: una riga pianificata, un esito tracciabile e una regola di inclusione dichiarata. Non raccogliamo nuove risposte né misuriamo le prestazioni di un marchio reale.

Nota editoriale. Il metodo è una proposta operativa Niuexa, preparata con assistenza AI. Identificativi, date segnaposto, file e numeri del caso DEMO sono inventati. I template richiedono configurazione e dati reali prima di diventare un benchmark eseguito.

Congela il protocollo prima di creare le righe

Scrivi un protocollo con versione e responsabile della raccolta. Una versione deve identificare perimetro del marchio, alias ammessi, domini inclusi, domande esatte e condizioni. Se studi un gruppo con più prodotti, conta separatamente presenza del gruppo e presenza di almeno un marchio del portafoglio: il nome di un prodotto non prova che sia stato nominato il gruppo.

Per ogni combinazione di servizio, interfaccia, modalità, lingua e mercato conserva una serie distinguibile. «Google» non identifica da solo AI Mode, una risposta Gemini o un report Search Console. Analogamente, una chiamata API non diventa una conversazione nell’app soltanto perché proviene dallo stesso fornitore. Registra il modello visibile; se il servizio non lo espone, scrivi «non mostrato», senza dedurre una versione privata.

Documenta sessione nuova o conversazione preesistente, stato di accesso rilevante, personalizzazione osservabile, eventuali file o fonti aggiunti, finestra temporale e fuso. Non inserire credenziali nel foglio. Le condizioni non controllabili restano limiti dichiarati. Nella documentazione di ChatGPT Search la ricerca può essere avviata automaticamente e il contesto può influire: una sessione non descritta non è una condizione riproducibile.

Mantieni distinti tre insiemi: scoperta neutra, domande esplicitamente sul marchio e prove guidate con una fonte fornita nel prompt. Non sommare i loro tassi. Scegli prima quando una risposta è valutabile: testo completo, prova conservata e condizioni richieste rispettate. Se il protocollo richiede ricerca web osservata, l’assenza di tale evidenza va gestita come condizione non soddisfatta, non ignorata dopo aver letto il risultato. Definisci anche come classificare rifiuti, risposte fuori tema e interruzioni.

Template 1: pianifica ogni tentativo, anche quello che potrebbe mancare

Il manifesto contiene le prove previste prima della raccolta. La chiave attempt_id è unica; question_id e versione rinviano al testo esatto delle domande nel protocollo. La ripetizione distingue più esecuzioni della stessa domanda. Un tentativo aggiuntivo dopo un errore riceve un nuovo identificativo e il collegamento al precedente; non sovrascrive la prova fallita.

Il caso P-DEMO-v1 usa quattro domande e due ripetizioni per domanda, in una sola combinazione dimostrativa di servizio e condizioni. Le formulazioni dimostrative sono riportate qui sotto; non sono domande validate da ricerche su clienti. Il marchio fittizio è «Officina Esempio», con il solo host officina.example ammesso per le citazioni del sito. Non è un cliente né un servizio realmente interrogato.

Copia il TSV nel foglio; tabulazioni e righe sono delimitatori. DATA-DEMO deve essere sostituito con una data e ora UTC reale. Qui tutte le otto prove sono eleggibili e pianificate, non otto risposte già ottenute.

protocol_id	periodo	attempt_id	question_id	prompt_version	pool	ripetizione	pianificato_UTC
P-DEMO-v1	A	A01	Q01	v1	neutro	1	DATA-DEMO
P-DEMO-v1	A	A02	Q01	v1	neutro	2	DATA-DEMO
P-DEMO-v1	A	A03	Q02	v1	neutro	1	DATA-DEMO
P-DEMO-v1	A	A04	Q02	v1	neutro	2	DATA-DEMO
P-DEMO-v1	A	A05	Q03	v1	neutro	1	DATA-DEMO
P-DEMO-v1	A	A06	Q03	v1	neutro	2	DATA-DEMO
P-DEMO-v1	A	A07	Q04	v1	neutro	1	DATA-DEMO
P-DEMO-v1	A	A08	Q04	v1	neutro	2	DATA-DEMO

Blocca la versione del manifesto prima della raccolta e conserva la successiva cronologia. Se una domanda viene ritirata per un errore di perimetro, indica motivo, data ed effetto sul confronto. Non ridurre il piano dopo aver visto quali domande non citano il marchio. I prompt esplorativi nuovi hanno un’altra versione o serie e non riscrivono il passato.

Template 2: registra gli esiti senza riempire i vuoti con zero

Il registro degli esiti contiene soltanto i tentativi effettivamente avviati. Collega la risposta integrale e l’elenco dei collegamenti visibili a riferimenti conservati. Per il tempo effettivo usa data e ora della raccolta; non la data in cui prepari il report. menzione e citazione_owned accettano 1 o 0 solo per una risposta valida; negli altri casi restano vuoti.

Qui A04 è un errore e A05 un testo incompleto. I relativi riferimenti indicano la prova del problema, non risposte utilizzabili. A08 non compare perché non è stato eseguito. Tutti i file DEMO/… sotto sono riferimenti fittizi, non allegati scaricabili o prove reali. La ricerca indicata «si» è parte del caso inventato.

attempt_id	esito	eseguito_UTC	modello_visibile	ricerca_osservata	risposta_ref	menzione	citazione_owned	urls_raw_ref	normalizzazione_versione	nota
A01	valido	DATA-DEMO	NON-MOSTRATO	si	DEMO/A01.txt	1	1	DEMO/A01-urls.txt	N-DEMO-v1	esempio_fittizio
A02	valido	DATA-DEMO	NON-MOSTRATO	si	DEMO/A02.txt	0	0	DEMO/A02-urls.txt	N-DEMO-v1	esempio_fittizio
A03	valido	DATA-DEMO	NON-MOSTRATO	si	DEMO/A03.txt	1	0	DEMO/A03-urls.txt	N-DEMO-v1	esempio_fittizio
A04	errore	DATA-DEMO	NON-MOSTRATO	non_verificabile	DEMO/A04.txt					timeout
A05	incompleto	DATA-DEMO	NON-MOSTRATO	non_verificabile	DEMO/A05.txt					testo_parziale
A06	valido	DATA-DEMO	NON-MOSTRATO	si	DEMO/A06.txt	1	1	DEMO/A06-urls.txt	N-DEMO-v1	esempio_fittizio
A07	valido	DATA-DEMO	NON-MOSTRATO	si	DEMO/A07.txt	0	0	DEMO/A07-urls.txt	N-DEMO-v1	esempio_fittizio

Per unire i fogli, parti dall’intero manifesto e cerca l’esito tramite attempt_id: una left join, oppure una ricerca che mantenga tutte le righe pianificate. Segnala chiavi duplicate ed esiti senza una riga di piano. Una riga senza esito diventa «non eseguito o esito da riconciliare», non «risposta senza citazione». Verifica il registro operativo prima di decidere quale delle due condizioni si è verificata.

Conserva URL esatti prima di normalizzarli. Se rimuovi parametri di campagna per raggruppare le pagine, mantieni raw, regola e versione della trasformazione. Non trasformare un URL storico nel canonico corrente fingendo che fosse il collegamento mostrato dall’assistente. Il confronto dei domini deve usare l’host interpretato correttamente e la lista ammessa: officina.example.altro.example non appartiene al dominio fittizio autorizzato.

Separa il nome, la citazione e il contenuto correlato

Una risposta valida che nomina il marchio conta una volta nella presenza, anche quando la menzione è critica o condizionata. Raccomandazione, tono e accuratezza sono altri campi, con altre regole. Il protocollo di accuratezza del brand tratta le singole affermazioni: una citazione non dimostra che ogni fatto sia corretto.

Per il tasso di risposte che citano il sito, assegna 1 quando la risposta contiene almeno un collegamento di fonte qualificato dal protocollo e dentro il perimetro di dominio. Tre URL dello stesso sito nella stessa risposta contano comunque una risposta. Conserva separatamente URL e posizione di ciascun riferimento; la posizione non è un ranking generale del marchio.

Non convertire ogni collegamento del pannello laterale in una citazione del testo. OpenAI distingue citazioni e altri link rilevanti nelle fonti; Gemini distingue fonti e contenuti correlati, che non sono presenti in tutte le risposte. La documentazione di Claude sulla ricerca web descrive citazioni nelle risposte di ricerca. Conserva il tipo osservato; se il collegamento non è classificabile con la regola concordata, registra «non determinabile» e non inventare una citazione. Il protocollo deve stabilire prima se ciò rende non valutabile la sola misura di citazione, mostrando il suo denominatore specifico.

Esempio sintetico: riconcilia piano, validità e campione comune

La tabella aggiunge un periodo B interamente inventato. Le coppie Q01/r1 e simili hanno le stesse condizioni nei due periodi; soltanto gli identificativi dei tentativi e le date cambiano. «—» significa misura sconosciuta, non zero. Le risposte valide di questo esempio hanno tutte la citazione classificabile, quindi condividono il denominatore per menzione e citazione.

Nel periodo A: 8 pianificati = 5 validi + 1 errore + 1 incompleto + 1 non eseguito. Il completamento valutabile è 5/8 = 62,5%; la presenza è 3/5 = 60%; la citazione del sito è 2/5 = 40%. Scrivere 2/8 = 25% chiamandolo «tasso di citazione sulle risposte» tratterebbe implicitamente i dati mancanti come assenze. Puoi riportare il rapporto sul piano come altra misura, con un nome esplicito e senza attribuirgli quel significato.

Nel periodo B ci sono 6 validi, 1 errore e 1 non eseguito: presenza 4/6 = 66,7% e citazione 3/6 = 50%. I validi non sono però le stesse coppie. Per un confronto appaiato usiamo l’intersezione: Q01/r1, Q01/r2, Q02/r1 e Q04/r1, quattro coppie. Su queste, la presenza passa da 2/4 a 3/4 e la citazione da 1/4 a 2/4, entrambe +25 punti percentuali. Non sono +25% relativi, né una stima dell’intero mercato.

Mostra sia la copertura del piano sia il confronto comune. L’intersezione esclude le prove mancanti in almeno un periodo: è utile per la comparabilità, ma può selezionare un sottoinsieme non rappresentativo. Se spariscono le domande più difficili, il confronto comune da solo nasconde il problema. I giorni e le ripetizioni correlate non sono osservazioni indipendenti di mercato; con questo esempio piccolo non formuliamo test di significatività o effetti causali.

Prima di consegnare il report, fai sei controlli

Verifica che ogni riga di piano abbia un unico stato riconciliato; che ogni esito abbia un tentativo pianificato o un’aggiunta dichiarata; che il conteggio per stato sommi al piano; che i campi 0/1 siano compilati solo quando la relativa misura è valutabile; che ogni numeratore sia ricostruibile dalle prove conservate; che le coppie del confronto condividano davvero versione di domanda e condizioni.

Conserva gli aggregati separati per servizio, modalità, lingua, pool, giorno e cluster di domanda. Se cambi modello visibile o interfaccia, annota il cambiamento e valuta una nuova serie. Un confronto tra provider può affiancare campioni descritti; non può fingere che modalità e funzioni diverse siano identiche. AI Mode è un’esperienza specifica di Google Search, non un nome alternativo di ogni prodotto Google.

Affianca al risultato due o tre risposte complete che spiegano una variazione, senza scegliere soltanto i successi. Se una fonte è cambiata, collega versione e data; se hai pubblicato una nuova pagina, conserva la prova della pubblicazione e controlla separatamente l’indicizzazione. Il foglio non attribuisce automaticamente una variazione all’ultimo articolo pubblicato. La decisione utile diventa concreta: correggere il campione, recuperare prove mancanti, verificare una fonte o continuare la raccolta con lo stesso protocollo.

Fonti e trasparenza editoriale

Fonti primarie consultate il 6 novembre 2026. I due registri, le regole di riconciliazione e l’esempio sono una proposta della Redazione Niuexa preparata con assistenza AI, non uno standard imposto dai servizi. Nessun benchmark sugli assistenti è stato eseguito per questo articolo.

• OpenAI, Searching the web with ChatGPT, ricerca, citazioni e collegamenti correlati; contesto e verifica delle fonti.
• Anthropic, Enable and use web search, ricerca e citazioni osservabili; disponibilità e condizioni dell’interfaccia.
• Google, AI Mode in Search, esperienza di ricerca AI, collegamenti e possibili variazioni del prodotto.
• Google, View related sources from Gemini Apps, fonti e contenuti correlati non presenti in tutte le risposte.
• Google Search Central, Optimizing for generative AI features, contesto di recupero delle informazioni e riferimenti alle pagine; nessuna garanzia di citazione.

Interfacce, modalità, modelli mostrati e disponibilità delle fonti possono cambiare. I numeri dimostrativi non rappresentano risultati NIUEXA o di clienti, volumi di ricerca o quote dell’intero mercato.

Approfondimenti correlati