Smetti di cercare di misurare la “visibilità AI”
Credo che sia praticamente impossibile misurare in modo affidabile quanto spesso ChatGPT e altri large language model consigliano un determinato brand.
Tutti quegli strumenti online che assegnano a un brand una specifica percentuale di “visibilità AI” si basano, secondo me, su ben poco. Li trovo ridicoli.
Credo anche che possiamo evitare di misurare direttamente questa metrica. Ciò che conta davvero è capire quanto traffico gli LLM stanno effettivamente generando per il tuo sito. Se una quota significativa del tuo traffico arriva dagli LLM, dovresti riuscire a stimare quella quota dai dati delle tue analytics.
Misura il traffico, non la visibilità AI
Immagina che una pagina riceva 100 visite da utenti reali un mese e 200 il mese successivo. Il suo traffico è raddoppiato. È questo che dovrebbe interessarti.
Se tutte quelle visite arrivano dagli LLM, allora puoi ragionevolmente concludere che anche la visibilità generata tramite gli LLM è raddoppiata.
Se solo alcune visite arrivano dagli LLM, puoi stimare la percentuale di traffico generata dagli LLM guardando il traffico totale e sottraendo il traffico che puoi attribuire con sicurezza ad altre fonti. Da lì puoi arrivare a una stima approssimativa dell’impatto degli LLM.
Ma non tutto il traffico non attribuito arriva dagli LLM
Naturalmente c’è un’avvertenza importante: non puoi semplicemente presumere che tutto il traffico che non riesci ad attribuire a un’altra fonte provenga dagli LLM.
Una parte potrebbe essere traffico diretto. Una parte potrebbe arrivare da app, piattaforme di messaggistica, referrer non passati correttamente o altre fonti difficili da identificare.
Quindi sì, questo è un metodo approssimativo.
Ma lo considero comunque molto più affidabile che guardare una pagina e pensare qualcosa come: “Questa pagina ha un H1 qui, un link là, quindi la sua visibilità AI deve essere X%.”
È ridicolo.
Misura invece l’impatto degli LLM
È molto più utile stimare l’effetto degli LLM su traffico e conversioni che cercare di stimare quante volte un LLM ha menzionato o consigliato il tuo brand.
Invece di chiederci:
“Quanto mi consiglia ChatGPT?”
forse dovremmo chiederci:
“Quanto traffico e quante conversioni mi stanno effettivamente generando gli LLM?”
Dati approssimativi sono meglio di una metrica senza senso
In pratica, le due domande cercano di arrivare più o meno alla stessa cosa: quanta esposizione e quanto valore di business gli LLM stanno generando per il tuo brand.
Ma c’è una differenza fondamentale nel modo in cui proviamo a rispondere.
La prima domanda tende a portare a un sistema discutibile per stimare una metrica astratta come la “visibilità AI”, spesso basato su ipotesi su come gli LLM interpretano e consigliano un brand.
La seconda porta a un sistema certamente imperfetto e approssimativo, ma fondato su qualcosa che conta davvero: utenti reali, traffico reale e conversioni reali.
E personalmente preferisco di gran lunga una stima imperfetta basata su risultati di business concreti a un numero dall’aria precisa basato su una metrica quasi impossibile da misurare in modo affidabile.