Prompt monitoring: quali domande misurano davvero il brand

Per anni l'unità di misura è stata la keyword. Sceglievi una frase, controllavi in che posizione comparivi, e quella posizione si muoveva oppure restava dov'era. Strumenti, report, obiettivi trimestrali: tutto poggiava su quell'atomo.

Gli assistenti generativi quell'atomo l'hanno portato via. Alle AI le persone non scrivono keyword: raccontano una situazione, in frasi intere, con il contesto attorno, e ricevono una risposta sola che fa qualche nome. Quello che misuri adesso è un prompt. Il tuo score, la tua curva, l'elenco dei concorrenti che ti passano davanti: tutto dipende da quali prompt hai scelto. Sceglierli male è il modo più comodo per non misurare niente e sentirsi tranquilli mentre lo fai.

Un test che passi sempre non è un test

Butta via i prompt che contengono il tuo nome. «Che cos'è [brand]?», «[brand] è affidabile?». Con il nome dentro la domanda hai già consegnato al modello l'entità di cui parlare, e la parte difficile, decidere chi è abbastanza rilevante da essere tirato in ballo, gliel'hai risolta tu. Qualcosa da dire lo troverà sempre, e lo dirà con lo stesso tono sicuro per il leader di mercato e per un'azienda che non conosce nessuno. Una prova che non può fallire non porta informazione.

Quei prompt confermano, non misurano. L'unico compito legittimo che hanno, e va tenuto in una colonna separata, è verificare se la descrizione che il modello dà di te è esatta. È un controllo di accuratezza, non una misura di visibilità.

Le cinque forme di un prompt che misura

Ogni prompt che vale la pena registrare ha una proprietà in comune: il tuo nome non compare. È questo che trasforma una domanda in una misura, perché ricostruisce la situazione che conta commercialmente, quella in cui chi compra non sa ancora che esisti. Dentro quel vincolo i prompt si dividono in cinque famiglie, e a un set a cui ne manca una resta un buco.

Categoriali

«Qual è il miglior gestionale di magazzino per un'azienda alimentare di media dimensione?». Qualcuno sta costruendo una lista partendo dal nulla. Il modello restituisce una manciata di nomi: o ci sei o non ci sei, non esistono mezze presenze.

Comparativi

«Confronta le principali soluzioni per l'automazione di magazzino». Qui il modello è costretto a esplicitare l'insieme, e viene fuori quello che un prompt categoriale tiene nascosto: qual è il marchio che tratta come riferimento, quello rispetto a cui misura tutti gli altri. A volte non è nemmeno nella slide dei tuoi concorrenti.

Di problema

«I resi continuano ad accumularsi e i clienti protestano, come ne usciamo?». Nessuna categoria, nessun fornitore, solo il dolore. Il modello sceglie prima la categoria e poi i nomi, quindi ci sono due modi di perdere: non comparire nell'elenco, oppure essere archiviato in una categoria che non è la tua, dove la domanda se nominarti non si pone nemmeno.

Di sostituzione

«Cosa posso usare al posto di un [categoria] tradizionale?». Intercetta chi sta già lasciando qualcosa. Essere nominato qui è un segnale diverso dal comparire in un elenco di categoria: vuol dire essere stato classificato come rimpiazzo credibile, che è molto più vicino a una firma.

Di qualificazione

«Quale soluzione va bene per un settore regolamentato con un reparto IT quasi inesistente?». È qui che le trattative prendono forma, ed è la famiglia che tutti dimenticano. Un modello che ti nomina per le grandi aziende e mai per i team piccoli ti ha detto una cosa precisa, che nessuno score aggregato farà mai emergere.

Scrivi come chi compra, non come chi fa keyword research

«Miglior CRM» è una keyword. A un assistente non la scrive nessuno. Quello che scrive assomiglia di più a questo: «siamo un'azienda manifatturiera di media dimensione, esportiamo in mezza Europa, il nostro CRM non dialoga con l'ERP e i commerciali si rifiutano di usarlo, cosa possiamo valutare?».

Il contesto non è decorazione. I modelli ci si aggrappano: dimensione dell'azienda, settore, budget, tempi, l'integrazione che deve funzionare per forza. Ognuno di questi elementi cambia i nomi che tornano indietro, e un prompt ripulito dal contesto misura un compratore che non esiste. Usa il vocabolario dei tuoi clienti, non quello del tuo posizionamento: un prompt scritto in una lingua che fuori dall'azienda non parla nessuno riceverà una risposta sicura di sé su un mercato che non è il tuo.

Una volta sola è un aneddoto

Questi modelli sono probabilistici. Fai la stessa identica domanda due volte e possono uscire due liste diverse, in ordine diverso, con un marchio diverso in testa. Non è un difetto da aggirare, è il materiale con cui hai a che fare. Ogni prompt va quindi eseguito più volte, su ciascuno dei quattro assistenti principali, che tra loro sono in disaccordo molto più di quanto ognuno lo sia con se stesso.

Quello che stai misurando non è la presenza ma la frequenza: nominato quasi sempre, nominato qualche volta, mai nominato. Sono tre posizioni commerciali diverse, e una singola esecuzione non le distingue. La dimensione vera di un set è il numero di prompt moltiplicato per le lingue, per le piattaforme, per le ripetizioni: quando devi tagliare, taglia prompt, mai ripetizioni.

Cosa registrare a ogni esecuzione

Quasi tutti annotano un sì o un no, che è il campo meno informativo esistente. Per ogni esecuzione conviene raccogliere:

• Nominato. Il marchio è comparso oppure no.
• Citato. C'era un link vero, o soltanto una menzione.
• Chi è stato nominato al posto tuo. Tutti i marchi che compaiono nella risposta, che tu ci sia o meno. È la cosa più utile che gli assistenti generativi ti regalano, e non costa niente.
• Posizione. Primo dell'elenco oppure ultimo. Non è un ranking, ma racconta con quanta sicurezza la risposta ti tratta.
• Come ti descrive. Essere citato come «l'opzione economica» non è lo stesso dato di «la scelta standard per le grandi operazioni», anche se entrambe contano come menzione. Questa colonna la salta chiunque e porta più informazione di tutte le altre messe insieme.
• Piattaforma, lingua, data. Senza questi tre campi, niente di quello che c'è sopra è confrontabile con niente.

Non spostare il metro

Quando un set funziona, congelalo. Un dato di visibilità significa qualcosa solo rispetto ai prompt su cui è stato calcolato: nel momento in cui modifichi il set hai cambiato lo strumento, e qualunque linea di tendenza che attraversa quella modifica è finzione.

I set prima o poi cambiano davvero: la categoria si dà un vocabolario nuovo, entri in un mercato dove prima non c'eri. Trattalo come una migrazione di schema, non come una correzione al volo. Versiona il set, annota cosa hai aggiunto o tolto e perché, e tieni i vecchi prompt in esecuzione accanto ai nuovi per un po', così vedi che effetto ha avuto la modifica in sé. Raramente, e mai di nascosto.

La trappola: un set costruito per farti fare bella figura

Ecco come l'esercizio si rovina, quasi mai in malafede. Qualcuno scrive un prompt, lo esegue, non compare, la cosa non gli piace, riformula, compare, e tiene la seconda versione. Ripetilo una dozzina di volte e ti ritrovi un set con un punteggio lusinghiero attaccato che misura una cosa sola: il tuo ego.

La difesa è procedurale. Scrivi tutto il set prima di eseguirne anche un solo prompt. Prendili da posti dove non puoi barare: le call commerciali, i ticket di assistenza, la prima mail che manda un potenziale cliente. Poi esegui quello che hai scritto e accetta il risultato. Se nel set non c'è niente che ti aspetti di perdere, non è uno strumento di misura. Comparire ovunque non è la prova che stai vincendo: è la prova che il set è sbagliato.

Dove smette di essere fattibile a mano

Un set anche contenuto, in tutte le lingue in cui vendi, su quattro piattaforme, ripetuto abbastanza volte da voler dire qualcosa, produce più esecuzioni di quante una persona possa leggerne e classificarne. È lì che il monitoraggio dei prompt va automatizzato, ed è quello che fa PSentry: genera un set di prompt per ogni sito e lo esegue su ChatGPT, Claude, Gemini e Perplexity, registrando chi viene nominato al posto tuo.

Con un'avvertenza che preferiamo dire ad alta voce. Un set generato è un punto di partenza, non un oracolo: non è mai stato seduto a una delle tue call commerciali. Se un prompt non suona come qualcosa che scriverebbe davvero un tuo cliente, non sta misurando il tuo mercato. E il confine resta dov'è: questa è misurazione. Riporta quello che i modelli hanno detto, non cambia quello che dicono.

Un set che non pronuncia mai il tuo nome, che suona come una persona che parla, che gira molte volte invece di una e che sta fermo abbastanza a lungo da poter essere confrontato con se stesso ti dirà dove sei. Un set costruito con le domande che sai già di vincere non ti dirà niente, gentilmente, per tutto il tempo in cui continuerai a pagarlo.

Domande Frequenti

Posso mettere i nomi dei concorrenti nei prompt?

Sì, nelle famiglie comparativa e di sostituzione, perché è esattamente quello che fa chi compra. Il nome di un concorrente non è lo stesso errore del tuo: àncora la domanda senza regalarti una comparsa. Tienili però in minoranza dentro il set, altrimenti finisci per misurare la posizione loro invece della tua.

Posso limitarmi a tradurre il set di prompt nelle altre lingue?

Tradurre non basta. Chi compra altrove imposta il problema in un altro modo, la categoria può avere un nome che non coincide, e il riferimento rispetto a cui confronta tutto è spesso un'azienda locale di cui non hai mai sentito parlare. Il set va riscritto lingua per lingua, e ogni lingua va trattata come uno strumento a sé.

Posso farmi scrivere il set da un'AI?

È un modo ragionevole di produrre materiale grezzo. Quello che torna indietro è come un modello immagina che parlino i tuoi clienti, cioè più liscio e più generico di come parlano davvero. Trattalo come una prima stesura e confrontalo con le frasi che hai sentito da un cliente vero.

Cosa significa non essere mai nominato, in nessun prompt?

Dietro lo stesso risultato si nascondono due diagnosi molto diverse: o i modelli non hanno di te un'immagine utilizzabile, oppure ce l'hanno e non ti considerano adatto agli scenari che stai testando. Sono i campi «chi è stato nominato al posto tuo» e «come ti descrive» a separarle, e la reazione giusta cambia nei due casi.