Un numero prima/dopo è la cosa più convincente su un sito di consulenza e la più facile da falsificare. Chiunque può scrivere "61% → 89,2%". Per questo da oggi ogni case study su questo sito porta un record di prova, e la build fallisce se ne manca uno.
Cosa dice l'etichetta
Ogni record ha tre parti.
Fonte. Progetto per un cliente significa costruito per un cliente pagante. Sistema interno significa costruito e gestito da noi, sui nostri dati o sul nostro prodotto. Reference design significa un'architettura che costruiremmo, descritta con valori tipici anziché osservati.
Numeri. Misurati significa che il prima/dopo è stato osservato su un sistema in produzione, e il record dice come: quale holdout, quale finestra, quale suddivisione del traffico. Stimati significa ricavati da misurazioni parziali o benchmark. Illustrativi significa valori rappresentativi per un reference design — utili per capire la forma del lavoro, non una prova che sia avvenuto.
Referenza. Se il cliente è disposto a una call di referenza sotto NDA. La maggior parte non lo è, e l'etichetta lo dice invece di lasciar intendere il contrario.
Perché non mostrare solo quelli misurati
Perché un reference design resta utile a chi deve decidere se un problema è risolvibile, purché non venga travestito da risultato. Toglierli renderebbe il sito più scarno senza renderlo più onesto. Etichettarli rende visibile la differenza a colpo d'occhio.
Cosa lo fa rispettare
Il record sta accanto al testo nei file di contenuto, e un passo di validazione nella build rifiuta qualsiasi case study che ne sia privo, qualsiasi "reference design" che dichiari numeri misurati e qualsiasi cifra in homepage che non rimandi al caso da cui è stata presa. La regola è meccanica di proposito: non dipende dal fatto che qualcuno si ricordi di stare attento.
Se state confrontando fornitori, fate a ciascuno le stesse tre domande — fonte, numeri, referenza — e guardate quanto tempo richiede la risposta.