Un chiffre avant/après est l'élément le plus persuasif d'un site de conseil, et le plus facile à inventer. N'importe qui peut écrire « 61 % → 89,2 % ». À partir d'aujourd'hui, chaque étude de cas de ce site porte donc un dossier de preuve, et le build échoue s'il en manque un.
Ce que dit le label
Chaque dossier comporte trois parties.
Source. Projet client signifie construit pour un client payant. Système interne signifie construit et exploité par nous, sur nos propres données ou notre propre produit. Architecture de référence signifie une architecture que nous construirions, décrite avec des valeurs typiques plutôt qu'observées.
Chiffres. Mesurés signifie que l'avant/après a été observé sur un système en production, et le dossier précise comment : quel holdout, quelle fenêtre, quelle répartition du trafic. Estimés signifie déduits de mesures partielles ou de benchmarks. Illustratifs signifie des valeurs représentatives pour une architecture de référence — utiles pour comprendre la forme du travail, pas une preuve qu'il a eu lieu.
Référence. Si le client accepte un appel de référence sous NDA. La plupart refusent, et le label le dit au lieu de laisser entendre le contraire.
Pourquoi ne pas montrer seulement les chiffres mesurés
Parce qu'une architecture de référence reste utile à un lecteur qui se demande si un problème peut être résolu, tant qu'elle n'est pas déguisée en résultat. Les supprimer rendrait le site plus mince sans le rendre plus honnête. Les étiqueter rend la différence visible au premier coup d'œil.
Ce qui le fait respecter
Le dossier se trouve à côté du texte dans les fichiers de contenu, et une étape de validation du build refuse toute étude de cas qui n'en a pas, toute « architecture de référence » qui revendique des chiffres mesurés, et tout chiffre de la page d'accueil qui ne renvoie pas à l'étude de cas dont il provient. La règle est mécanique à dessein : elle ne dépend pas de la vigilance de qui que ce soit.
Si vous comparez des prestataires, posez à chacun les trois mêmes questions — source, chiffres, référence — et voyez combien de temps prend la réponse.