Lo sviluppo del software oggi non è basato sull'evidenza. Cioè, non scegliamo realmente le tecnologie e le pratiche basate sui risultati degli studi di ricerca come (speriamo!) Fanno, diciamo, sulle medicine.
Ad esempio, uno studio pubblicato all'inizio del 2011 nel Journal of American Medical Association ha suggerito rimozione dei linfonodi dei pazienti con cancro della mammella non migliora i tassi di sopravvivenza , che ha avuto un impatto immediato sulla pratica chirurgica .
Immagina di trovarti a leggere un articolo su uno studio di ingegneria del software che suggeriva che una pratica software o una tecnologia che usi attualmente non offriva il beneficio che pensavi di fare: cioè, questo studio era in contraddizione con la tua esperienza personale. Supponendo che il documento sia stato pubblicato in una sede stimabile di cui ti fidi, quali proprietà dovrebbe avere lo studio affinché tu possa effettivamente cambiare le tue pratiche in base al risultato?