Tutkijoiden tehtävä on etsiä totuutta. Silti se, miten empiirinen aineisto kerätään ja analysoidaan ja miten tulokset raportoidaan, vaikuttaa tuloksiin yllättävän paljon. Tutkija joutuu jatkuvasti tekemään monentasoisia valintoja esimerkiksi sen suhteen, kuinka pitkään aineiston keräämistä jatketaan, millä ehdoilla havaintoja hylätään ja mitkä koetilanteet raportoidaan. Menetelmällinen joustavuus kuulostaa sinänsä hyvältä, mutta se saattaa itse asiassa nostaa väärien positiivisten tutkimushavaintojen todennäköisyyttä yllättävän dramaattisesti.