Parempi tulos tulee raportoida testatun näytteen, version, erän ja olosuhteiden puitteissa sen sijaan, että se yleistettäisiin koko tuotesarjaan.
Ilmaise havaittu tulos sen todellisessa laajuudessa
Kun uusi testitulos on parempi, turvallisimmassa ja täsmällisimmässä lausumassa yksilöidään tarkasti, mikä tuotti tuloksen: testatun tuotteen tunniste, asiaankuuluva versio tai erä, näyte, menetelmä, olosuhteet ja vertailuperuste. Johtopäätöksen tulee pysyä tällä tasolla. Yhdestä näytteestä tai erästä saatu tulos ei sellaisenaan osoita, että jokainen sarjan yksikkö, erä tai tuote olisi muuttunut.
Erottelu on tärkeä, koska testaus voi vastata useisiin erilaisiin kysymyksiin. Se voi kuvata testattua kappaletta, tukea tiettyä erää koskevaa päätöstä tai tuottaa näyttöä laajemmasta prosessista. Nämä eivät ole keskenään vaihtokelpoisia johtopäätöksiä. NIST Engineering Statistics Handbook selittää, että hyväksyntänäytteenottoa käytetään ratkaisemaan, onko erä todennäköisesti hyväksyttävä, ei arvioimaan erän laatua. Tämä periaate korostaa tarvetta välttää rajallisen näytteenottotiedon muuttamista rajoittamattomaksi koko tuotetta koskevaksi väitteeksi.
Erota parannus sen mahdollisesta syystä
Korkeampi tulos ei myöskään osoita, miksi se saavutettiin. Ennen kuin tulos yhdistetään parannukseen, vertaile vanhoja ja uusia tietoja suunnittelun tarkistuksen, materiaali- tai prosessimuutosten, näytteenottomenetelmän, testiasetelman, esikäsittelyn, käyttäjän menettelyn ja arviointisääntöjen osalta. Jos näitä tekijöitä ei ole valvottu tai dokumentoitu, syy on jätettävä määrittelemättömäksi.
Raportissa voidaan todeta, että testattu tuote saavutti paremman tuloksen ilmoitetuissa olosuhteissa. Siinä ei pidä sanoa, että koko tuotesarjaa on parannettu, elleivät dokumentoidut muutokset ja edustava näyttö tue tätä laajempaa soveltamisalaa.
Laajenna väitettä vain, kun näyttö laajenee
Laajempi sanamuoto on asianmukainen vasta, kun näyttö yhdistää tuloksen asiaankuuluviin versioihin ja kyseiseen tuotantopopulaatioon. Siihen asti havainto on merkittävä näyte- tai eräkohtaiseksi, vertailuolosuhteet on säilytettävä ja vastaamatta jääneet kysymykset on yksilöitävä erikseen. Näin myönteinen tulos voidaan välittää liioittelematta sen ulottuvuutta tai syytä.