Useista vertailukelpoisista eristä saadut todisteet voivat osoittaa, toistuuko havaittu tulos ajan kuluessa tai tuotantoryhmien välillä, kun taas yksi erä tarjoaa vain suppeamman näkymän.
Yksi erä on yksi havaintoikkuna
Yhtä erää koskeva raportti voi osoittaa, mitä havaitun erän näytteeseen valituissa yksiköissä havaittiin käyttäen ilmoitettua kokoonpanoa ja testimenetelmää. Se voi tukea kyseistä erää koskevaa päätöstä, mutta se ei yksin voi osoittaa, esiintyikö sama malli ennen tai jälkeen. NIST Engineering Statistics Handbook kuvaa hyväksyntänäytteenottoa tapana käyttää otosta päätettäessä, onko tietty erä todennäköisesti hyväksyttävä, eikä kattavana arviona laajemmasta laadusta.
Tämä ero on tärkeä, koska suotuisa tulos voi heijastaa kyseisen erän materiaaleja, asetuksia, ympäristöä, käyttäjiä tai näytteenotto-olosuhteita. Mikään näistä mahdollisuuksista ei todista, ettei tulos olisi edustava; ne vain rajoittavat sitä, kuinka pitkälle yhtä havaintoa voidaan yleistää.
Mitä vertailukelpoiset erät lisäävät
Useista eristä saadut todisteet lisäävät ajallisen ja toistettavuuteen liittyvän ulottuvuuden. Kun raporteissa yksilöidään kukin erä, päivämäärä, tuotteen kokoonpano, näytteenottotapa, testiolosuhteet, mitatut ominaisuudet ja tulokset, lukijat voivat nähdä, toistuvatko tulokset ja muuttuuko havaittu vaihteluväli. He voivat myös havaita eräkohtaisen vaihtelun, jonka yleinen yhteenveto peittäisi.
Lisätiedot tukevat rajattua lausumaa tarkasteltujen erien välillä havaitusta yhdenmukaisuudesta. Ne eivät osoita pysyvää vakautta, tulevan vaihtelun puuttumista tai jokaisen yksikön samanlaista suorituskykyä.
Vertailukelpoisuus on olennaista
Tuloksia ei pidä yhdistää vain siksi, että ne koskevat samannimisiä tuotteita. Suunnittelun tarkistus, kokoonpanon muutos, erilainen mittausmenetelmä, muuttunut hyväksymiskriteeri tai muutettu näytteenottosuunnitelma voi tehdä suorasta vertailusta harhaanjohtavan. Tällaiset erot on esitettävä nimenomaisesti ja tarvittaessa analysoitava erikseen.
Siksi useat erät ovat informatiivisempia vain, kun niiden tunnistetiedot, kokoonpanot, menetelmät ja raakatulokset voidaan kohdistaa toisiinsa. Ilman jatkuvia ja vertailukelpoisia tietoja todisteet jäävät erillisten tilannekuvien kokoelmaksi eivätkä osoita pitkän aikavälin vakautta.