Dowody z wielu porównywalnych partii mogą ujawnić, czy zaobserwowany wynik powtarza się w czasie lub między grupami produkcyjnymi, podczas gdy jedna partia zapewnia jedynie węższy obraz.
Pojedyncza partia to jedno okno obserwacji
Raport dotyczący pojedynczej partii może pokazać, co zaobserwowano w próbkowanych jednostkach z tej określonej partii, przy użyciu wskazanej konfiguracji i metody badania. Może wspierać decyzję dotyczącą tej partii, ale sam w sobie nie może wykazać, czy ten sam wzorzec występował wcześniej lub później. NIST Engineering Statistics Handbook opisuje pobieranie próbek do odbioru jako sposób wykorzystania próbki przy podejmowaniu decyzji, czy dana partia jest prawdopodobnie akceptowalna, a nie jako pełne oszacowanie szerszej jakości.
To rozróżnienie ma znaczenie, ponieważ korzystny wynik może odzwierciedlać materiały, ustawienia, środowisko, operatorów lub okoliczności pobierania próbek właściwe dla tej partii. Żadna z tych możliwości nie dowodzi, że wynik jest niereprezentatywny; ograniczają one jedynie zakres, w jakim można uogólniać na podstawie jednej obserwacji.
Co dodają porównywalne partie
Dowody z wielu partii dodają wymiar czasowy i wymiar replikacji. Gdy raporty wskazują każdą partię, datę, konfigurację produktu, sposób pobierania próbek, warunki badania, mierzone cechy i wyniki, czytelnicy mogą sprawdzić, czy wyniki się powtarzają i czy obserwowany zakres się zmienia. Mogą również wykryć zmienność specyficzną dla partii, którą ukryłoby podsumowanie ogólne.
Dodatkowe informacje wspierają ograniczone stwierdzenie dotyczące zaobserwowanej spójności między zbadanymi partiami. Nie ustanawiają trwałej stabilności, braku przyszłych zmian ani identycznego działania każdej jednostki.
Porównywalność jest niezbędna
Wyników nie należy łączyć wyłącznie dlatego, że dotyczą produktów o podobnych nazwach. Zmiana projektu, zmiana konfiguracji, inna metoda pomiaru, zmienione kryterium akceptacji lub zmieniony plan pobierania próbek mogą sprawić, że bezpośrednie porównanie będzie mylące. Takie różnice należy wyraźnie przedstawić i w razie potrzeby analizować oddzielnie.
Dlatego wiele partii dostarcza więcej informacji tylko wtedy, gdy ich identyfikatory, konfiguracje, metody i surowe wyniki można ze sobą zestawić. Bez ciągłych i porównywalnych zapisów dowody pozostają zbiorem oddzielnych migawek, a nie dowodem długoterminowej stabilności.