Profesjonalne recenzje i pomiary laboratoryjne odpowiadają na różne pytania i powinny wzajemnie się uzupełniać, bez traktowania ich jako wymiennych.
Oddzielić doświadczenie od pomiaru
Profesjonalny recenzent może opisać obsługę, wygodę, kontrolę, nakład pracy związany z konserwacją, przydatność do danego zadania i inne doświadczenia zaobserwowane podczas użytkowania. Oceny te mogą być wartościowe, ponieważ zapewniają praktyczny kontekst, ale nadal pozostają związane z recenzentem, próbką, zadaniami i okolicznościami. Określenia takie jak wygodny, wyważony lub łatwy w użyciu nie są pomiarami laboratoryjnymi.
Dane laboratoryjne mogą opisywać zmierzone właściwości przy zastosowaniu określonej metody. Mogą zapewniać powtarzalność i kontrolowane warunki, ale nie przewidują automatycznie doświadczeń każdego użytkownika. Zmierzonego wyniku nie należy używać do odrzucenia osobistej obserwacji recenzenta, a pozytywnej recenzji nie należy przeredagowywać tak, by stanowiła dowód zmierzonej właściwości.
Sprawdzić, co faktycznie obejmuje każde źródło
W przypadku recenzji należy ustalić dokładną wersję produktu, źródło próbki, stan próbki, wykonane zadania, czas użytkowania oraz wszelkie ujawnione powiązania handlowe. Należy przeczytać całą recenzję, zamiast polegać na ocenie punktowej lub wybranym zdaniu. W przypadku informacji laboratoryjnych należy ustalić badaną próbkę lub partię, metodę, jednostki, warunki, kryteria akceptacji oraz ograniczenia raportu.
Pobieranie próbek również ogranicza interpretację. NIST Engineering Statistics Handbook wskazuje, że kontrola odbiorcza na podstawie próbek ma służyć jako podstawa decyzji, czy partia jest prawdopodobnie akceptowalna, a nie do oszacowania ogólnej jakości partii. Szerzej rzecz ujmując, każdy wynik należy odczytywać zgodnie z określonym celem pobierania próbek. Jest to ogólna wskazówka dotycząca pomiarów, a nie dowód dotyczący produktu SEWARD.
Szukać zbieżności bez wymuszania zgodności
Najbardziej rzetelna interpretacja przypisuje każde stwierdzenie do pytania, na które może ono odpowiedzieć. Recenzent może poinformować, że dana cecha wydawała się niewygodna podczas konkretnego zadania, podczas gdy dane laboratoryjne mogą ustalać odrębny pomiar fizyczny. Te ustalenia nie muszą być sprzeczne.
Zgodność niezależnych dowodów może zwiększać pewność, ale rozbieżność powinna skłonić do zbadania wersji, próbek, zadań i metod. Dopóki te czynniki nie zostaną ujednolicone, należy zachować oba ustalenia wraz z ich ograniczeniami, zamiast stwierdzać, że jedno automatycznie unieważnia drugie.