Rozszerzając wyniki małej próby na plan weryfikacji, należy najpierw zdefiniować jednostkę eksperymentalną. Powtarzanie wykonania na jednym obrazie, ponowne uchwycenie tego samego przedmiotu, zmiana jego położenia i użycie niezależnych detali odpowiada na różne pytania. Rejestruj detal, obraz, zdarzenie przechwytywania i identyfikatory konfiguracji dla każdego przebiegu.

Grupuj rekordy według zmieniających się czynników

Zorganizuj weryfikację według typu przedmiotu obrabianego, partii produkcyjnej, stanu powierzchni, ułożenia, oświetlenia lub konfiguracji kamery. Określ, które czynniki pozostają niezmienione, a które ulegają zmianie. Wytyczne NIST dotyczące gromadzenia danych rejestrują istotne czynniki wpływające. Użyj tego podejścia do nagrywania. Uzgodnij przykładowe grupy i kryteria akceptacji dla docelowego zadania.

Zachowaj indywidualne wyniki i podsumowania grupowe

Zapisz oczekiwane wyniki, rzeczywiste wyniki, czas i wyjątki w oryginalnych próbkach. Zgłaszaj liczby i różnice w decyzjach według grup, wyjaśniając powtarzające się zapisy i wykluczenia. Nie przesyłaj samego podsumowania procentowego. Pokrycie próby i indywidualne wyniki pokazują, jakie warunki obejmuje wniosek statystyczny.

Sprawdź zakres, którego dotyczy problem, po wprowadzeniu poprawek

Po zmianie parametrów, obrazów referencyjnych, modeli lub transformacji obrazu zaplanuj ponowne testy dla dotkniętego zakresu. Zachowaj konfiguracje i wyniki sprzed i po zmianie. Przeprowadź kontrolę regresji na powiązanych próbkach normalnych i nieprawidłowych. Uwzględnij nieprzetestowane warunki i dodatkowe próbki w następnym planie.

Widzieć Wytyczne NIST dotyczące gromadzenia danych.