Synthetische dataprojecten hebben leveringscriteria voor afbeeldingen en evaluatiecriteria voor modellen nodig. Beeldcontroles kunnen betrekking hebben op bestanden, afmetingen, scènedistributie, metadata, labels en uitzonderingen. Modelevaluatie vereist trainingsinstellingen, echte monsters en een gedefinieerde testmethode. Geef op of de levering afbeeldingen, taakannotaties of modeltraining en -evaluatie omvat.
Controleer de generatiebatch en ontbrekende items
De leveringscontrolelijst moet het geplande aantal afbeeldingen voor elke scène, de daadwerkelijke bestanden, generatieversies, bronnen en screeningresultaten registreren. Voor controles op occlusie, helderheid of compressie zijn gedefinieerde monsters en criteria nodig. Als de levering begrenzingsvakken, segmentatiemaskers of karakterlabels omvat, controleer dan de voorbeelden aan de hand van de taakspecificatie. Houd afbeeldingen vast ter beoordeling als hun herkomst of labels ontbreken.
Definieer een gecontroleerde modelvergelijking
Gebruik de overeengekomen reële testset om beide modellen te evalueren. Vergelijk de oorspronkelijke basislijn met het model dat is getraind met toegevoegde synthetische afbeeldingen. Gebruik voor beide modellen dezelfde monsterscope, annotatieregels en evaluatiemethode. Noteer eventuele verschillen in trainingsinstellingen. Onderzoek valse detecties en gemiste detecties in belangrijke scènes. Modelvoordelen vereisen vergelijkende resultaten. Ongeteste veldomstandigheden blijven in afwachting van verificatie.
Gerelateerde diensten: Gegevens, training en evaluatie, projectadvies.