Proyek data sintetis memerlukan kriteria pengiriman gambar dan kriteria evaluasi model. Pemeriksaan gambar dapat mencakup file, dimensi, distribusi adegan, metadata, label, dan pengecualian. Evaluasi model memerlukan pengaturan pelatihan, sampel nyata, dan metode pengujian yang ditentukan. Tentukan apakah pengiriman menyertakan gambar, anotasi tugas, atau pelatihan dan evaluasi model.
Periksa kumpulan generasi dan item yang hilang
Daftar periksa pengiriman harus mencatat jumlah gambar yang direncanakan untuk setiap adegan, file sebenarnya, versi pembuatan, sumber dan hasil penyaringan. Pemeriksaan oklusi, kecerahan, atau kompresi memerlukan sampel dan kriteria yang ditentukan. Jika pengiriman mencakup kotak pembatas, masker segmentasi, atau label karakter, periksa contoh berdasarkan spesifikasi tugas. Simpan gambar untuk ditinjau jika asal atau labelnya tidak ada.
Tentukan perbandingan model terkontrol
Gunakan set pengujian nyata yang disepakati untuk mengevaluasi kedua model. Bandingkan garis dasar asli dengan model yang dilatih dengan gambar sintetis tambahan. Gunakan cakupan sampel, aturan anotasi, dan metode evaluasi yang sama untuk kedua model. Catat setiap perbedaan dalam pengaturan pelatihan. Periksa deteksi palsu dan deteksi yang terlewat dalam adegan penting. Manfaat model memerlukan hasil komparatif. Kondisi lapangan yang belum teruji masih menunggu verifikasi.
Layanan terkait: Data, pelatihan dan evaluasi, konsultasi proyek.