Définition - Que signifie l'ensemble de validation?
Dans l'apprentissage automatique, un ensemble de validation est utilisé pour «régler les paramètres» d'un classificateur. Le test de validation évalue la capacité du programme en fonction de la variation des paramètres pour voir comment il pourrait fonctionner dans des tests successifs.
L'ensemble de validation est également appelé ensemble de données de validation, ensemble de développement ou ensemble de développement.
Definir Tech explique l'ensemble de validation
Idéalement, le programme aura trois ensembles de données: un ensemble d'apprentissage, un ensemble de validation et un ensemble de test. Dans la première étape, la formation, le programme utilise les données de formation pour apprendre et créer un modèle. Dans la deuxième phase, la validation aide à traiter des problèmes tels que le surajustement, où le programme peut ne pas être bien calibré pour gérer les données futures. En termes d'équations complexes qui résultent des itérations de formation et de test, les ingénieurs parlent de «minima et maxima locaux», qui désignent des segments du processus de sortie qui peuvent aider les ingénieurs à décider où «terminer» une phase. Dans la troisième étape, la phase de test, de nouvelles données de test sont introduites pour voir si la machine fonctionne aussi bien et avec précision sur les données de test que sur les données de formation, ou si un large fossé entre les performances sur les deux étapes indique un surajustement. .