ⵜⴰⵣⵎⴻⵔⵜ ⵏ ⵜⵎⵓⵖⵍⵉ ⵏ ⵜⵎⵓⵖⵍⵉ ⵏ ⵜⵎⵓⵖⵍⵉ ⴷ ⵜⵉⴽⵜⵉ ⵏ ⵍⵍⵙⴰⵙ ⴷⴻⴳ ⵓⵍⵎⴰⴷ ⵏ ⵜⵎⴰⵛⵉⵏⵉⵏ ⵉⵛⵓⴷⴷⴻⵏ ⵖⴻⵔ ⵜⵣⴻⵎⵎⴰⵔ ⵏ ⴰⵅⴻⴷⴷⵉⵎ ⴷ ⵓⵙⵙⴻⵎⵔⴻⵙ ⵏ ⵢⵉⵡⴻⵏ ⵏ ⵓⵎⴹⴰⵏ.
ⴱⵉⴰⵙ ⵢⴻⵜⵜⵎⴻⵙⵍⴰⵢⴷ ⵖⴻⴼ ⵜⵓⵛⵛⴹⴰ ⵉ ⴷⵢⴻⵜⵜⵡⴰⵙⵇⴻⴷⵛⴻⵏ ⵙ ⵓⵙⵇⴻⵔⴷⴻⵛ ⵏ ⵡⵓⴳⵓⵔ ⵏ ⵓⵎⴰⴹⴰⵍ ⵏ ⵜⵉⴷⴻⵜ, ⵉⵣⴻⵎⵔⴻⵏ ⴰⴷ ⴷⵢⴻⴼⴼⴻⵖ ⵙⴻⴳ ⵜⵎⵓⵖⵍⵉⵡⵉⵏ ⵜⵉⴼⴻⵙⵙⴰⵙⵉⵏ ⵙ ⵡⴰⵟⴰⵙ ⴷⴻⴳ ⵜⵎⴻⵥⴷⵉⵜ ⵏ ⵓⵍⵎⴰⴷ. ⵜⴰⵖⴻⵛⵜ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵙ ⵡⴰⵣⴰⵍⵏⵙⴻⵏⵜ ⵜⴻⵣⵎⴻⵔ ⴰⴷ ⵜⴻⵙⵙⵉⵡⴻⴹ ⴰⵎⴹⴰⵏ ⴰⴷ ⵢⴻⵃⴱⴻⵙ ⴰⵙⵙⴰⵖⴻⵏ ⵉⵛⵓⴷⴷⴻⵏ ⴳⴰⵔ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⴷ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵏ ⵢⵉⵙⵡⵉ, ⴷⵖⴰ ⴰⵢⴰ ⴰⴷ ⴷⵢⴰⵡⵉ ⵓⵏⴷⴻⵔⴼⵉⵜⵜⵉⵏⴳ—ⴰⵏⴷⴰ ⴰⵎⴹⴰⵏ ⵓⵔ ⵉⵅⴻⴷⴷⴻⵎ ⴰⵔⴰ ⵎⵍⵉⵃ ⴰⵎⴰ ⴷⴻⴳ ⵓⵙⵙⵉⵍⴻⵖ ⴰⵎⴰ ⴷⴻⴳ ⵢⵉⵙⴻⴼⴽⴰ ⵓⵔ ⵏⴻⵜⵜⵡⴰⵥⴻⵔ ⴰⵔⴰ.
Variance, ⵙⴻⴳ ⵜⴰⵎⴰ ⵏⵉⴹⴻⵏ, ⵢⴻⵜⵜⵎⴻⵙⵍⴰⵢⴷ ⵖⴻⴼ ⵜⵃⴻⵔⵛⵉ ⵏ ⵍⴻⵎⵜⴻⵍ ⵖⴻⴼ ⵜⵎⵓⵖⵍⵉⵡⵉⵏ ⴷⴻⴳ ⵢⵉⵙⴻⴼⴽⴰ ⵏ ⵓⵙⵙⵉⵍⴻⵖ. ⵢⴻⵜⵜⵇⴰⴷⴰⵔ ⵜⴰⵣⵎⴻⵔⵜ ⵏ ⵍⴻⵎⵜⴻⵍ ⵏ ⵓⵙⵙⴻⵎⵔⴻⵙ ⵙ ⵓⴹⴼⴰⵔ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵎⴰⵞⵞⵉ ⵙ ⵍⵃⴻⵙⵙ. ⴰⴱⴻⴷⴷⴻⵍ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵙ ⵡⴰⵟⴰⵙ ⵢⴻⵜⵜⴱⴰⵏⴷ ⵙ ⵡⴰⵟⴰⵙ ⵙⴻⴳ ⵢⵉⵎⵓⴽⴰⵏ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵙ ⵡⴰⵟⴰⵙ ⴰⵢ ⴷⵢⴻⵍⵎⴻⴷ ⵍⵃⴻⵙⵙ ⵏⴻⵖ ⵉⴱⴻⴷⴷⴰⵍⴻⵏ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵙ ⵜⵖⴰⵡⵍⴰ ⴷⴻⴳ ⵢⵉⵙⴻⴼⴽⴰ ⵏ ⵓⵙⵙⵉⵍⴻⵖ, ⴷⵖⴰ ⴷ ⴰⵢⴰ ⴰⵢ ⴷⵢⴻⵜⵜⴰⵡⵉⵏ overfitting—ⵢⴻⵜⵜⴽⴻⵎⵎⵉⵍ ⵙ ⵍⵅⵉⵔ ⴷⴻⴳ ⵢⵉⵙⴻⴼⴽⴰ ⵏ ⵓⵙⵙⵉⵍⴻⵖ ⵎⴰⵛⴰ ⵙ ⵍⵅⵉⵔ ⴷⴻⴳ ⵢⵉⵙⴻⴼⴽⴰ ⵓⵔ ⵏⴻⵜⵜⵡⴰⵥⴻⵔ.
ⵜⴰⵎⴻⵥⵍⴰ (tradeoff) ⵜⴻⵜⵜⴹⴻⵔⵔⵓ ⵉⵎⵉ ⴰⵙⴻⵏⵇⴻⵙ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵙ ⵡⴰⵟⴰⵙ ⵢⴻⵜⵜⵏⴻⵔⵏⵉ ⵙ ⵡⴰⵟⴰⵙ ⵍⵅⵉⵍⴰⴼ ⴷ ⵓⵎⴹⵉⵇⵏⵏⵉⴹⴻⵏ. ⵉⵙⵡⵉ ⵏ ⵓⵙⵏⴻⴼⵍⵉ ⵏ ⵙⵏⴰⵜⴰ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⴷⴻⴳ ⵢⵉⵡⴻⵜ ⵏ ⵜⵉⴽⴽⴻⵍⵜ ⴷ ⴰⵢⴻⵏ ⵉⵅⵓⵚⵚⴻⵏ ⵢⴻⵔⵏⴰ ⵙ ⵡⴰⵟⴰⵙ ⵓⵔ ⵢⴻⵣⵎⵉⵔ ⴰⵔⴰ ⴰⴷ ⵢⵉⵍⵉ. ⵉⵀⵉ, ⵉⵙⵡⵉ ⴷ ⵜⵓⴼⴼⵖⴰ ⵏ ⵍⵎⵉⵣⴰⵏ ⵉⴳⴻⵔⵔⵣⴻⵏ ⴰⵔⴰ ⵢⴻⵙⵏⴻⵇⵙⴻⵏ ⵜⵓⵛⵛⴹⴰ ⵜⴰⵎⴰⵜⵓⵜ ⵖⴻⴼ ⵢⵉⵙⴻⴼⴽⴰ ⵓⵔ ⵏⴻⵜⵜⵡⴰⵥⴻⵔ ⴰⵔⴰ.
ⵜⵉⵙⵜⵔⴰⵜⵉⵊⵉⵢⵉⵏ ⵏ ⵓⵙⴻⵍⵃⵓ ⵏ ⵜⵎⴻⵔⵏⵉⵡⵜ ⵏ ⵜⵎⵓⵖⵍⵉⵡⵉⵏ ⵏ ⵜⵎⵓⵖⵍⵉⵡⵉⵏ ⵍⵍⴰⵏⵜ ⴷⴻⴳⵙⴻⵏⵜ:
ⴰⵙⴻⴽⵛⴻⵎ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ:
ⵙⴻⵇⴷⴻⵛ ⵜⵉⴳⵏⴰⵜⵉⵏ ⴰⵎ kfold crossvalidation ⴰⴽⴽⴻⵏ ⴰⴷ ⵜⴻⵙⵇⴻⴷⵛⴻⴹ ⴰⵅⴻⴷⴷⵉⵎ ⵏ ⵓⵎⴹⴰⵏ ⵖⴻⴼ ⵡⴰⵟⴰⵙ ⵏ ⵜⵎⴻⵣⵣⵓⴳⵉⵏ ⵏ ⵢⵉⵙⴻⴼⴽⴰ. ⴰⵢⴰ ⵢⴻⵜⵜⵄⴰⵡⴰⵏ ⴷⴻⴳ ⵓⵙⵙⴻⴼⵀⴻⵎ ⵎⴰ ⵢⴻⵍⵍⴰ ⴰⵎⴹⴰⵏⵏⵏⵉ ⵢⴻⵜⵜⵡⴰⵃⴻⵜⵜⴻⵎ ⵙ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵏⴻⵖ ⵙ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ.
ⴰⵙⵍⵓⴳⴻⵏ:
ⵙⵙⴻⴽⵛⴻⵎ ⵜⵉⴳⵏⴰⵜⵉⵏ ⵏ ⵓⵙⵍⵓⴳⴻⵏ ⴰⵎ ⵓⵙⵍⵓⴳⴻⵏ ⵏ L1 ⵏⴻⵖ L2 ⴰⴽⴽⴻⵏ ⴰⴷ ⵜⵃⴻⴽⵎⴻⴹ ⵉⵎⵓⴹⴰⵏ ⵉⵅⵓⵚⵚⴻⵏ ⵙ ⵡⴰⵟⴰⵙ, ⴰⴷ ⵜⴻⵙⵏⴻⵇⵙⴻⴹ ⴰⴱⴻⴷⴷⴻⵍ ⵢⴻⵔⵏⴰ ⴰⴷ ⵜⵃⴻⴱⵙⴻⴹ ⴰⵙⴻⵎⵔⴻⵙ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵙ ⵡⴰⵟⴰⵙ.
ⴰⴼⵔⴰⵏ/ⴰⵙⵏⴻⴼⵍⵉ ⵏ ⵜⴻⵡⵙⵉⵜ:
ⴼⵔⴻⵏ ⵜⵉⴳⵏⴰⵜⵉⵏ ⵉⵛⵓⴷⴷⴻⵏ ⵖⴻⵔ ⵡⴰⵢⴰ ⵢⴻⵔⵏⴰ ⵙⵏⴻⵇⵙ ⵜⵉⵖⴱⵓⵍⴰ ⴰⴽⴽⴻⵏ ⵓⵔ ⵢⴻⵜⵜⵇⴰⴷⴰⵔ ⴰⵔⴰ ⵓⵎⴹⴰⵏ ⵙ ⵜⵖⴰⵡⵍⴰ ⵙ ⵍⵃⴻⵙⵙ ⴷⴻⴳ ⵢⵉⵙⴻⴼⴽⴰ, ⵙ ⵡⴰⵢⴰ, ⵙⵏⴻⵇⵙ ⴰⴱⴻⴷⴷⴻⵍ.
ⵜⵉⵡⵜⵉⵍⵉⵏ ⵏ ⵓⵙⴷⵓⴽⴽⴻⵍ:
ⵙⴻⵇⴷⴻⵛ ⵜⵉⴳⵏⴰⵜⵉⵏ ⵏ ⵜⵎⴻⵣⴳⵓⵏⵜ ⴰⵎ ⵓⵙⵇⴻⵔⴷⴻⵛ ⵏ ⵜⴽⴻⵔⵢⴰⵙ (ⴰⵎ Random Forests) ⵏⴻⵖ ⴰⵙⴻⵏⵇⴻⵙ (ⴰⵎ ⴳⵔⴰⴷⵉⴻⵏⵜ Boosting ⵎⴰⵛⵀⵉⵏⴻⵙ) ⵉ ⵢⴻⵙⴷⵓⴽⴽⵍⴻⵏ ⴰⵟⴰⵙ ⵏ ⵢⵉⵎⵓⴽⴰⵏ ⴰⴽⴽⴻⵏ ⴰⴷ ⵙⵏⴻⵇⵙⴻⵏ ⴰⴱⴻⴷⴷⴻⵍ ⴷⴻⴳ ⵡⴰⴽⵓⴷ ⴰⵢⴷⴻⴳ ⴰⵔⴰ ⵃⴻⵔⵣⴻⵏ ⵏⴻⵖ ⵓⵍⴰ ⴰⴷ ⵙⵏⴻⵇⵙⴻⵏ ⴰⵃⴱⴰⵙ.
ⴰⴹⴼⴰⵔ ⵏ ⵡⵓⴳⵓⵔⴻⵏ ⵏ ⵍⴻⵎⵜⴻⵍ:
ⵙⵙⴻⵡⵊⴻⴷ ⴰⵙⴻⵎⵔⴻⵙ ⵏ ⵓⵎⴹⴰⵏ ⵙ ⵓⴱⴻⴷⴷⴻⵍ ⵏ ⵢⵉⴼⴻⵔⴷⵉⵙⴻⵏ ⵏ ⵜⵎⴻⵥⴷⵉⵢⵉⵏ (hyperparamètres) ⵏⴻⵖ ⵙ ⵓⵙⴻⵇⴷⴻⵛ ⵏ ⵢⵉⵎⵓⴽⴰⵏ ⵉⵙⴻⵀⵍⴻⵏ ⵏⴻⵖ ⵉⵅⵓⵚⵚⴻⵏ ⵓⴳⴰⵔ, ⵙ ⵓⵙⵏⴻⵔⵏⵉ ⵏ ⵍⵎⵉⵣⴰⵏ ⴳⴰⵔ ⵜⵎⴻⵥⴷⵉⵢⵉⵏ ⴷ ⵜⵎⴻⵥⴷⵉⵢⵉⵏ.
ⴰⵙⴽⴰⵙⵉ ⵏ ⵓⵙⴼⵓⴳⴻⵍ ⵏ ⵓⵎⴳⵉⵔⴻⴷ:
ⵙⵙⴻⴼⵀⴻⵎⴷ ⵉⴼⴻⵔⴷⵉⵙⴻⵏ ⵏ ⵜⵎⵓⵖⵍⵉ ⴷ ⵜⵎⵓⵖⵍⵉ ⵙ ⵜⵖⴰⵡⵍⴰ ⴰⴽⴽⴻⵏ ⴰⴷ ⴷⵜⴰⴼⴻⴹ ⵜⵉⵥⵔⵉ ⵖⴻⴼ ⵜⵉⴽⵍⵉ ⵏ ⵓⵎⴷⴰⵏⵏⵏⵉ ⵢⴻⵔⵏⴰ ⴰⴷ ⵜⴳⴻⴹ ⵉⵙⴻⵎⵜⴰⵔ ⵙ ⵜⵎⵓⵙⵙⵏⵉ.
ⵊⴻⵎⵄⴻⴹ ⵓⴳⴰⵔ ⵏ ⵢⵉⵙⴻⴼⴽⴰ:
ⴰⵙⵏⴻⵔⵏⵉ ⵏ ⵍⵇⵉⴷⴰⵔ ⵏ ⵜⵎⴻⵣⴳⵓⵏⵜ ⵏ ⵢⵉⵙⴻⴼⴽⴰ ⵢⴻⵣⵎⴻⵔ ⴰⴷ ⵉⵄⵉⵡⴻⵏ ⴰⵎⴹⴰⵏ ⴰⴷ ⵢⴻⵙⵙⴻⵎⵍⵉⵍ ⵅⵉⵔ ⵙ ⵓⴹⴼⴰⵔ ⵏ ⵜⵖⴰⵡⵙⵉⵡⵉⵏ ⵏ ⴷⴷⴰⵡ ⵏ ⵜⵎⵓⵔⵜ ⵓⴳⴰⵔ ⴷ ⵓⵙⵏⴻⴼⵍⵉ ⵏ ⵜⵎⵓⵖⵍⵉ.
ⵙ ⵓⵙⴼⴻⵀⴻⵎ ⴷ ⵓⵙⵏⴻⴼⵍⵉ ⵏ ⵜⵎⴻⵔⵏⵉⵡⵜ ⵏ ⵜⵎⵓⵖⵍⵉⵡⵉⵏ ⵏ ⵜⵎⵓⵖⵍⵉⵡⵉⵏ, ⵉⵎⵙⵓⵊⵊⵉⵢⴻⵏ ⵏ ⵓⵍⵎⴰⴷ ⵏ ⵜⵎⴰⵛⵉⵏⵉⵏ ⵣⴻⵎⵔⴻⵏ ⴰⴷ ⴷⵙⵏⵓⵍⴼⵓⵏ ⵉⵎⴻⵏⵣⴰⵢⴻⵏ (modèles) ⴰⵢ ⵢⴻⵙⵙⴻⵎⵖⴰⵔⴻⵏ ⵎⵍⵉⵃ ⵉⵙⴻⴼⴽⴰ ⵓⵔ ⵏⴻⵜⵜⵡⴰⵥⴻⵔ ⴰⵔⴰ, ⵙ ⵡⴰⵢⴰ, ⴰⴷ ⵙⵙⴻⵍⵀⵓⵏ ⴰⵅⴻⴷⴷⵉⵎ ⴷ ⵜⵖⴻⵍⵍⵉⵙⵜ (sécurité) ⵙ ⵓⵎⴰⵜⴰ.