Un consortium de 40 entreprises technologiques, dont Facebook et Google, s’est réuni pour publier un ensemble de critères d’évaluation de l’IA. En mesurant les produits d’IA par rapport à ces repères, les entreprises sur le terrain seront en mesure d’identifier les solutions de produits optimales et, selon le consortium MLPerf, de « prendre confiance » sur le fait de déployer les bonnes solutions.

Les benchmarks, appelés MLPerf Inference v0.5, s’articulent autour de trois tâches courantes d’apprentissage machine : la classification d’images, la détection d’objets et la traduction automatique. Étant donné les différentes capacités de traitement des différents appareils, il existe des points de repère distincts pour l’IA sur diverses plateformes, comme les téléphones intelligents, les serveurs et les puces.

En plus de fournir des conseils sur les meilleures pratiques aux entreprises dans le domaine de l’intelligence artificielle, on espère que les points de repère aideront à relancer l’innovation, car, malgré leur popularité, les organisations ont été lentes à adopter cette technologie. Dans une déclaration, le président général de MLPerf, Peter Mattson, a déclaré :  » Ces mesures communes et pertinentes pour évaluer les nouveaux cadres de logiciels d’apprentissage machine permettent d’établir un terrain de jeu équitable et même les plus petites entreprises peuvent utiliser « .