Une partie de la difficulté à évaluer l'industrie de l'IA est qu'il est facile d'être trop impressionné par des entreprises qui manipulent les benchmarks. Qu'est-ce qu'une entreprise d'IA de premier plan ? Je pense que ce n'est pas celle qui domine ces benchmarks synthétiques, mais plutôt celle qui fait progresser la science de l'IA.

Les deux sont corrélés, mais il est important de garder à l'esprit qu'ils ne le sont pas toujours.