Parte da dificuldade em avaliar a indústria de IA é que é fácil ficar excessivamente impressionado com empresas que manipulam benchmarks. O que é uma empresa líder em IA? Eu acho que não é aquela que lidera esses benchmarks sintéticos, mas sim aquela que avança a ciência da IA.

Os dois estão correlacionados, mas é importante ter em mente que nem sempre.