Ranking de modelos de IA — 11 leaderboards reunidos

Perguntas frequentes

O que é o ARBITER?

Um ranking geral de modelos e empresas de IA que combina estatisticamente 11 leaderboards de IA de referência.

Com que frequência é atualizado?

A cada hora. Novos modelos de qualquer leaderboard são adicionados automaticamente.

Como a pontuação geral é calculada?

A métrica principal de cada site é padronizada e um modelo fatorial corrige as diferenças entre sites para estimar a capacidade comum de cada modelo.

Modelos avaliados em menos leaderboards saem prejudicados?

Não. Avaliações ausentes nunca penalizam. Em vez disso, a incerteza é mostrada como um intervalo de 90%.

Qual é o melhor modelo de IA agora?

O nº 1 do ranking geral. A melhor escolha depende do seu uso, então confira também os rankings por área.