Devstral 2 vs GPT-4o (Aug '24)

Devstral 2 vs GPT-4o (Aug '24). Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

Veredito

Comparação incompleta

Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

MétricaDevstral 2GPT-4o (Aug '24)Diferença
Inteligência (quanto maior, melhor)8.67.7−10.5% GPT-4o (Aug '24) é 10.5% menos inteligente
Custo total AA (menor é melhor)Não informadoNão informado— não comparável
Tempo de ponta a ponta (quanto menor, melhor)Não informado4.61s— não comparável
Preço por 1 milhão de tokens (entrada/saída)—$2.50 / $10.0
Tipos de entradaTextoTexto, Imagem
Comparação direta

Compare outra coisa

Agentes: Accept: text/markdown or ?format=md retorna esta página como Markdown. JSON: /api/v1/compare/devstral-2/gpt-4o-2024-08-06 · Markdown: /api/v1/compare/devstral-2/gpt-4o-2024-08-06?format=md · llms.txt · habilidade do agente