Claude 3.5 Haiku vs Devstral Small 2

Claude 3.5 Haiku vs Devstral Small 2. Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

Veredito

Comparação incompleta

Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

MétricaClaude 3.5 HaikuDevstral Small 2Diferença
Inteligência (quanto maior, melhor)8.97.5−15.7% Devstral Small 2 é 15.7% menos inteligente
Custo total AA (menor é melhor)Não informadoNão informado— não comparável
Tempo de ponta a ponta (quanto menor, melhor)Não informadoNão informado— não comparável
Tipos de entradaTexto, ImagemTexto, Imagem
Comparação direta

Compare outra coisa

Agentes: Accept: text/markdown or ?format=md retorna esta página como Markdown. JSON: /api/v1/compare/claude-3-5-haiku/devstral-small-2 · Markdown: /api/v1/compare/claude-3-5-haiku/devstral-small-2?format=md · llms.txt · habilidade do agente