DeepHermes 3 - Mistral 24B Preview (Non-reasoning) vs o1-mini

DeepHermes 3 - Mistral 24B Preview (Non-reasoning) vs o1-mini. Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

Veredito

Comparação incompleta

Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

MétricaDeepHermes 3 - Mistral 24B Preview (Non-reasoning)o1-miniDiferença
Inteligência (quanto maior, melhor)6.19.8+60.7% o1-mini é 60.7% mais inteligente
Custo total AA (menor é melhor)Não informadoNão informado— não comparável
Tempo de ponta a ponta (quanto menor, melhor)Não informadoNão informado— não comparável
Tipos de entradaTextoTexto
Comparação direta

Compare outra coisa

Agentes: Accept: text/markdown or ?format=md retorna esta página como Markdown. JSON: /api/v1/compare/deephermes-3-mistral-24b-preview/o1-mini · Markdown: /api/v1/compare/deephermes-3-mistral-24b-preview/o1-mini?format=md · llms.txt · habilidade do agente