Hermes 4 - Llama-3.1 405B (Non-reasoning) vs o3-pro

Hermes 4 - Llama-3.1 405B (Non-reasoning) vs o3-pro. Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

Veredito

Comparação incompleta

Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

MétricaHermes 4 - Llama-3.1 405B (Non-reasoning)o3-proDiferença
Inteligência (quanto maior, melhor)7.421.9+195.9% o3-pro é 3.0 vezes mais inteligente
Custo total AA (menor é melhor)Não informadoNão informado— não comparável
Tempo de ponta a ponta (quanto menor, melhor)13.68sNão informado— não comparável
Preço por 1 milhão de tokens (entrada/saída)$1.00 / $3.00$20.0 / $80.0
Tipos de entradaTextoTexto, Imagem
Comparação direta

Compare outra coisa

Agentes: Accept: text/markdown or ?format=md retorna esta página como Markdown. JSON: /api/v1/compare/hermes-4-llama-3-1-405b/o3-pro · Markdown: /api/v1/compare/hermes-4-llama-3-1-405b/o3-pro?format=md · llms.txt · habilidade do agente