Hermes 4 - Llama-3.1 405B (Non-reasoning) vs o1-preview

Hermes 4 - Llama-3.1 405B (Non-reasoning) vs o1-preview. Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

Veredito

Comparação incompleta

Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

MétricaHermes 4 - Llama-3.1 405B (Non-reasoning)o1-previewDiferença
Inteligência (quanto maior, melhor)7.411.4+54.1% o1-preview é 54.1% mais inteligente
Custo total AA (menor é melhor)Não informadoNão informado— não comparável
Tempo de ponta a ponta (quanto menor, melhor)13.68sNão informado— não comparável
Preço por 1 milhão de tokens (entrada/saída)$1.00 / $3.00$16.5 / $66.0
Tipos de entradaTextoTexto
Comparação direta

Compare outra coisa

Agentes: Accept: text/markdown or ?format=md retorna esta página como Markdown. JSON: /api/v1/compare/hermes-4-llama-3-1-405b/o1-preview · Markdown: /api/v1/compare/hermes-4-llama-3-1-405b/o1-preview?format=md · llms.txt · habilidade do agente