Command-R (Mar '24) vs o1-preview

Command-R (Mar '24) vs o1-preview. Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

Veredito

Comparação incompleta

Uma conclusão confiável sobre inteligência e custo exige as pontuações de inteligência e os custos de execução do benchmark dos dois modelos. A ausência de dados não é um veredito sobre desempenho.

MétricaCommand-R (Mar '24)o1-previewDiferença
Inteligência (quanto maior, melhor)5.011.4+128.0% o1-preview é 2.3 vezes mais inteligente
Custo total AA (menor é melhor)Não informadoNão informado— não comparável
Tempo de ponta a ponta (quanto menor, melhor)Não informadoNão informado— não comparável
Preço por 1 milhão de tokens (entrada/saída)—$16.5 / $66.0
Tipos de entradaTextoTexto
Comparação direta

Compare outra coisa

Agentes: Accept: text/markdown or ?format=md retorna esta página como Markdown. JSON: /api/v1/compare/command-r-03-2024/o1-preview · Markdown: /api/v1/compare/command-r-03-2024/o1-preview?format=md · llms.txt · habilidade do agente