Llama vs Gemma: programação e custos
Gemma 4 31B lidera o SciCode com 45.49% contra 31.71%. Gemma 4 31B tem o menor custo ilustrado, $0.0018; o outro modelo custa $0.00355.
| Critério | Vencedor | Diferença | Evidência |
|---|---|---|---|
| SciCode (%) | Gemma 4 31B | 13.78 pp | Llama 4 Maverick 31.71% / Gemma 4 31B 45.49%12 |
| Velocidade de saída (tokens/s) | Llama 4 Maverick | 14.5 tokens/s | Llama 4 Maverick 50.0 / Gemma 4 31B 35.5 tokens/s |
| AA: tempo até o primeiro token de resposta (s) | Llama 4 Maverick | 49.07 s | Llama 4 Maverick 0.97 s / Gemma 4 31B 50.04 s |
| Custo estimado por solicitação | Gemma 4 31B | $0.00175 | 10K + 1K: Llama 4 Maverick $0.00355 / Gemma 4 31B $0.0018 |
Testes AA de qualidade de código
Desempenho
| Métrica | Llama 4 Maverick | Gemma 4 31B (Reasoning) |
|---|---|---|
| Velocidade de saída (tokens/s) | 50.0 | 35.5 |
| AA: tempo até o primeiro token de resposta (s) | 0.97 | 50.04 |
Preços e custo por solicitação
| Métrica | Llama 4 Maverick · Novita AI | Gemma 4 31B · Novita AI |
|---|---|---|
| Entrada / 1M tokens | $0.273 | $0.144 |
| Saída / 1M tokens | $0.853 | $0.44 |
| Janela de contexto (tokens) | 1,048,5763 | 262,1444 |
| Saída máxima (tokens) | 8,1923 | 131,0724 |
| Documentação da API | Novita AI · Chat API | |
Programação, raciocínio, contexto e custo
Benchmark de raciocínio
Janela de contexto (tokens)
Metodologia e fontes
SciCode é a avaliação de programação científica da AA, expressa em porcentagem; maior é melhor. Ela é separada do teste de desempenho com 10,000 tokens de entrada e não avalia Cline dentro do editor. Qualidade e desempenho usam as configurações indicadas ao lado dos modelos. Um AA v5 Intelligence Index atual só aparece quando os dois modelos têm um valor publicado. O desempenho da AA usa o teste com 10,000 tokens de entrada e a configuração exibida de cada modelo; os ajustes de raciocínio variam. A velocidade é a taxa mediana de saída. A latência de resposta mede o primeiro token de resposta após o raciocínio, não o primeiro trecho de raciocínio transmitido. No raciocínio não transmitido e nos modelos sem raciocínio, a AA registra o mesmo evento para o primeiro trecho e a primeira resposta. A AA estima essa latência pela resposta inicial e pela duração do raciocínio; não é uma mediana amostrada separadamente. São implantações de referência, sem garantia para os endpoints da Novita. O exemplo sem cache cobra 10,000 tokens de entrada e 1,000 de saída pela tarifa do vendedor indicado; não representa o custo do teste AA. Preços e limites de contexto e saída vêm das fontes dos vendedores citados.
Desenvolva com Novita Model APIs
Crie uma chave API e conecte sua aplicação.