Llama vs Gemma: programação e custos

Gemma 4 31B lidera o SciCode com 45.49% contra 31.71%. Gemma 4 31B tem o menor custo ilustrado, $0.0018; o outro modelo custa $0.00355.

Atualizado · 4 fontes · Metodologia

CritérioVencedorDiferençaEvidência
SciCode (%)Gemma 4 31B13.78 ppLlama 4 Maverick 31.71% / Gemma 4 31B 45.49%12
Velocidade de saída (tokens/s)Llama 4 Maverick14.5 tokens/sLlama 4 Maverick 50.0 / Gemma 4 31B 35.5 tokens/s
AA: tempo até o primeiro token de resposta (s)Llama 4 Maverick49.07 sLlama 4 Maverick 0.97 s / Gemma 4 31B 50.04 s
Custo estimado por solicitaçãoGemma 4 31B$0.0017510K + 1K: Llama 4 Maverick $0.00355 / Gemma 4 31B $0.0018

Testes AA de qualidade de código

MétricaLlama 4 MaverickGemma 4 31B (Reasoning)
SciCode (%)31.71145.492

Desempenho

MétricaLlama 4 MaverickGemma 4 31B (Reasoning)
Velocidade de saída (tokens/s)50.035.5
AA: tempo até o primeiro token de resposta (s)0.9750.04

Preços e custo por solicitação

MétricaLlama 4 Maverick · Novita AIGemma 4 31B · Novita AI
Entrada / 1M tokens$0.273$0.144
Saída / 1M tokens$0.853$0.44
Janela de contexto (tokens)1,048,5763262,1444
Saída máxima (tokens)8,1923131,0724
Documentação da APINovita AI · Chat API
Exemplo: 10,000 tokens de entrada + 1,000 de saída faturada

Programação, raciocínio, contexto e custo

Benchmark de programação

  • AA SciCode: Llama 4 Maverick 31.71% / Gemma 4 31B 45.49%.12

Benchmark de raciocínio

  • Com as configurações indicadas, a espera AA até a primeira resposta é 0.97 s para Llama 4 Maverick e 50.04 s para Gemma 4 31B.12

Janela de contexto (tokens)

  • Llama é a escolha por capacidade com 1,048,576 tokens; Gemma chega a 262,144.12

Custo estimado por solicitação

  • As mesmas quantidades de tokens sem cache custam $0.00355 para Llama 4 Maverick e $0.0018 para Gemma 4 31B.12

Metodologia e fontes

SciCode é a avaliação de programação científica da AA, expressa em porcentagem; maior é melhor. Ela é separada do teste de desempenho com 10,000 tokens de entrada e não avalia Cline dentro do editor. Qualidade e desempenho usam as configurações indicadas ao lado dos modelos. Um AA v5 Intelligence Index atual só aparece quando os dois modelos têm um valor publicado. O desempenho da AA usa o teste com 10,000 tokens de entrada e a configuração exibida de cada modelo; os ajustes de raciocínio variam. A velocidade é a taxa mediana de saída. A latência de resposta mede o primeiro token de resposta após o raciocínio, não o primeiro trecho de raciocínio transmitido. No raciocínio não transmitido e nos modelos sem raciocínio, a AA registra o mesmo evento para o primeiro trecho e a primeira resposta. A AA estima essa latência pela resposta inicial e pela duração do raciocínio; não é uma mediana amostrada separadamente. São implantações de referência, sem garantia para os endpoints da Novita. O exemplo sem cache cobra 10,000 tokens de entrada e 1,000 de saída pela tarifa do vendedor indicado; não representa o custo do teste AA. Preços e limites de contexto e saída vêm das fontes dos vendedores citados.

  1. Artificial Analysis · Llama 4 Maverick · qualidade e desempenho
  2. Artificial Analysis · Gemma 4 31B (Reasoning) · qualidade e desempenho
  3. Novita AI · Llama 4 Maverick · preços e limites do endpoint
  4. Novita AI · Gemma 4 31B · preços e limites do endpoint

Desenvolva com Novita Model APIs

Crie uma chave API e conecte sua aplicação.