Favicon de meta-llama

Meta: Llama 3.2 3B Instruct

meta-llama/llama-3.2-3b-instruct

Pesos do modelo

Llama 3.2 3B is a 3-billion-parameter multilingual large language model, optimized for advanced natural language processing tasks like dialogue generation, reasoning, and summarization. Designed with the latest transformer architecture, it supports eight languages, including English, Spanish, and Hindi, and is adaptable for additional languages.

Trained on 9 trillion tokens, the Llama 3.2 3B model excels in instruction-following, complex reasoning, and tool use. Its balanced performance makes it ideal for applications needing accuracy and efficiency in text generation across multilingual settings.

Click here for the original model card.

Usage of this model is subject to Meta's Acceptable Use Policy.

Modalidades
Preço de entrada / saída
US$ 0,05 / US$ 0,33por 1M
Contexto
131K
Lançado
25 de set. de 2024
Data de corte do conhecimento
dez. de 2023

Provedores

Diferentes empresas hospedam o mesmo modelo. O OpenRouter roteia sua solicitação para uma delas com base no modo de roteamento escolhido: Balanced (preço + velocidade), Nitro (mais rápido) ou Floor (mais barato).

Preços

O preço médio que os clientes realmente pagam por este modelo, ao lado dos preços publicados pelos provedores. O cache e os descontos fazem com que o preço efetivamente pago seja frequentemente bem inferior ao preço anunciado.

Média ponderada

Entrada
US$ 0,04969/M tokens
Saída
US$ 0,3286/M tokens
Histórico de preços
Nenhum dado de preço efetivo para esta seleção

Desempenho

A vazão indica a velocidade com que o modelo escreve (tokens por segundo — quanto maior, melhor). A latência é o tempo total de ida e volta (quanto menor, melhor). TTFT é o tempo até o primeiro token — quanto tempo leva para você ver algo aparecer (quanto menor, melhor).

Taxa de transferência
178tok/s

P50, melhor entre os provedores

Latência
0,14s

P50, melhor provedor

Disponibilidade

A disponibilidade é a porcentagem dos últimos 3 dias em que pelo menos um provedor estava respondendo às solicitações. A disponibilidade é a porcentagem de tempo em que a inferência foi realizada com sucesso. O OpenRouter monitora continuamente e usa o próximo melhor provedor quando um deles retorna um erro.

Disponibilidade (3d)O modelo estava acessível. Requisição roteada para um provedor.
100,00%
Disponibilidade (3d)O modelo retornou inferência de qualquer provedor. Erros e respostas vazias contam negativamente para essa métrica.
99,99%

Disponibilidade nos últimos 3 dias

Últimas 72 horas
Disponibilidade 99,99%
Há 3 diasHá 2 diasOntemAgora

Disponibilidade nas últimas 24 horas

OpenRouter Availability
99,99%
Without Routing
82,18%

Quando ocorre um erro em um provedor upstream, podemos nos recuperar roteando para outro provedor saudável, se os filtros da sua solicitação permitirem. Você pode acessar os dados de disponibilidade por provedor de forma programática pela API de endpoints. Saiba mais sobre nossas opções de balanceamento de carga e roteamento de provedores.

Avaliações de desempenho

Pontuações em avaliações padronizadas e as próprias saídas deste modelo para prompts compartilhados de testes de desempenho. Porcentagens maiores são melhores — e cada posição mostra onde este modelo fica entre os modelos avaliados naquela fonte.

Resumo das pontuações de avaliações comparativas para Meta: Llama 3.2 3B Instruct (Artificial Analysis)
FonteAvaliação comparativaPontuação
Artificial AnalysisLlama 3.2 Instruct 3B GPQA Diamond25.5%
Artificial AnalysisLlama 3.2 Instruct 3B HLE5.3%
Artificial AnalysisLlama 3.2 Instruct 3B IFBench26.2%
Artificial AnalysisLlama 3.2 Instruct 3B τ²-Bench Telecom21.1%
Artificial AnalysisLlama 3.2 Instruct 3B AA-LCR4.3%
Artificial AnalysisLlama 3.2 Instruct 3B LiveCodeBench8.3%
Artificial AnalysisLlama 3.2 Instruct 3B MMLU-Pro34.7%
Artificial AnalysisLlama 3.2 Instruct 3B AIME 20253.3%
Artificial AnalysisLlama 3.2 Instruct 3B AIME6.7%
Artificial AnalysisLlama 3.2 Instruct 3B MATH-50048.9%

Aplicativos

Aplicativos públicos que enviam mais tráfego para este modelo. Um bom indicador de como são as cargas de trabalho reais em produção — e uma pista sobre os casos de uso para os quais este modelo é mais adequado.

1.
172Mtokens
5.
Favicon de https://sillytavern.app/
SillyTavern
19,8Mtokens
Restante do OpenRouter
87,1M
5 principais aplicativos
4,36M

Atividade

Volume de tokens e tráfego de requisições para este modelo ao longo do tempo.

API

Código pronto para chamar este modelo. A API do OpenRouter é compatível com a OpenAI — a maioria dos SDKs funciona apenas trocando a URL base. A única coisa que muda entre os modelos é o slug do modelo abaixo.

Atualmente indisponível por meio do roteamento intrarregional da UE. Documentação de roteamento na região

Perguntas frequentes