Favicon de meta-llama

Meta: Llama 3.2 3B Instruct

meta-llama/llama-3.2-3b-instruct

Poids du modèle

Llama 3.2 3B is a 3-billion-parameter multilingual large language model, optimized for advanced natural language processing tasks like dialogue generation, reasoning, and summarization. Designed with the latest transformer architecture, it supports eight languages, including English, Spanish, and Hindi, and is adaptable for additional languages.

Trained on 9 trillion tokens, the Llama 3.2 3B model excels in instruction-following, complex reasoning, and tool use. Its balanced performance makes it ideal for applications needing accuracy and efficiency in text generation across multilingual settings.

Click here for the original model card.

Usage of this model is subject to Meta's Acceptable Use Policy.

Modalités
Prix d’entrée / de sortie
0,05 $US / 0,33 $USpar 1M
Contexte
131K
Publié
25 sept. 2024
Date limite des connaissances
déc. 2023

Fournisseurs

Différentes entreprises hébergent le même modèle. OpenRouter achemine votre requête vers l’une d’elles selon le mode de routage que vous choisissez : Équilibré (prix + vitesse), Nitro (le plus rapide) ou Floor (le moins cher).

Tarification

Le prix moyen que les clients paient réellement pour ce modèle, à côté des prix affichés par les fournisseurs. Grâce à la mise en cache et aux remises, le prix réellement payé est souvent bien inférieur au prix affiché.

Moyenne pondérée

Entrée
0,04935 $US/M de jetons
Sortie
0,3294 $US/M de jetons
Historique des prix
Aucune donnée de prix effectif pour cette sélection

Performances

Le débit est la vitesse à laquelle le modèle écrit (jetons par seconde — plus il est élevé, mieux c’est). La latence est le temps total d’aller-retour (plus il est faible, mieux c’est). Le TTFT est le délai avant le premier jeton — le temps avant de voir quelque chose apparaître (plus il est faible, mieux c’est).

Débit
160jetons/s

P50, meilleur résultat tous fournisseurs confondus

Latence
0,24s

P50, meilleur fournisseur

Disponibilité

La disponibilité correspond au pourcentage des 3 derniers jours pendant lequel au moins un fournisseur répondait aux requêtes. La disponibilité du service correspond au pourcentage de temps pendant lequel l’inférence a été assurée avec succès. OpenRouter surveille en continu les fournisseurs et utilise le meilleur fournisseur suivant lorsque l’un d’eux renvoie une erreur.

Disponibilité (3 j)Le modèle était joignable. Requête acheminée vers un fournisseur.
100,00 %
Disponibilité (3 j)Le modèle a renvoyé un résultat d’inférence, quel que soit le fournisseur. Les erreurs et les réponses vides sont comptabilisées à son détriment.
99,97 %

Disponibilité au cours des 3 derniers jours

72 dernières heures
Disponibilité 99,97 %
Il y a 3 joursIl y a 2 joursHierMaintenant

Disponibilité au cours des dernières 24 heures

OpenRouter Availability
99,96 %
Without Routing
93,83 %

Lorsqu’une erreur survient chez un fournisseur en amont, nous pouvons rétablir le service en routant la requête vers un autre fournisseur opérationnel, si les filtres de votre requête le permettent. Vous pouvez accéder par programmation aux données de disponibilité de chaque fournisseur via l’ API des points de terminaison. Découvrez nos options d’ équilibrage de charge et de routage des fournisseurs.

Évaluations comparatives

Scores aux évaluations standardisées et réponses de ce modèle aux prompts communs des tests de référence. Des pourcentages plus élevés sont meilleurs — et chaque rang indique la position de ce modèle parmi les modèles évalués sur cette source.

Résumé des scores aux tests de performance pour Meta: Llama 3.2 3B Instruct (Artificial Analysis)
SourceTest de performanceScore
Artificial AnalysisLlama 3.2 Instruct 3B GPQA Diamond25.5%
Artificial AnalysisLlama 3.2 Instruct 3B HLE5.3%
Artificial AnalysisLlama 3.2 Instruct 3B IFBench26.2%
Artificial AnalysisLlama 3.2 Instruct 3B τ²-Bench Telecom21.1%
Artificial AnalysisLlama 3.2 Instruct 3B AA-LCR4.3%
Artificial AnalysisLlama 3.2 Instruct 3B LiveCodeBench8.3%
Artificial AnalysisLlama 3.2 Instruct 3B MMLU-Pro34.7%
Artificial AnalysisLlama 3.2 Instruct 3B AIME 20253.3%
Artificial AnalysisLlama 3.2 Instruct 3B AIME6.7%
Artificial AnalysisLlama 3.2 Instruct 3B MATH-50048.9%

Applications

Applications publiques qui envoient le plus de trafic à ce modèle. Un bon indicateur des charges de travail réelles en production — et un aperçu des cas d’usage auxquels ce modèle convient le mieux.

1.
169Mjetons
2.
31,5Mjetons
4.
Favicon de https://api.spin.inductionlabs.com/
Spin
nouveau
20,4Mjetons
5.
Favicon de https://sillytavern.app/
SillyTavern
19,7Mjetons
Reste d’OpenRouter
82,4M
Top 5 des applications
4,27M

Activité

Volume de jetons et trafic des requêtes vers ce modèle au fil du temps.

API

Code prêt à l’emploi pour appeler ce modèle. L’API d’OpenRouter est compatible avec OpenAI — la plupart des SDK fonctionnent en remplaçant simplement l’URL de base. Seul le slug du modèle ci-dessous change d’un modèle à l’autre.

Actuellement indisponible via le routage dans la région UE. Documentation sur le routage intrarégional

Questions fréquentes

Explorer d’autres modèles