
Meta: Llama 3.1 8B Instruct
meta-llama/llama-3.1-8b-instruct
Pesos del modeloMeta's latest class of model (Llama 3.1) launched with a variety of sizes & flavors. This 8B instruct-tuned version is fast and efficient.
It has demonstrated strong performance compared to leading closed-source models in human evaluations.
To read more about the model release, click hereOpens in new tab. Usage of this model is subject to Meta's Acceptable Use PolicyOpens in new tab.
Proveedores
Distintas empresas alojan el mismo modelo. OpenRouter enruta su solicitud a una de ellas según el modo de enrutamiento que elija: Balanced (precio + velocidad), Nitro (el más rápido) o Floor (el más económico).
| 0,020 US$ | 0,040 US$ | -- | 0,73s | 17 tok/s | ||
| 0,152 US$ | 0,287 US$ | -- | 0,46s | 17 tok/s | ||
| 0,050 US$ | 0,080 US$ | 0,025 US$ | 0,20s | 579 tok/s | ||
| 0,220 US$ | 0,220 US$ | 0,220 US$ | 0,39s | 137 tok/s |
Entrada 0,02 US$ / Salida 0,04 US$17 tok/s100,00 % de tiempo de actividad- Entrada 0,152 US$ / Salida 0,287 US$17 tok/s98,26 % de tiempo de actividad
- Entrada 0,05 US$ / Salida 0,08 US$579 tok/s99,02 % de tiempo de actividad
- Entrada 0,22 US$ / Salida 0,22 US$137 tok/s97,99 % de tiempo de actividad
Precios
El precio medio que los clientes pagan realmente por este modelo, junto a los precios que publican los proveedores. El uso de caché y los descuentos hacen que el precio realmente pagado a menudo sea muy inferior al publicado.
Media ponderada
Llama 3.1 8B Instruct — Historial de precios
| 0,0194 US$ | 0,0375 US$ | 0,0 % | 37,1 % | ||
| 0,0397 US$ | 0,0794 US$ | 38,8 % | 19,2 % | ||
| 0,1512 US$ | 0,2823 US$ | 0,0 % | 0,6 % | ||
| 0,2194 US$ | 0,2187 US$ | 60,0 % | 43,0 % |
- En vigor en 0,0194 US$ / Salida efectiva 0,0375 US$Proporción de tókenes37,1 %
- En vigor en 0,0397 US$ / Salida efectiva 0,0794 US$Proporción de tókenes19,2 %
- En vigor en 0,1512 US$ / Salida efectiva 0,2823 US$Proporción de tókenes0,6 %
- En vigor en 0,2194 US$ / Salida efectiva 0,2187 US$Proporción de tókenes43,0 %
Rendimiento
La velocidad de generación indica lo rápido que escribe el modelo (tokens por segundo: cuanto mayor, mejor). La latencia es el tiempo total de ida y vuelta (cuanto menor, mejor). TTFT es el tiempo hasta el primer token: cuánto tarda en aparecer algo en pantalla (cuanto menor, mejor).
P50, el mejor entre los proveedores
P50, mejor proveedor
Tiempo de actividad
El tiempo de actividad es el porcentaje de los últimos 3 días en que al menos un proveedor respondía a las solicitudes. La disponibilidad es el porcentaje de tiempo en que la inferencia se sirvió correctamente. OpenRouter supervisa continuamente y utiliza el siguiente mejor proveedor cuando uno devuelve un error.
Disponibilidad durante los últimos 3 días
Últimas 72 horasDisponibilidad en las últimas 24 horas
Cuando se produce un error en un proveedor ascendente, podemos recuperarnos enrutando la solicitud a otro proveedor que funcione correctamente, si los filtros de su solicitud lo permiten. Puede acceder mediante programación a los datos de tiempo de actividad de cada proveedor a través de la API de endpoints. Obtenga más información sobre nuestras opciones de equilibrio de carga y enrutamiento de proveedores.
Pruebas de rendimiento
Puntuaciones en evaluaciones estandarizadas y respuestas de este modelo a instrucciones compartidas de las pruebas de referencia. Los porcentajes más altos son mejores, y cada posición indica dónde se sitúa este modelo entre los modelos evaluados en esa fuente.
| Fuente | Prueba de rendimiento | Puntuación |
|---|---|---|
| Artificial Analysis | Llama 3.1 Instruct 8B Coding Index | 5,4 |
| Artificial Analysis | Llama 3.1 Instruct 8B GPQA Diamond | 25.9% |
| Artificial Analysis | Llama 3.1 Instruct 8B HLE | 5.3% |
| Artificial Analysis | Llama 3.1 Instruct 8B IFBench | 28.6% |
| Artificial Analysis | Llama 3.1 Instruct 8B τ²-Bench Telecom | 16.4% |
| Artificial Analysis | Llama 3.1 Instruct 8B AA-LCR | 18.0% |
| Artificial Analysis | Llama 3.1 Instruct 8B GDPval-AA | 0.0% |
| Artificial Analysis | Llama 3.1 Instruct 8B CritPt | 0.0% |
| Artificial Analysis | Llama 3.1 Instruct 8B LiveCodeBench | 11.6% |
| Artificial Analysis | Llama 3.1 Instruct 8B Terminal-Bench Hard | 0.8% |
| Artificial Analysis | Llama 3.1 Instruct 8B Terminal-Bench 2.1 | 1.5% |
| Artificial Analysis | Llama 3.1 Instruct 8B MMLU-Pro | 47.6% |
| Artificial Analysis | Llama 3.1 Instruct 8B AIME 2025 | 4.3% |
| Artificial Analysis | Llama 3.1 Instruct 8B AIME | 7.7% |
| Artificial Analysis | Llama 3.1 Instruct 8B MATH-500 | 51.9% |
Aplicaciones
Aplicaciones públicas que envían más tráfico a este modelo. Una buena señal de cómo son las cargas de trabajo reales en producción, y una pista sobre los casos de uso para los que este modelo es más adecuado.
Actividad
Volumen de tokens y tráfico de solicitudes a este modelo a lo largo del tiempo.
API
Código listo para usar para llamar a este modelo. La API de OpenRouter es compatible con OpenAI: la mayoría de los SDK funcionan con solo cambiar la URL base. Lo único que cambia entre modelos es el identificador del modelo que aparece a continuación.
Actualmente no está disponible mediante el enrutamiento dentro de la región de la UE. Documentación de enrutamiento dentro de la región
Preguntas frecuentes
Meta's latest class of model (Llama 3.1) launched with a variety of sizes & flavors. This 8B instruct-tuned version is fast and efficient. It has demonstrated strong performance compared to leading closed-source models in human evaluations. To read more about the model release, click here. Usage of this model is subject to Meta's Acceptable Use Policy.
Llama 3.1 8B Instruct cuesta 0,02 US$/M de tokens de entrada y 0,04 US$/M de tókenes de salida.
Llama 3.1 8B Instruct tiene una ventana de contexto de 131.072 tókenes. Admite hasta 16.384 tókenes de respuesta.
Sí. Llama 3.1 8B Instruct acepta tools y tool_choice para llamadas a funciones en 2 de los 4 proveedores que lo ofrecen, y las solicitudes que envían herramientas se enrutan a esos proveedores. También admite salidas estructuradas mediante un esquema JSON en response_format.
Llama 3.1 8B Instruct está disponible a través de 4 proveedores en OpenRouter: DeepInfra, Groq, Cloudflare y CoreWeave. Las solicitudes se enrutan al mejor proveedor disponible, con conmutación automática a los demás en caso de fallo, y puede fijar o excluir proveedores mediante el enrutamiento de proveedores.
Llama 3.1 8B Instruct se lanzó el 23 de julio de 2024. Su fecha límite de conocimientos es 31 de diciembre de 2023.