This model offers four times the context length of gpt-3.5-turbo, allowing it to support approximately 20 pages of text in a single request at a higher cost. Training data: up to Sep 2021.
Proveedores
Este modelo está alojado por un único proveedor. OpenRouter reenvía todas las solicitudes sin enrutamiento.
| 3,00 US$ | 4,00 US$ | 0,96s | 94 tok/s |
- Entrada 3,00 US$ / Salida 4,00 US$94 tok/s100,00 % de tiempo de actividad
Precios
El precio medio que los clientes pagan realmente por este modelo, junto a los precios que publican los proveedores. El uso de caché y los descuentos hacen que el precio realmente pagado a menudo sea muy inferior al publicado.
Media ponderada
GPT-3.5 Turbo 16k — Historial de precios
| 3,00 US$ | 4,00 US$ | 39,3 % | 100,0 % |
- En vigor en 3,00 US$ / Salida efectiva 4,00 US$Proporción de tókenes100,0 %
Rendimiento
La velocidad de generación indica lo rápido que escribe el modelo (tokens por segundo: cuanto mayor, mejor). La latencia es el tiempo total de ida y vuelta (cuanto menor, mejor). TTFT es el tiempo hasta el primer token: cuánto tarda en aparecer algo en pantalla (cuanto menor, mejor).
P50, el mejor entre los proveedores
P50, mejor proveedor
Tiempo de actividad
El tiempo de actividad es el porcentaje de los últimos 3 días en que al menos un proveedor respondía a las solicitudes. La disponibilidad es el porcentaje de tiempo en que la inferencia se sirvió correctamente. OpenRouter supervisa continuamente y utiliza el siguiente mejor proveedor cuando uno devuelve un error.
Disponibilidad durante los últimos 3 días
Últimas 72 horasDisponibilidad en las últimas 24 horas
Cuando se produce un error en un proveedor ascendente, podemos recuperarnos enrutando la solicitud a otro proveedor que funcione correctamente, si los filtros de su solicitud lo permiten. Puede acceder mediante programación a los datos de tiempo de actividad de cada proveedor a través de la API de endpoints. Obtenga más información sobre nuestras opciones de equilibrio de carga y enrutamiento de proveedores.
Aplicaciones
Aplicaciones públicas que envían más tráfico a este modelo. Una buena señal de cómo son las cargas de trabajo reales en producción, y una pista sobre los casos de uso para los que este modelo es más adecuado.
Actividad
Volumen de tokens y tráfico de solicitudes a este modelo a lo largo del tiempo.
API
Código listo para usar para llamar a este modelo. La API de OpenRouter es compatible con OpenAI: la mayoría de los SDK funcionan con solo cambiar la URL base. Lo único que cambia entre modelos es el identificador del modelo que aparece a continuación.
Actualmente no está disponible mediante el enrutamiento dentro de la región de la UE. Documentación de enrutamiento dentro de la región
Preguntas frecuentes
This model offers four times the context length of gpt-3.5-turbo, allowing it to support approximately 20 pages of text in a single request at a higher cost. Training data: up to Sep 2021.
GPT-3.5 Turbo 16k cuesta 3,00 US$/M de tokens de entrada y 4,00 US$/M de tókenes de salida.
GPT-3.5 Turbo 16k tiene una ventana de contexto de 16.385 tókenes. Admite hasta 4096 tókenes de respuesta.
Sí. GPT-3.5 Turbo 16k admite tools y tool_choice para llamadas a funciones. También admite salidas estructuradas mediante un esquema JSON en response_format.
GPT-3.5 Turbo 16k está disponible a través de 1 proveedor en OpenRouter: Azure.
GPT-6.1 Terra Pro, GPT-6.1 Terra, GPT-6 Luna Decisions y 58 más son otros modelos de texto de OpenAI.
GPT-3.5 Turbo 16k se lanzó el 28 de agosto de 2023. Su fecha límite de conocimientos es 30 de septiembre de 2021.