Arrakis / Modelos / MiniCPM5-1B

Requisitos de GPU de MiniCPM5-1B

MiniCPM5-1B tiene 1,1B parámetros. Para servirlo, calcula unos 2,6 GB de memoria de GPU en 16 bits, 1,3 GB en 8 bits o 0,6 GB en 4 bits, incluido un 20% para la caché KV y las activaciones.

Lo que hace falta para servirlo

La memoria de GPU para ejecutarlo en inferencia, con la configuración de GPU más pequeña que lo sostiene y el precio más bajo en Arrakis ahora mismo.

PrecisiónMemoria y configuración mínima
16 bits2,6 GB: una RTX 4090 o RTX 3090, la RTX 3090 desde 0,19 US$ por GPU-hora
8 bits1,3 GB: una RTX 4090 o RTX 3090, la RTX 3090 desde 0,19 US$ por GPU-hora
4 bits0,6 GB: una RTX 4090 o RTX 3090, la RTX 3090 desde 0,19 US$ por GPU-hora

Lo que hace falta para ajustarlo

QLoRA entrena adaptadores sobre un modelo congelado de 4 bits; LoRA, sobre uno de 16 bits, y el ajuste fino completo actualiza todos los pesos. Las cifras no incluyen las activaciones, que crecen con el tamaño del lote y la longitud de secuencia.

MétodoMemoria y configuración mínima
QLoRA0,8 GB: una RTX 4090 o RTX 3090, la RTX 3090 desde 0,19 US$ por GPU-hora
LoRA2,6 GB: una RTX 4090 o RTX 3090, la RTX 3090 desde 0,19 US$ por GPU-hora
Ajuste fino completo17 GB: una RTX 4090 o RTX 3090, la RTX 3090 desde 0,19 US$ por GPU-hora

Sobre el modelo

De su ficha y sus archivos en Hugging Face. Las cifras de memoria siguen la guía de memoria de GPU.

Parámetros
1.1B
Ventana de contexto (tokens)
131,072
Publicado en
BF16
Licencia
apache-2.0
Fecha de publicación
2026-05-21
Pesos
openbmb/MiniCPM5-1B

Despliégalo en Arrakis

Abre Models en la consola, elige vLLM, SGLang o llama.cpp y alquila una GPU en la que quepa. Obtienes un endpoint compatible con OpenAI con su propia clave de API, y SSH root a la máquina. O ejecútalo tú mismo en cualquier máquina con suficiente memoria de GPU:

vLLM
vllm serve openbmb/MiniCPM5-1B --tensor-parallel-size 1

Preguntas

Los precios en tiempo real de todas las GPU están en la página de precios de GPU.

¿Cuánta memoria de GPU necesita MiniCPM5-1B?
Para servirlo, unos 3 GB en 16 bits, 1 GB en 8 bits y 1 GB en 4 bits, incluido un 20% para la caché KV y las activaciones. Para ajustarlo, unos 1 GB con QLoRA, 3 GB con LoRA y 17 GB para un ajuste fino completo con Adam, sin contar las activaciones.
¿Puedo ejecutar MiniCPM5-1B en una sola GPU?
Sí. En 16 bits necesita unos 2,6 GB, que caben en una RTX 4090 o RTX 3090.
¿Cuánto cuesta ejecutar MiniCPM5-1B?
En 16 bits necesita una RTX 4090 o RTX 3090; en 4 bits, una RTX 4090 o RTX 3090. Cada configuración de esta página muestra el precio más bajo por GPU-hora en Arrakis ahora mismo, y pagas por hora desde un saldo prepago.
¿Cómo despliego MiniCPM5-1B en Arrakis?
Abre Models en la consola de Arrakis, pega openbmb/MiniCPM5-1B, elige vLLM, SGLang o llama.cpp y alquila una GPU en la que quepa. Obtienes un endpoint compatible con OpenAI con su propia clave de API, y SSH root a la máquina.