Saltar al contenido principal
Motor local listo

Command R+

2 GPUs de consumo pueden ejecutar Command R+ en Q4 de forma nativa. Umbrales de VRAM y benchmarks precisos abajo.

2 GPUs compatibles
3 con offloading
104B parámetros
131K contexto
Mejor opción
M4 Ultra · 128 GB VRAM Q4 nativo

Precios y disponibilidad pueden cambiar · enlace de afiliado

Javier Morales
Javier Morales Especialista en hardware IA — 8 años de experiencia
GitHub: github.com/javier-morales-ia

llama.cpp 0.2.x · CUDA 12 · ROCm 6 · actualizado mensualmente · metodología →

Contexto de ejecución

ARQUITECTURA TRANSFORMER
CONTEXTO 131K TOKENS
CUANTIZACIÓN 4-BIT GGUF
PROVEEDOR Cohere
LICENCIA CC-BY-NC-4.0
REQUISITO VRAM
59 GB
4GB 8GB 12GB 16GB 24GB+
Decisión de hardware

Este modelo requiere unaGPU tope de gama (48 GB+ VRAM)

Mínimo

M4 Ultra

Funciona en Q4 — usable, con algo de espera

128 GB VRAM
Ver configuración compatible
Equilibrado

M3 Ultra

Mejor relación valor/rendimiento diario

192 GB VRAM
Ver configuración compatible
Óptimo

M4 Ultra

Máxima calidad, inferencia más rápida

128 GB VRAM
Ver configuración compatible

GPUs compatibles para Command R+

Mejores opciones por compatibilidad, margen de VRAM y valor — precios y disponibilidad pueden cambiar.

M4 Ultra
128 GB VRAM · Q4 nativo Amazon

M4 Ultra

0.0 (0 reseñas)

Ventajas

  • Ejecuta Command R+ Q4 nativo
  • 128 GB VRAM — margen suficiente
M3 Ultra
192 GB VRAM · Q4 nativo Amazon

M3 Ultra

0.0 (0 reseñas)

Ventajas

  • Ejecuta Command R+ Q4 nativo
  • 192 GB VRAM — margen suficiente
Ver M3 Ultra en Amazon →
RTX 5090
32 GB VRAM · Offloading Amazon

RTX 5090

4.4 (234 reseñas)

Ventajas

  • Funciona con offloading CPU
  • 32 GB VRAM — margen suficiente

Algunos enlaces son enlaces de afiliado de Amazon. Podemos ganar una comisión sin coste adicional para ti. La cookie de Amazon puede durar hasta 24 horas tras tu clic.

*Los precios y la disponibilidad pueden cambiar. Algunos enlaces son de afiliado.

Requisitos del sistema

VRAM GPU 59 GB GPU gama alta
RAM del sistema 89 GB 64 GB o más
Almacenamiento 59 GB Q4 · SSD recomendado
CPU Cualquier CPU moderna GPU requerida

VRAM por cuantización

Cuantización VRAM necesaria Espacio en disco Calidad
FP16 (calidad máxima) 208 GB 208 GB Máxima
Q8 (alta calidad) 104 GB 104 GB Casi sin pérdida
Q4 (recomendado) Mejor equilibrio 59 GB 59 GB Recomendada
Q2 (mínimo) 30 GB 30 GB Pérdida de calidad

Detalles del modelo

Desarrollador Cohere
Parámetros 104B
Ventana de contexto 131,072 tokens
Licencia CC-BY-NC-4.0
Casos de uso chat, reasoning, analysis
Lanzamiento 2024-04

Instalar con Ollama

ollama run command-r-plus

Hugging Face

CohereForAI/c4ai-command-r-plus
Ver en HF →
Requisitos técnicos

¿Tu GPU puede ejecutar Command R+?

Command R+ requiere <strong class="text-primary-container">59 GB de VRAM</strong> en Q4. 2 GPUs de consumo cumplen este umbral. Por debajo de 8 GB o 57 GB verás una latencia de offload notable.

30GB Mínimo crítico
59GB Óptimo Q4
104GB Alta calidad Q8
208GB Máximo FP16

Matriz de rendimiento de hardware

2 Q4 nativo · 3 offload

GPU VRAM Compatibilidad Velocidad est. Acción
M4 Ultra 128GB Óptimo 45 tok/s Calcular →
M3 Ultra 192GB Óptimo 38 tok/s Calcular →
RTX 5090 32GB Offload Calcular →
M4 Max 48GB 48GB Offload 20 tok/s Calcular →
M4 Max 36GB 36GB Offload Calcular →

GPUs recomendadas para Command R+

Benchmarks Reales
Sin Reviews Pagadas
Selección Editorial
Basado en Datos

Mejores opciones por compatibilidad, margen de VRAM y valor; precios y disponibilidad pueden cambiar.

Algunos enlaces son enlaces de afiliado de Amazon. Podemos ganar una comisión sin coste adicional para ti. La cookie de Amazon puede durar hasta 24 horas tras tu clic.

Command R+ — Guía de compatibilidad

Command R+ con 104B parámetros solo se ejecuta completamente en configuraciones multi-GPU o de servidor. Considera versiones destiladas si existen. La calculadora de VRAM puede ayudarte a encontrar alternativas compatibles.

Compara GPUs para Command R+

¿Qué GPU merece la pena? Especificaciones y benchmarks reales lado a lado.

Hardware compatible

GPUs que ejecutan Command R+ en Q4, ordenadas por rendimiento en IA.

Benchmarks Reales
Sin Reviews Pagadas
Basado en Datos
M4 Ultra

Apple · 128 GB VRAM

Q4 OK
45 tok/s > $1000
M3 Ultra

Apple · 192 GB VRAM

Q4 OK
38 tok/s > $1000

Algunos enlaces son enlaces de afiliado de Amazon. Podemos ganar una comisión sin coste adicional para ti. La cookie de Amazon puede durar hasta 24 horas tras tu clic.

Alternativas más prácticas

Modelos similares en la categoría chat con requisitos de VRAM comparables.

¿No sabes qué GPU necesitas para Command R+?

La calculadora de VRAM te dice exactamente qué cuantización soporta tu hardware.

M4 Ultra

Ver disponibilidad

Los precios cambian a diario