Roda Local

Modelos / DeepSeek R1

DeepSeek R1 14B

Versão destilada de 14B. Pensa antes de responder, então gera mais tokens.

Parâmetros
14.8B
Contexto máximo
128K
Placa mínima
16 GB de VRAM
Mac mínimo
16 GB

DeepSeek · licença mit · mínimos com Q4_K_M e 8K de contexto

Rodar no Ollama

  • Q4_K_M
    ollama run deepseek-r1:14b
  • Q8_0
    ollama run deepseek-r1:14b-qwen-distill-q8_0
  • FP16
    ollama run deepseek-r1:14b-qwen-distill-fp16

Quanta memória precisa

Total com pesos, KV cache e runtime, por quantização e contexto.

Quantização4K8K32K128K
Q4_K_M10,2 GB11,1 GB16,5 GB38,1 GB
Q5_K_M11,7 GB12,6 GB18 GB39,6 GB
Q8_016,9 GB17,8 GB23,2 GB44,8 GB
FP1630,7 GB31,6 GB37 GB58,6 GB

Placas que rodam

Macs

  • M5a partir de 16 GB · ≈ 12 tok/s
  • M5 Proa partir de 24 GB · ≈ 24 tok/s
  • M5 Maxa partir de 36 GB · ≈ 28 tok/s
  • M4a partir de 16 GB · ≈ 9,3 tok/s
  • M4 Proa partir de 24 GB · ≈ 21 tok/s
  • M4 Maxa partir de 36 GB · ≈ 25 tok/s

Arquitetura

  • 48 camadas, 8 cabeças de KV de 128 dimensões.
  • Cada token de contexto ocupa cerca de 192 KB de KV cache em F16.

Fontes: config.json · arquivo de pesos · atualizado em 16/10/2026

Mesma família

DeepSeek R1 8B · DeepSeek R1 32B