Roda Local

Modelos / DeepSeek R1

DeepSeek R1 8B

Raciocínio do DeepSeek R1 destilado num Qwen 3 de 8B.

Parâmetros
8.2B
Contexto máximo
128K
Placa mínima
8 GB de VRAM
Mac mínimo
16 GB

DeepSeek · licença mit · mínimos com Q4_K_M e 8K de contexto

Rodar no Ollama

  • Q4_K_M
    ollama run deepseek-r1:8b
  • Q8_0
    ollama run deepseek-r1:8b-0528-qwen3-q8_0
  • FP16
    ollama run deepseek-r1:8b-0528-qwen3-fp16

Quanta memória precisa

Total com pesos, KV cache e runtime, por quantização e contexto.

Quantização4K8K32K128K
Q4_K_M6,2 GB6,9 GB11,1 GB27,7 GB
Q5_K_M7,1 GB7,8 GB11,9 GB28,6 GB
Q8_010,1 GB10,8 GB14,9 GB31,6 GB
FP1618,1 GB18,8 GB23 GB39,7 GB

Placas que rodam

Macs

  • M5a partir de 16 GB · ≈ 20 tok/s
  • M5 Proa partir de 24 GB · ≈ 41 tok/s
  • M5 Maxa partir de 36 GB · ≈ 48 tok/s
  • M4a partir de 16 GB · ≈ 16 tok/s
  • M4 Proa partir de 24 GB · ≈ 37 tok/s
  • M4 Maxa partir de 36 GB · ≈ 43 tok/s

Arquitetura

  • 36 camadas, 8 cabeças de KV de 128 dimensões.
  • Cada token de contexto ocupa cerca de 144 KB de KV cache em F16.

Fontes: config.json · arquivo de pesos · atualizado em 16/10/2026

Mesma família

DeepSeek R1 14B · DeepSeek R1 32B