Roda Local

Modelos / Qwen 2.5

Qwen 2.5 Coder 14B

Versão maior do Coder, com respostas de código mais completas.

Parâmetros
14.8B
Contexto máximo
32K
Placa mínima
16 GB de VRAM
Mac mínimo
16 GB

Alibaba · licença apache-2.0 · mínimos com Q4_K_M e 8K de contexto

Rodar no Ollama

  • Q4_K_M
    ollama run qwen2.5-coder:14b
  • Q5_K_M
    ollama run qwen2.5-coder:14b-base-q5_K_M
  • Q8_0
    ollama run qwen2.5-coder:14b-base-q8_0
  • FP16
    ollama run qwen2.5-coder:14b-base-fp16

Quanta memória precisa

Total com pesos, KV cache e runtime, por quantização e contexto.

Quantização4K8K32K
Q4_K_M10,2 GB11,1 GB16,5 GB
Q5_K_M11,7 GB12,6 GB18 GB
Q8_016,9 GB17,8 GB23,2 GB
FP1630,7 GB31,6 GB37 GB

Placas que rodam

Macs

  • M5a partir de 16 GB · ≈ 12 tok/s
  • M5 Proa partir de 24 GB · ≈ 24 tok/s
  • M5 Maxa partir de 36 GB · ≈ 28 tok/s
  • M4a partir de 16 GB · ≈ 9,3 tok/s
  • M4 Proa partir de 24 GB · ≈ 21 tok/s
  • M4 Maxa partir de 36 GB · ≈ 25 tok/s

Arquitetura

  • 48 camadas, 8 cabeças de KV de 128 dimensões.
  • Cada token de contexto ocupa cerca de 192 KB de KV cache em F16.

Fontes: config.json · arquivo de pesos · atualizado em 16/10/2026

Mesma família

Qwen 2.5 7B · Qwen 2.5 14B · Qwen 2.5 Coder 7B