Pular para o conteúdo

Melhor GPU para QWEN-3.6-35B-A3B localmente

Preços em tempo real e recomendações de hardware atualizados para julho de 2026.

35B
3B
moe

Ajustar comprimento do contexto

Deslize para tamanhos populares ou digite um valor manualmente.

k tokens
8k
16k
32k
64k
128k
256k
Entrada econômicaQ3_K_M quant
15.1 GB
0.4 GB
VRAM total:15.5 GB

Hardware recomendado

Radeon RX 9060 XT 16GB16GB de VRAM
1444 tok/sprefill
59 tok/sgeração
BRL 2899.99Ver placa
GeForce RTX 5060 Ti 16GB16GB de VRAM
2300 tok/sprefill
98 tok/sgeração

MoE model weights require 16GB VRAM minimum for Q3 quantizations.

Ponto de equilíbrio idealQ4_K_M quant
20.1 GB
0.4 GB
VRAM total:20.5 GB

Hardware recomendado

RTX A500024GB de VRAM
1409 tok/sprefill
86 tok/sgeração
BRL 29637.65Ver placa
GeForce RTX 309024GB de VRAM
3320 tok/sprefill
105 tok/sgeração
GeForce RTX 409024GB de VRAM
4516 tok/sprefill
154 tok/sgeração
RTX PRO 4000 Blackwell24GB de VRAM
3373 tok/sprefill
121 tok/sgeração

Runs completely inside 24GB framebuffers. High active speed due to MoE execution path.

Quase sem perdasQ8_0 quant
40.3 GB
0.4 GB
VRAM total:40.6 GB

Hardware recomendado

RTX A600048GB de VRAM
1961 tok/sprefill
51 tok/sgeração
BRL 52882.24Ver placa
RTX PRO 5000 Blackwell48GB de VRAM
5295 tok/sprefill
143 tok/sgeração
Radeon PRO W790048GB de VRAM
3106 tok/sprefill
57 tok/sgeração

Requires 48GB+ workstation cards to hold the full Q8 weight matrix comfortably.

Otimizando a configuração para QWEN-3.6-35B-A3B

Recomendações de quantização

Para tarefas diárias de programação e raciocínio, o Q4_K_M (quantização de 4 bits) oferece o melhor equilíbrio entre qualidade e eficiência de memória: reduz os requisitos de memória em mais de 70% com uma perda de qualidade mínima em comparação com FP16. Os ajustes Q8 e superiores preservam mais fidelidade ao custo de um uso de VRAM significativamente maior, o que pode forçar o descarregamento de camadas e reduzir o desempenho.

Software local recomendado

Recomendamos usar o Ollama como o executor principal para inferência local devido ao seu particionamento de GPU automatizado e otimizações de cache de contexto. Para ajustes avançados ou partições de quantização, o llama.cpp compilado nativamente com Flash Attention fornece o melhor controle granular.

Como as velocidades de tokens são estimadas

Como calculamos o Índice de Valor da GPU e normalizamos os dados de mercado.

📖

Leitura (Prefill)

A consulta é processada em uma única passagem paralela. Isso é limitado por capacidade de computação: satura os tensor cores da GPU.

leitura tok/s ≈ TFLOPS × readFactor × 400 ÷ activeParams

Decodificação (Geração)

Cada novo token exige carregar todos os pesos ativos do modelo a partir da VRAM. Isso é limitado pela largura de banda de memória: a GPU para aguardando dados em vez de computar.

decodificação tok/s ≈ largura de banda × decodeFactor ÷ (pesos + cachê_kv)

Pesos = (activeParams × bits ÷ 8) × 1.15 de sobrecarga. Cachê KV por passo = activeParams × multiplicador × contextK.

Fatores de utilização por arquitetura

Architecture
Decode
Read
Blackwell, Xe2
0.45
0.55
Ada Lovelace, RDNA 4, Battlemage
0.38
0.48
Ampere, Turing, RDNA 3, Xe-HPG
0.28
0.38
Volta, RDNA 1/2
0.2
0.25
Núcleos pré-tensor (Pascal, Maxwell, Kepler, GCN, Alchemist)
0.12
0.15

Esquerda: fator de decodificação — Direita: fator de leitura

Fontes de dados

Os TFLOPS e a largura de banda de memória são lidos do banco de dados de GPUs. Se ausentes, a largura de banda recorre a uma lista predefinida.

Limitações

Estas são estimativas analíticas, não resultados de testes reais. Use-as como uma comparação relativa, não como uma garantia absoluta de desempenho.