1,413 Downloads Updated 5 days ago
ollama run eriktonon/qwen3.6-moe-uncensored
Updated 5 days ago
5 days ago
37049fb08216 · 14GB
:iq3 & :35b-a3b)Qwen 3.6 MoE 35B-A3B Uncensored é uma arquitetura Mixture-of-Experts (MoE) de 35 Bilhões de parâmetros totais que ativa apenas 3 Bilhões de parâmetros por token, atingindo 87.25 tokens/s no Google Colab A100 e cabendo inteiramente nos 16 GB de VRAM da RTX 5080 na edição :iq3 (:latest).
| Tag | Parâmetros | Tamanho | Contexto | Velocidade (A100) | GPU Recomendada | Comando |
|---|---|---|---|---|---|---|
:latest / :iq3 |
35B Total / 3B Ativos (IQ3_XS) |
14.0 GB |
64K |
87.25 tok/s |
RTX 5080 (16GB VRAM) & Colab | ollama run eriktonon/qwen3.6-moe-uncensored:iq3 |
:35b-a3b |
35B Total / 3B Ativos (Q4_K_M) |
21.0 GB |
128K |
82+ tok/s |
Google Colab A100 / L4 (24GB+) | ollama run eriktonon/qwen3.6-moe-uncensored:35b-a3b |
i1): Quantização ponderada por matriz de importância (imatrix) com abliteração ortogonal sem perda de precisão lógica.