empero-ai/Qwythos-9B-Claude-Mythos-5-1M-GGUF

Modelo de visão e linguagem · 9 B de parâmetros — 921.8 mil downloads e 2.5 mil curtidas no Hugging Face.

Hugging Face · Modelos ·empero-ai · ·↓ 921808 ·♥ 2528

O modelo empero-ai/Qwythos-9B-Claude-Mythos-5-1M-GGUF aparece entre os mais comentados do Hugging Face — um termômetro do que a comunidade está realmente usando agora na tarefa de visão e linguagem.

Ficha técnica

  • Tarefa: visão e linguagem
  • Parâmetros: 9 B
  • Biblioteca: gguf
  • Formatos: GGUF
  • Licença: Apache 2.0
  • Downloads: 921.8 mil · Curtidas: 2.5 mil

Hardware recomendado

Estimativa de VRAM só para carregar os pesos (com ~20% de folga para ativações). Contextos longos consomem memória adicional para o cache de atenção (KV cache).

  • Precisão original (16-bit): ~22 GB de VRAM — 1 GPU high-end (24 GB, ex. RTX 3090/4090)
  • Quantizado 8-bit: ~11 GB de VRAM — 1 GPU de consumo (12 GB, ex. RTX 3060/4070)
  • Quantizado 4-bit: ~5.4 GB de VRAM — 1 GPU de consumo (≥ 8 GB, ex. RTX 3060)

Como rodar localmente

Os pesos estão em GGUF, prontos para rodar na CPU ou GPU com Ollama, llama.cpp ou LM Studio — sem Python.

# Ollama
ollama run hf.co/empero-ai/Qwythos-9B-Claude-Mythos-5-1M-GGUF

# ou llama.cpp
llama-cli -hf empero-ai/Qwythos-9B-Claude-Mythos-5-1M-GGUF -p "Explique o que é entropia."

Tags

gguf llama.cpp quantized qwen3.5 reasoning uncensored long-context 1M-context

Abrir o modelo no Hugging Face →

compartilhar: