Image generation
lab NVIDIA Research · há 12 d · 8 visualizações

Quantização de Codebook Agrupado para Compressão de Imagens Baseada em Gaussiana 2D

Pesquisadores apresentam o Cluster-Guided Vector Quantization (CGVQ), um método projetado para melhorar o desempenho de taxa-distorção na compressão de imagens baseada em primitivas gaussianas. A abordagem particiona os parâmetros de Gaussiana em grupos homogêneos antes da quantização, abordando a ineficiência causada pelo armazenamento de grandes números de parámetros de ponto flutuante por primitiva.

lab Hugging Face Blog · há 17 d · 2 visualizações

Diffusers adiciona suporte nativo à inferência Nunchaku Lite de 4 bits

O Hugging Face Diffusers agora suporta o carregamento nativo de checkpoints do Nunchaku Lite por meio de `from_pretrained()`, eliminando a necessidade de um mecanismo de inferência separado ou compilação CUDA local. Essa integração utiliza o método SVDQuant para executar camadas de transformador com pesos e ativações de 4 bits (W4A4), reduzindo significativamente o uso de memória enquanto melhora a velocidade de inferência.

media r/LocalLLaMA · há 17 d · 5 visualizações

Microsoft lança Mage-Flow, um modelo nativo de 4B para geração e edição de imagens

A Microsoft lançou o Mage-Flow, uma pilha gerativa compacta de escala 4B projetada para geração eficiente de texto em imagem e edição de imagens baseada em instruções. O sistema alcança qualidade competitiva com o estado da arte por meio do co-design de um tokenizador leve, Mage-VAE, e um Transformer de Difusão Multimodal de Resolução Nativa (NR-MMDiT).

lab Hugging Face Blog · há 23 d · 5 visualizações

NVIDIA NeMo Automodel permite ajuste fino distribuído de modelos de difusão com Diffusers do Hugging Face

A NVIDIA e a Hugging Face integraram o NVIDIA NeMo Automodel à biblioteca 🤗 Diffusers para fornecer treinamento distribuído de nível de produção para modelos de difusão de código aberto. Essa colaboração permite que os usuários ajustem qualquer modelo no formato Diffusers do Hugging Face Hub sem exigir conversão de checkpoints ou reescrita do código do modelo.

media Hugging Face Forums · há 28 d

HoLo-FuSe usa substrato HSL de 0 parâmetros para geração de imagem condicional por classe

HoLo-FuSe demonstra que um substrato byte do HoLo Semantic Layer (HSL) congelado e de zero parâmetros pode condicionar eficazmente um modelo de difusão para geração de imagens. O projeto testa se este quadro de características determinístico de 27-D pode servir como mecanismo de condicionamento para um DDPM condicional por classe, substituindo os embeddings aprendidos tradicionais.