media Hugging Face Forums · há 1 h · open_models

OncoLLM adapta MedGemma 4B e 27B a tarefas de oncologia com Unsloth

Traduzido do English → Português (BR)

Pesquisadores ajustaram finamente os modelos MedGemma 4B e 27B para tarefas de oncologia usando Unsloth, completando o processo em um único DGX Spark. Os modelos OncoLLM resultantes, junto com o conjunto de dados de treinamento e um relatório detalhado, estão disponíveis publicamente.

O modelo 4B foi ajustado finamente usando LoRA, enquanto o modelo 27B utilizou QLoRA.
Uma nota técnica destaca que a versão 2026.9.12 do Unsloth escala o adaptador 4B por aproximadamente 0.5 em vez da relação alpha/r nominal de 0.25.
Os modelos e o código-fonte são creditados a Grujowmi (ANTOINE Pierre) no Hugging Face, com o relatório completo hospedado no Zenodo.

Importância 1/3 Confiança 1/3 Hugging Face Forums Inference efficiency Open weights

Ler original

Aleph Alpha lança Kolibri, um modelo MoE de 78,1B para inglês e alemão com 3,46B de parâmetros ativos

A Aleph Alpha lançou o Kolibri-1, um modelo de linguagem Mixture-of-Experts de pesos abertos projetado para tarefas bilíngues em inglês e alemão. O modelo possui 78,1 bilhões de parâmetros totais, mas ativa apenas 3,46 bilhões por token, permitindo que seja executado em uma única GPU B200, B300 ou H200.

media r/LocalLLaMA · há 6 d · 108 visualizações

ISTA lança GGUFs GSQ-RCO para Qwen3.8-Flash-Next e compilação Coder com 50% de especialistas podados

O Laboratório de Algoritmos Profundos e Sistemas da ISTA lançou versões GGUF quantizadas do modelo mistura esparsa de especialistas Qwen3.8-Flash-Next, juntamente com uma compilação experimental voltada a capacidades específicas, com metade de seus especialistas removidos.

media Hugging Face Forums · há 10 d · 51 visualizações

VeriLoop E2: modelo pós-treinado de 27B com escada GGUF de BF16 a IQ1_M

O Laboratório de Robótica SIGS da Universidade Tsinghua lançou o VeriLoop E2, um modelo pós-treinado de 27B construído sobre o Qwen3.8-27B para código verificável, matemática e raciocínio científico. O lançamento introduz a Recorrência Governada por VeriLoop (VGR), que separa a geração da verificação externa para garantir que as transições de estado melhorem estritamente as dimensões de evidência.

lab Hugging Face Blog · há 14 d · 37 visualizações

release candidate do tokenizers v1 entrega codificação 3 a 30 vezes mais rápida por meio de divisão e cache de bitstream

A biblioteca tokenizers lançou um release candidate da versão 1 que melhora significativamente o desempenho para codificação de texto, abordando gargalos nos fluxos de trabalho de treinamento e serviço. A atualização mantém compatibilidade de API com a v0.23 enquanto entrega acelerações substanciais em dez famílias de modelos.

lab Hugging Face Blog · há 14 d · 38 visualizações

Multiverse reformula a remoção de blocos de LLM como otimização de Ising para compressão profunda

O Multiverse publicou um artigo detalhando um método que reencaminha a poda de modelos de linguagem grandes como um problema de otimização binária restrita mapeado para um vidro de Ising. Ao tratar os blocos do transformer como spins com acoplamentos pares derivados da Hessiana da perda, a abordagem identifica configurações ótimas de remoção de blocos sem exigir benchmarking iterativo.