media MarkTechPost · há 2 h · releases

Black Forest Labs lança FLUX 3, um modelo de fluxo multimodal para previsão de imagem, vídeo, áudio e ação robótica

Traduzido do English → Português (BR)

A Black Forest Labs lançou o FLUX 3, um modelo de fundação multimodal que aprende a partir de imagens, vídeos e áudio em uma única arquitetura. É o primeiro modelo FLUX a disponibilizar previsão de vídeo, áudio e ação a partir de um único conjunto de pesos.

O modelo se baseia no método Self-Flow, combinando correspondência de fluxo com reconstrução de recursos auto-supervisionada.
O FLUX 3 Video gera clipes de até 20 segundos em uma única geração, com áudio nativo.
Os modos suportados incluem texto para vídeo, imagem para vídeo, vídeo para vídeo, quadro-chave para vídeo e continuação generativa de vídeo e áudio.
Em testes de preferência humana para clipes de 10 segundos em 720p, o FLUX 3 foi preferido ao Luma Ray 3.2 em 93% das comparações e ao Runway Gen-4.5 em 77%.

O lançamento visa fornecer um modelo unificado onde as modalidades se restringem mutuamente, garantindo que o som corresponda ao impacto e que o movimento obedeça à massa.

Importância 2/3 MarkTechPost Black Forest Labs Multimodal Video generation

Ler original

FLUX 3 apresenta um modelo de fluxo multimodal para previsão de imagens, vídeo, áudio e ação

O FLUX 3 é apresentado como um único modelo multimodal projetado para lidar com tarefas de imagem, vídeo, áudio e previsão de ações. O sistema visa produzir criações mais fiéis à realidade em diversos estilos.

media Latent Space · há 3 d

Black Forest Labs lança modelos de fluxo multimodais FLUX 3 e modelo de robótica FLUX-mimic

A Black Forest Labs lançou o FLUX 3, uma família de modelos de fluxo multimodal que inclui capacidades de geração de vídeo com áudio nativo. O lançamento também apresenta o FLUX-mimic, uma variante projetada para aplicações de robótica de ação em vídeo.

github llama.cpp · há 1 h Ao vivo

llama.cpp b10142 adiciona suporte preliminar ao vision do MiniMax-M3

O projeto llama.cpp lançou a compilação b10142, que introduz suporte preliminar ao vision para o modelo MiniMax-M3. Esta atualização implementa uma versão apenas de texto que reutiliza componentes existentes do MiniMax-M2, incluindo GQA com QK-norm por cabeça e rotação parcial, especialistas no estilo DeepSeek-V3 e ativação swigluoai.

media MarkTechPost · há 14 h

Induction Labs lança Photon-1, um modelo de imaginação treinado em 18 anos de vídeo

A Induction Labs lançou o Photon-1, um transformador misto de especialistas (mixture-of-experts) esparso de 106B-A5B que aprende a simular ambientes de desktop e jogar jogos prevendo quadros futuros a partir de vídeos brutos sem rótulos de ação. O modelo utiliza quantização escalar finita para comprimir cada quadro em 960 tokens discretos, alcançando uma compressão mais de 100 vezes melhor do que as representações existentes, enquanto preserva detalhes de texto e layout.

media r/LocalLLaMA · há 3 d

IA suíça lança modelos multimodais Apertus 1.5 com modo de raciocínio

A IA suíça lançou o Apertus 1.5, uma família de modelos de linguagem com 8B e 70B parâmetros que introduz capacidades multimodais e um novo recurso de raciocínio. A atualização envolve pré-treinamento contínuo em uma mistura multimodal adicional de 4T tokens para o modelo 8B e 2T tokens para o modelo 70B.