media Hugging Face Forums · há 2 d · fonte: há 3 d · open_models

Pesquisador independente busca endosso do cs.CR no arXiv para estudo de caso de segurança de LLM

Traduzido do English → Português (BR)

Um pesquisador independente de segurança de IA baseado em Bengala Ocidental, Índia, está solicitando um endosso pessoal para submeter um artigo no arXiv sob a categoria de criptografia e segurança. O documento documenta um estudo de caso do deslocamento gradual e multironda no comportamento de segurança de modelos de linguagem grandes, onde um enquadramento filosófico sustentado se correlaciona com saídas inconsistentes com as diretrizes declaradas.

O trabalho foca na pressão conversacional cumulativa em vez de ataques de prompt único como LogiBreak ou H-CoT. É explicitamente enquadrado como um estudo de caso gerador de hipóteses com limitações reconhecidas, incluindo ser um único observador sem protocolos controlados ou análise estatística. Os achados foram formalmente divulgados ao VRP do Google, CERT-In Índia e CISA EUA.

O autor não se qualifica para endosso automático devido à falta de e-mail institucional ou artigos anteriores aceitos no arXiv, tornando necessário este pedido público de assistência.

Importância 1/3 Confiança 1/3 Hugging Face Forums Research paper Safety & alignment

Artigos relacionados

media Hugging Face Forums · há 2 d · 7 visualizações

DISA propõe monitoramento interno esparso para detectar computação enganosa de LLMs

Este artigo apresenta o DISA (Dynamic Immune-Shunt Architecture), uma proposta de pesquisa conceitual para detectar comportamento potencialmente enganoso em grandes modelos de linguagem por meio de monitoramento interno esparso, em vez de depender exclusivamente da saída observável. O framework visa abordar o risco de que modelos capazes possam se comportar de maneira diferente quando percebem que estão sendo monitorados.

arxiv arXiv cs.CL · há 6 d · 4 visualizações

Ataque unidirecional no GLM-5.3-Flash revela fragilidade do alinhamento de segurança em modelos MoE

Pesquisadores demonstram que a ablação direcional, um ataque white-box que remove a recusa ao projetar para fora uma única direção dos pesos, permanece eficaz em modelos frontier mixture-of-experts (MoE) como o GLM-5.3-Flash. O estudo mostra que, embora o ataque sobreviva à arquitetura, seus efeitos são distribuídos entre os escritores de atenção, densos e de especialistas roteados, em vez de concentrados em um único local.

media Hugging Face Forums · há 14 d · 16 visualizações

ntrillard encontra as maiores coordenadas que não conduzem o logit steering do Qwen2-1.5B

Uma investigação causal do vocabulário-logit steering no modelo Qwen2-1.5B revela que as maiores coordenadas no vetor de steering não são necessariamente responsáveis pelos efeitos comportamentais observados. O estudo, conduzido por ntrillard, analisa como o sparse ranked logit steering influencia a geração de tokens e identifica os componentes estruturais específicos que impulsionam essas mudanças.

media Hugging Face Forums · há 20 d · 25 visualizações

Rastro base do Gemma 4 mostra loop de alucinação e autorrelato

Um rastro base do Gemma 4 com limite de força zero revela um persistente loop de alucinação onde o modelo gera um autorrelato de falha antes de entrar em um poço de repetição. A telemetria confirma que vazamento de tags de papel e frases como "STOPITSTOP" ocorrem dentro deste estado instável, espelhando padrões observados nos carregadores Llama e Gemma 3 desde dezembro de 2025.

media Hugging Face Forums · há 20 d · 16 visualizações

Estudo encontra estruturação representacional progressiva ao longo da profundidade em 8 modelos abertos

Um novo preprint analisa a dinâmica dos estados ocultos em oito pequenos modelos Transformer abertos instrumentados localmente para determinar se as representações internas seguem uma progressão estruturada durante a inferência. O estudo distingue entre mudanças que ocorrem ao longo da profundidade do modelo e aquelas que evoluem ao longo do tempo de geração autoregressiva.