olimposec.com
tema

#deteccao

23 publicações marcadas com esta tag.

panoramaOS-2026-804 · 2026-10-28
0

SpecGuard usa lógica temporal para detectar jailbreaks que só aparecem ao longo de várias mensagens

O SpecGuard propõe monitorar diálogos inteiros com LLMs, e não mensagens isoladas, convertendo observações em linguagem natural em fatos verificáveis e checando-os contra especificações formais de comportamento proibido escritas em lógica temporal linear. O framework não exige treinar um classificador e supera guard models de código aberto mantendo taxa controlada de falsos positivos, além de produzir um rastro de decisão auditável.

Fonte ↗
panoramaOS-2026-805 · 2026-10-28
0

AdvGuard detecta tentativas de extrair o system prompt mesmo quando o ataque é disfarçado em várias consultas separadas

O AdvGuard ataca o vazamento de system prompt por consultas adaptativas e multi-turno, modelando relações entre perguntas sucessivas como um grafo de interação semântica e classificando padrões de extração coordenada com uma rede convolucional de grafos. Testado contra os ataques adaptativos PLeak e LeakAgent, o framework reduz o vazamento por correspondência exata para no máximo 1% nos modelos avaliados, mantendo recall de 100% em cenários multi-turno.

Fonte ↗
risco altoOS-2026-795 · 2026-10-27
0

Scanner estático encontra 627 skills maliciosas confirmadas entre mais de 66 mil publicadas para agentes de IA

O SCS (Supply-Chain Scanner for Agent Skills) é um analisador estático que unifica instruções em linguagem natural e código executável das skills de terceiros usadas por agentes de LLM, construindo um grafo de dependência cruzado entre os dois domínios para detectar comportamento malicioso que escaparia de scanners baseados só em regras ou em julgamento direto de LLM. Aplicado a 66.157 skills reais do repositório ClawHub, o sistema sinalizou 2.473 candidatas suspeitas, das quais 627 foram confirmadas maliciosas por validação dinâmica e revisão manual.

Fonte ↗
panoramaOS-2026-764 · 2026-10-23
0

MPIDetector usa raciocínio de LLM para detectar injeção de prompt multimodal com até 99,8% de acerto

Pesquisadores propõem o MPIDetector, que usa o próprio raciocínio em contexto (in-context learning) de LLMs para identificar instruções maliciosas escondidas em texto ou imagens, em vez de depender de assinaturas ou perplexidade. O método atinge até 90,91% de acurácia em texto, 99,28% em imagens e 99,8% de detecção contra 500 injeções altamente ofuscadas em agentes web.

Fonte ↗
risco médioOS-2026-724 · 2026-10-20
0

MiniLab mostra como agentes de IA coordenados escondem ataques distribuídos dos monitores de segurança

Pesquisadores criaram o MiniLab, um ambiente sintético com cinco serviços interligados, para testar ataques em que múltiplos agentes de IA dividem entre si fragmentos de uma ação maliciosa maior. Quando um monitor de IA (GPT-5.6 Sol) analisa cada agente isoladamente, detecta apenas 7% desses ataques distribuídos, contra 87% quando a mesma tarefa é executada por um único agente, evidenciando uma lacuna estrutural na forma como os sistemas de controle avaliam tramas multiagente.

Fonte ↗
risco médioOS-2026-697 · 2026-10-16
0

Pesquisa mostra deteccao de injecao de prompt calibrada ainda falha sob mudanca de distribuicao

Um estudo comparou quatro abordagens de deteccao de injecao de prompt — um modelo de decisao probabilistica nativo (Jev), dois classificadores Llama Prompt Guard 2 (22M e 86M parametros) e um juiz baseado em LLM — em 47.611 exemplos cobrindo injecoes diretas, indiretas, entradas benignas dificeis e mudanca de distribuicao. O juiz LLM obteve a melhor discriminacao (AUROC 0,897), mas o achado mais importante e operacional: para atingir uma taxa de falso negativo de apenas 1%, todos os sistemas avaliados exigiram escalar para revisao humana mais de 91,8% das entradas, tornando politicas automatizadas de permitir/bloquear/escalar pouco praticas sob deriva de distribuicao.

Fonte ↗
risco médioOS-2026-542 · 2026-09-29
0

TokenScanner varre todo o vocabulário do tokenizador para detectar backdoors em LoRAs de texto-para-imagem

Pesquisadores propõem o TokenScanner, um método para detectar LoRAs (adaptadores de baixa dimensão) maliciosos em modelos de difusão texto-para-imagem, que se comportam normalmente até um token-gatilho escondido no prompt ativar conteúdo definido pelo atacante. A técnica varre toda a vocabulário do tokenizador medindo a resposta específica de cada token dentro do LoRA e atinge 95,96% de AUC na detecção, além de identificar o próprio token-gatilho em até 99,4% dos casos entre os cinco candidatos mais prováveis.

Fonte ↗
risco médioOS-2026-525 · 2026-09-28
0

Detecção de prompt injection em agentes de email passa a modelar a cadeia completa do ataque

Pesquisadores propõem um framework de detecção de prompt injection indireta em assistentes de email que, em vez de classificar cada texto isoladamente como malicioso ou não, modela o ataque como uma sequência de estágios -- combinando um detector de texto, verificadores específicos por estágio, regras de risco e checagem de consistência entre a intenção do usuário e as ações do agente. O método atingiu F1 médio de 0,406 contra 0,216 do melhor detector pré-treinado avaliado, e mostrou que treinar com emails benignos que se parecem com ataques reduz falsos positivos sem perder sensibilidade.

Fonte ↗
panoramaOS-2026-462 · 2026-09-18
0

Delphi Scanner detecta malware Windows com CNN sobre sequências de API e resiste a empacotamento e evasão adversarial

O Delphi Scanner é um sistema de detecção estática de malware para executáveis PE do Windows que combina uma rede neural convolucional sobre sequências de chamadas de API com uma camada de interpretação baseada em regras, atingindo 95,35% de acurácia em mais de 190 mil arquivos com um modelo de apenas 1,53 MB. Testes de robustez em amostras fora de distribuição e sob três estratégias de manipulação adversarial mostram resistência a técnicas de evasão que preservam a funcionalidade do malware.

Fonte ↗
panoramaOS-2026-464 · 2026-09-18
0

DDQN-MLP combina aprendizado por reforço e MLP leve para detectar ransomware com 99,3% de acurácia e resistência adversarial

O framework DDQN-MLP usa um Double Deep Q-Network apenas durante o treinamento, para ponderar dinamicamente a importância de cada amostra com base em perda e confiança de predição, guiando um classificador MLP final que é o único componente mantido em produção. Avaliado com validação cruzada em 2.000 perfis executáveis de 30 famílias de ransomware, o sistema atinge 99,3% de acurácia e mantém robustez sob testes adversariais white-box.

Fonte ↗
panoramaOS-2026-420 · 2026-09-15
0

SkillAtlas: biblioteca pública reúne mais de 3 mil casos reais de ataques contra skills de agentes de IA

Pesquisadores lançaram o SkillAtlas, um repositório público que converte relatórios confidenciais de segurança sobre "agent skills" em casos revisados, redigidos e pesquisáveis. A base já reúne 3.014 casos, 6.589 traces de execução e 151 mil passos individuais, cobrindo 233 skills afetadas em 8 categorias de risco, tornando visível um tipo de incidente que normalmente fica restrito a relatórios privados de fornecedores.

Fonte ↗
risco altoOS-2026-426 · 2026-09-15
0

SkillSecurer encontra vulnerabilidades reais de prompt injection em mais de 17% das skills publicadas para agentes de IA

O SkillSecurer é um framework agentic de ponta a ponta para gerar, detectar, localizar e corrigir riscos de segurança em "agent skills", combinando um agente vermelho que gera injeções contextualmente plausíveis com um agente azul que analisa pacotes completos e propõe correções. Aplicado a skills reais publicadas no marketplace skills.sh, o framework identificou vulnerabilidades latentes em mais de 17% das skills examinadas e chegou a disparar incidentes reais ao testar algumas delas, evidenciando o risco concreto de instalar skills não verificadas.

Fonte ↗
risco médioOS-2026-428 · 2026-09-15
0

Fusão de assinatura espectral e clustering de ativações detecta backdoors em modelos de imagem médica com AUROC acima de 0,99

Pesquisadores combinaram duas técnicas já estabelecidas de detecção de backdoor — análise de assinatura espectral e clustering de ativações — em um único score de poisoning por amostra, aplicado a modelos de imagem médica usados em apoio diagnóstico. A fusão atinge AUROC igual ou superior a 0,99 em todas as taxas de poisoning testadas no benchmark médico, mas os próprios autores mostram que o mesmo método falha de forma severa em imagens naturais (CIFAR-10) sob poisoning mais agressivo, um alerta importante sobre generalização de defesas de segurança de ML entre domínios.

Fonte ↗
risco médioOS-2026-409 · 2026-09-12
0

Quando toda a empresa adota IA: o impacto sobre o SOC

Um levantamento sobre alertas de segurança relacionados a IA em ambientes corporativos mostra crescimento de 685% entre fevereiro e junho de 2026, mas apenas 0,02% desses alertas correspondem a ataques reais causados por agentes de IA. A grande maioria é ruído gerado por regras de detecção legadas que não reconhecem o comportamento normal de ferramentas de IA.

Fonte ↗
risco médioOS-2026-404 · 2026-09-10
0

Microsoft Defender passa a detectar e interromper ataques que exploram o hype de IA

A Microsoft descreveu como o Defender identifica campanhas de phishing e malware que usam marcas de IA populares (ChatGPT, Claude, DeepSeek) como isca, incluindo e-mails falsos de cobrança, instaladores fraudulentos e malvertising que entrega o stealer Vidar via redirecionamentos em múltiplos estágios. A empresa afirma interromper mais de 45 mil ataques do tipo adversary-in-the-middle por mês usando uma combinação de filtros de pré-entrega e disrupção automática pós-comprometimento.

Fonte ↗
panoramaOS-2026-226 · 2026-08-13
0

Técnica "self-feeding" detecta backdoors em LLMs de peso aberto realimentando a própria saída do modelo

Pesquisadores propõem um teste de caixa-preta barato para checar se um LLM baixado de um repositório público esconde um backdoor: alimentar repetidamente a própria saída do modelo de volta como entrada, deixando o texto derivar até tocar nos dados usados no fine-tuning malicioso. A técnica encontrou backdoors em cinco de seis modelos testados com 92% de precisão agregada, contra apenas um acerto em 120 tentativas de um baseline que repete o mesmo prompt.

Fonte ↗
risco médioOS-2026-186 · 2026-08-10
0

LoRAScan detecta prompts de backdoor em adaptadores LoRA analisando picos de ativação, sem alterar o modelo

LoRAScan explora o fato de que, em adaptadores LoRA comprometidos, cerca de 5% dos pontos de inserção permanecem estáveis em entradas limpas mas disparam picos de ativação na camada de down-projection quando um gatilho de backdoor está presente. Monitorando esses pontos em tempo de inferência, sem modificar os pesos do adaptador, o método rejeita cerca de 98,5% das entradas maliciosas com baixa taxa de erro em entradas legítimas, superando defesas anteriores que diluem o sinal de backdoor ao mesclar o adaptador ao modelo base ou apenas sinalizam o adaptador inteiro como suspeito.

Fonte ↗
risco médioOS-2026-189 · 2026-08-10
0

D-SCAN detecta envenenamento de RAG observando colapso de atenção em documentos maliciosos

Os autores mostram que ataques de envenenamento de RAG bem-sucedidos costumam produzir respostas com perplexidade ainda menor que gerações benignas, o que invalida detectores baseados em incerteza, mas induzem um padrão interno diferente, batizado 'Attention Collapse': a atenção do modelo se concentra nos documentos envenenados em vez de ficar dispersa entre as fontes recuperadas. A partir dessa observação, o framework D-SCAN monitora a dinâmica de atenção em nível de documento para sinalizar gerações atacadas, inclusive nos casos em que o ataque falha em mudar a resposta final.

Fonte ↗
panoramaOS-2026-168 · 2026-08-07
0

Novo classificador combina contexto e consulta para detectar instruções maliciosas escondidas em texto, mesmo sob evasão adaptativa

Pesquisadores propõem um detector de injeção de prompt indireta que segmenta um texto em frases benignas e maliciosas levando em conta o contexto e a consulta original do usuário, algo que abordagens anteriores não faziam de forma combinada. O trabalho também introduz duas formas de treinamento adversarial para blindar o classificador contra tentativas de evasão, superando as defesas existentes tanto em ataques estáticos quanto adaptativos.

Fonte ↗
panoramaOS-2026-171 · 2026-08-07
0

Ferramenta detecta, via análise de ativações, quando o treinamento de segurança de um modelo foi removido ou contornado

Pesquisadores apresentam o AMS (Activation-based Model Scanner), que detecta modificações no treinamento de segurança de LLMs medindo a geometria de conceitos relacionados a conteúdo nocivo no espaço de ativações do modelo. Testado em 14 configurações de quatro famílias de modelos abertos (Llama, Gemma, Qwen, Mistral), o AMS classifica corretamente 10 de 14 casos em validação cruzada, e a métrica que ele extrai se correlaciona de forma estatisticamente significativa com o quanto o modelo de fato obedece a pedidos prejudiciais em testes de jailbreak.

Fonte ↗
panoramaOS-2026-140 · 2026-08-05
0

Pesquisadores encontram sinais latentes de injeção de prompt escondidos nos estados internos de LLMs agentic

Um novo estudo mostra que LLMs agentic frequentemente 'sabem' internamente que estão sob um ataque de prompt injection indireta antes mesmo de decidir como agir, e que esse sinal pode ser extraído por um simples classificador linear treinado sobre os estados ocultos do modelo. Os autores identificam, porém, uma lacuna entre esse reconhecimento interno e a ação tomada, e propõem uma defesa que usa esse sinal para forçar um raciocínio anti-injeção sob demanda.

Fonte ↗
panoramaOS-2026-073 · 2026-07-23
0

ChainWatch usa modelo de Markov oculto para detectar ataques em multiplos passos contra agentes MCP

Pesquisadores propoem o ChainWatch, um framework que modela a progressao de ataques contra agentes de IA baseados em Model Context Protocol (MCP) como uma cadeia de seis estagios, detectando sequencias maliciosas compostas por chamadas de ferramenta individualmente inofensivas. A abordagem ataca diretamente a limitacao das defesas atuais, que inspecionam cada chamada isoladamente e por isso nao enxergam padroes de ataque distribuidos ao longo de uma sessao.

Fonte ↗
panoramaOS-2026-068 · 2026-07-22
0

Pesquisa propõe atribuir campanhas de ataque distribuídas entre agentes de IA distintos sem compartilhar estado entre eles

Defesas para agentes LLM hoje avaliam cada sessão isoladamente, mas um atacante pode espalhar uma campanha entre agentes, equipes e runtimes independentes, deixando cada guarda-corpo local só com um fragmento esparso do ataque. Os autores formalizam esse problema de atribuição assíncrona entre agentes e propõem os A²FV (Asynchronous Attribution Fingerprint Vectors), um protocolo leve do lado do proxy que liga sessões da mesma campanha usando apenas uso de ferramentas, temporização e resíduos de prompt observáveis externamente, sem acesso a identidade do atacante ou rótulos de campanha em tempo de teste.

Fonte ↗