A memória de longo prazo da IA pode ser na verdade alvo de ataques, transformar hábitos em autorizações é demasiado perigoso, é necessário acrescentar confirmação atual e verificação secundária

Ver original
MeNews
Risco de segurança do agente de IA exposto: atacantes podem explorar a «contaminação de memória» para induzir operações incorretas de fundos
GoPlus Security revelou que no AgentGuard AI, através de um ataque de "injeção de memória histórica", é possível explorar a memória de longo prazo para fazer a IA interpretar preferências como autorização, induzindo a execução de operações sensíveis como reembolsos e transferências. Os pontos-chave de proteção incluem: confirmação de operações relevantes no momento, considerar "hábito/normalidade" como alto risco, tornar a escrita na memória de longo prazo rastreável, usar comandos ambíguos para acionar uma segunda verificação, e que a memória de longo prazo não substitui a autorização em tempo real. A sistema de memória da IA deve ser tratado como uma potencial superfície de ataque e auditado com um quadro de segurança.
Esta página pode conter conteúdos de terceiros, que são fornecidos apenas para fins informativos (sem representações/garantias) e não devem ser considerados como uma aprovação dos seus pontos de vista pela Gate, nem como aconselhamento financeiro ou profissional. Consulte a Declaração de exoneração de responsabilidade para obter mais informações.
  • Recompensa
  • Comentar
  • Republicar
  • Partilhar
Comentar
Adicionar um comentário
Adicionar um comentário
Nenhum comentário
  • Fixado