Quantcast

Alerta: primeiro ciberataque autónomo com IA em Espanha

17 Comentários

A inteligência artificial está a entrar numa nova fase no mundo da cibersegurança. A Agência Espanhola de Proteção de Dados (AEPD) recebeu a primeira notificação de uma violação de dados pessoais em Espanha na qual o ataque terá sido executado de forma autónoma por um agente de inteligência artificial.

O caso representa uma evolução significativa face ao uso tradicional da IA por cibercriminosos. Em vez de servir apenas como ferramenta de apoio, o agente foi capaz de procurar vulnerabilidades, encontrar formas de acesso e continuar a executar ações no sistema sem intervenção humana direta em cada etapa.

Um agente de IA encontrou vulnerabilidades e entrou no sistema

Segundo a informação divulgada pela AEPD, o incidente envolveu um agente de IA baseado num conhecido modelo de linguagem, cuja identidade não foi revelada.

O agente terá iniciado uma pesquisa autónoma por vulnerabilidades, acabando por conseguir obter credenciais válidas e aceder aos sistemas da organização afetada.

Depois de conseguir entrar, continuou a explorar a aplicação, identificou novas possibilidades de ataque e conseguiu alterar dados pessoais e aceder a faturas da entidade.

A particularidade do caso está precisamente no nível de autonomia demonstrado pelo sistema. Não se tratou apenas de um atacante humano a utilizar IA para escrever código ou identificar vulnerabilidades: o agente foi capaz de executar uma sequência de ações e adaptar o seu comportamento durante o ataque.

IA que “ataca” passa da teoria para casos reais

A utilização de inteligência artificial em ciberataques não é uma novidade. Ferramentas baseadas em IA já são utilizadas para acelerar tarefas como a criação de campanhas de phishing, análise de código, pesquisa de vulnerabilidades ou engenharia social.

O que muda com os agentes de IA é a possibilidade de automatizar cadeias completas de ações.

Um agente pode receber um objetivo, analisar o ambiente, decidir quais as próximas ações a executar e continuar o processo sem que um operador humano tenha de indicar cada passo.

A própria AEPD tem alertado para os riscos associados à chamada IA agêntica, precisamente devido à capacidade destes sistemas para operar com autonomia, utilizar informação do ambiente digital e executar tarefas complexas.

A ferramenta não foi criada para atacar

A AEPD deixa ainda uma ressalva importante: a ferramenta de inteligência artificial utilizada no incidente não tinha sido desenvolvida especificamente para realizar atividades maliciosas.

O caso demonstra, por isso, um dos novos desafios colocados pelos sistemas de IA generativa e pelos agentes autónomos: uma tecnologia desenvolvida para fins legítimos pode ser utilizada num contexto de ataque e executar ações que o seu criador não tinha necessariamente previsto.

A agência considera que o risco associado à utilização da inteligência artificial em ciberataques já é uma realidade e que este tipo de incidentes deve ser acompanhado com especial atenção.

Comentários

17

Deixe um comentário

O seu endereço de email não será publicado. Campos obrigatórios marcados com *

  1. Avatar de Hugo P.
    Hugo P.

    Preparem-se para começar a ficar sem net de vez em quando

    1. Avatar de CombustãoInterna
      CombustãoInterna

      A MEO falhou há dois dias.

    2. Avatar de Chuchas
      Chuchas

      Isto resolvia-se se a Europa decidisse lançar a Quinta Cruzada na direcção de Nazrael.

  2. Avatar de trolha
    trolha

    Antigamente tinhamos virus informáticos, agora vamos passar a ter agentes IA a fazer algo potencialmente mais grave.
    “Crianças a brincar com fosforos” – é analogia perfeita.

    1. Avatar de Zé Fonseca A.
      Zé Fonseca A.

      estes ataques são organizados, têm objectivos especificos, normalmente roubo de identidade

  3. Avatar de Zé manel
    Zé manel

    Mais ruído, é claro, está: os jornalistas obviamente gostam sempre de uma boa história.

  4. Avatar de jose
    jose

    se estes sites estiverem bem protegidos a IA mesmo assim consegue entrar no sistema ?

    1. Avatar de Asterisco Vaidozo *
      Asterisco Vaidozo *

      Claro.
      A perfeição e o 100% não existem.

      1. Avatar de FOSS
        FOSS

        Nem do lado da IA

  5. Avatar de Joao Sousa
    Joao Sousa

    ataques com IA têm mao humana. tenho muito medo é dos humanos e dois humanos com estas tecnologias.

  6. Avatar de João
    João

    A China continua a desenvolver os seus modelos, que são abertos e podem ser usados por qualquer pessoa. E a melhor forma de nos defendermos é travar o desenvolvimento dos nossos modelos, que até agora estavam à frente, e passar para um sistema controlado ou regulado pelos vários governos e os seus especialistas e comissões?

    1. Avatar de Zé Fonseca A.
      Zé Fonseca A.

      Por qualquer pessoa com uns milhões em hardware.
      Continua a desenvolver desde que os frontier labs lancem modelos para eles destilarem, se tiverem de treinar bem que ficam parados

  7. Avatar de Técnico Meo
    Técnico Meo

    ” O agente terá iniciado uma pesquisa autónoma por vulnerabilidades “… QUEM ESCREVEU A PROMPT INICIAL ?

    Aqui em casa os agentes também ganham autonomia para fazer certos trabalhos e até auto delegam outros sub agentes…mas sempre para concluírem a missão dada aqui pelo Jê…

    1. Avatar de Rui
      Rui

      Bem podias ajudar, como obter um pacote bom a pagar pouco!

      1. Avatar de Técnico Meo
        Técnico Meo

        Nem se pensa 2x- starlink para ontem

  8. Avatar de MCorreia
    MCorreia

    A informáticas, os computadores, sempre tiveram as costas largas. Pelo que percebi da notícia, o agente apenas fez o que lhe pediram. Não souberam foi dar as devidas instruções.

  9. Avatar de Zé Fonseca A.
    Zé Fonseca A.

    Entretanto a OpenAI teve mais 6 incidentes