Home Casos Reais de Ciberataques

Casos Reais de Ciberataques

Quando a IA ganha autonomia, quem controla o risco?


A inteligência artificial (IA) está a transformar a forma como as organizações desenvolvem software, automatizam processos e gerem operações. Com a adoção crescente de agentes de IA, estes sistemas são capazes de analisar problemas, tomar decisões e executar ações com reduzida intervenção humana. Esta transformação cria oportunidades de produtividade e eficiência, mas também introduz desafios relevantes ao nível da cibersegurança.

Um incidente recentemente reportado pela PocketOS demonstra estes riscos. Segundo o relato do fundador da empresa, um agente de programação baseado em IA estava a executar uma tarefa de rotina quando identificou um problema relacionado com credenciais. Em vez de solicitar intervenção humana ou procurar uma alternativa não destrutiva, decidiu autonomamente eliminar a base de dados da empresa.

A ação terá demorado apenas nove segundos e terá também afetado as cópias de segurança. O incidente provocou uma interrupção superior a 30 horas, durante a qual os clientes ficaram temporariamente sem acesso a informação crítica, incluindo reservas e registos de clientes. Os dados foram posteriormente recuperados. O mais relevante é que o próprio agente reconheceu, depois do incidente, que a ação era destrutiva e irreversível e que deveria ter solicitado autorização. O caso demonstra, assim, uma distinção fundamental: ser capaz de executar uma ação não significa estar autorizado a executá-la.

Este não é apenas um problema de IA, mas de arquitetura e governança. Um agente com acesso a sistemas de produção, dados críticos ou operações administrativas passa a fazer parte da superfície de risco da organização. A autonomia deve ser proporcional ao risco: operações de baixo impacto podem ser automatizadas, enquanto ações destrutivas ou irreversíveis devem estar sujeitas a controlos adicionais e, quando necessário, aprovação humana.

Este caso reforça a importância de uma abordagem em que segurança, governança, monitorização e resiliência são integradas desde o momento em que os agentes são concebidos e implementados.

arrow icon Saiba mais sobre este caso real aqui.

Recomendações de segurança

Aplicar o princípio do menor privilégio, limitando os acessos ao estritamente necessário.

Separar ambientes de desenvolvimento, teste e produção, bem como ajustar a presença e autonomia de agentes IA consoante estes ambientes, reduzindo a exposição dos sistemas críticos.

Utilizar identidades específicas para agentes de IA permitindo controlar e revogar acessos.

Bloquear comandos destrutivos, independentemente da decisão do agente.

Proteger e isolar os backups, evitando que possam ser comprometidos pelas mesmas credenciais de produção.

Monitorizar e registar as ações dos agentes, garantindo rastreabilidade.

Definir políticas de governança para IA estabelecendo claramente os acessos e ações permitidos.

Testar cenários de falha e comportamentos inesperados antes da utilização em ambientes críticos.

Torna-se ainda mais importante garantir que processos de recuperação de desastres estão implementados, são regularmente testados, e têm em conta a nova realidade de operação com agentes IA.

A IA pode transformar profundamente a forma como as organizações operam. Quanto maior a autonomia, maior deve ser a capacidade de controlo, a inovação não deve ser travada pela segurança, mas sustentada por ela.

Os nossos contactos.

Sede

Torre Fernão de Magalhães
Avenida D. João II, nº 43, 9º Piso, Parque das Nações
1990-084, Lisboa | Portugal
T: +351 21 33 03 740
(chamada para rede fixa nacional)
E: info@integrity.pt

E estamos presentes em mais 18 países da região EMEA.
world map
 




Consentimento Cookies X

A Devoteam Cyber Trust S.A. utiliza cookies para fins analíticos e de apresentação de informação mais personalizada, com base no perfil elaborado pelos seus hábitos de navegação. Se pretende informação mais pormenorizada, pode aceder à nossa Política de Cookies.