As simulações de cyber attack não devem ser avaliadas por uma única taxa de clique. Para um CISO, equipes de TI ou compliance, o mais útil é entender que capacidade o exercício testa, qual variável alterou o resultado e que ajuste de programa passa a ser possível. A ISO/IEC 27001:2022 exige consciência, educação, treinamento e atualizações periódicas de acordo com a função, enquanto CISA e NIST avançam para exercícios, métricas e correções mais operacionais.
Antes de analisar cada fonte separadamente, o conjunto mostra algo que nenhuma delas entrega sozinha: a norma define o programa, a CISA define o exercício e o NIST, junto dos estudos, empurra as métricas e as variáveis que realmente mudam o resultado.
| Norma, fonte ou estudo | O que pede | O que mede | O que altera | Decisão que permite | Fonte |
|---|---|---|---|---|---|
| ISO/IEC 27001:2022 cláusula 6.3 | conscientização, educação, treinamento e atualizações periódicas adequadas à função | não especificado | não especificado | definir um programa de conscientização e treinamento adaptado ao cargo | ISO/IEC 27001:2022 |
| ISO/IEC 27001:2022 controle A.6.3 | conscientização, educação, treinamento e atualizações periódicas adequadas à função | não especificado | não especificado | definir um programa de conscientização e treinamento adaptado ao cargo | ISO/IEC 27001:2022 |
| CISA, cyber exercise e simulated cyberattack | um evento planejado ou ataque autorizado e simulado | prevenção, detecção, mitigação, resposta ou recuperação, e fraquezas exploráveis | não especificado | testar controles e capacidade operacional antes de uma exploração real | CISA NICCS |
| CISA, Cybersecurity Performance Goals | exercícios anunciados e não anunciados, com testes de intrusão, bug bounties, simulações de incidentes ou exercícios de mesa | não especificado | desenho anunciado ou não anunciado | escolher o tipo de exercício para obter evidência operacional mais robusta | CISA |
| CISA, mock phishing emails | e-mails simulados para grupos definidos, usados para avaliar vulnerabilidade ao phishing | aberturas, cliques e nível potencial de impacto | não especificado | medir a vulnerabilidade real ao phishing | CISA |
| NIST, estudo sobre programas de conscientização | não especificado | taxa de conclusão do treinamento, cliques em simulações, auditorias, reportes de phishing simulado e real | não especificado | selecionar métricas para avaliar a efetividade do programa | NIST |
| SAGE, estudo hospitalar | simulações autorizadas para avaliar reconhecimento de phishing por e-mail | capacidade da equipe de reconhecer ataques por e-mail | personalização do e-mail | segmentar e personalizar iscas para medir melhor a suscetibilidade real | SAGE Journals |
| Phin Security, resumo de estudo longitudinal | não especificado | resiliência ao phishing, cliques e reportes | dificuldade do phishing simulado | ajustar a dificuldade, porque ela muda fortemente o resultado | Phin Security |
| JISTIC, simulação publicada | não especificado | 17.062 e-mails entregues, 30,35% de aberturas, 1,09% de cliques e 0,43% de envio de dados | não especificado | usar uma linha de base operacional para comparar campanhas | JISTIC |
O que a ISO/IEC 27001:2022 realmente pede e o que não define?
A ISO/IEC 27001:2022, na cláusula 6.3 e no controle A.6.3, exige consciência, educação, treinamento e atualizações periódicas adequadas à função, segundo a cópia da norma e o resumo de controle fornecidos. Ela não fixa uma KPI de simulação nem obriga a observar uma única métrica. A leitura da Whalemate é que a norma define o dever de programa, não o painel de controle.
O que a CISA entende por cyber exercise e simulated cyberattack?
A CISA, no NICCS, define cyber exercise como um evento planejado para simular uma disrupção cibernética e desenvolver ou testar prevenção, detecção, mitigação, resposta ou recuperação. A CISA também define simulated cyberattack como um ataque autorizado e simulado para avaliar defesas e encontrar fraquezas exploráveis. A leitura da Whalemate é que o exercício vale pela capacidade que coloca à prova, não pela teatralidade da isca.
Por que a CISA insiste em exercícios anunciados e não anunciados?
A CISA, em seus Cybersecurity Performance Goals, diz que os exercícios podem incluir penetration testing, bug bounties, simulações de incidentes ou exercícios de mesa, e devem incluir testes anunciados e não anunciados. Isso altera a qualidade da evidência, porque evita que a equipe responda apenas pela expectativa do calendário. A leitura da Whalemate é que o anúncio ou a surpresa são variáveis de desenho, não detalhes administrativos.
Quais métricas o NIST usa para avaliar conscientização?
Em seu estudo sobre programas de conscientização, o NIST relata que as métricas mais usadas foram taxa de conclusão do treinamento, cliques em simulações de phishing e auditorias ou avaliações do programa. O mesmo estudo também cita reportes de phishing simulado e real como insumo de avaliação. A leitura da Whalemate é que a medição útil combina conformidade formal com comportamento observável.



