Voltar ao blog

Blog

NIST, CIS e PCI: engenharia social mensurável

NIST, CIS e PCI pedem conscientização contínua ou periódica, mas a evidência não prova menos cliques. A métrica útil é por função.

NIST, CIS e PCI: engenharia social mensurável

A definição de engenharia social converge para um ponto operacional que costuma se perder na prática: ela não descreve um tema de treinamento, e sim um risco comportamental mensurável. Ao cruzar NIST, CIS e PCI com estudos empíricos e dados da CISA, a conclusão para CISO, TI e compliance na América Latina é direta: fazer um curso anual não basta para demonstrar redução real de risco. A decisão útil é medir por função, dificuldade do isco, ação induzida e capacidade de reporte.

Colocadas lado a lado, as fontes mostram algo que nenhuma explicita sozinha. Os marcos convergem em frequência, atualização e reconhecimento de ataques, mas só alguns transformam isso em métricas comportamentais e segmentação por função.

Norma O que exige Frequência Atualização Prática ou medição Foco por função Fonte
NIST SP 800-50 Rev. 1 Recomenda uma abordagem de ciclo de vida para desenvolver e administrar um programa de aprendizado de cibersegurança e privacidade, com métricas e métodos de avaliação não especificado melhorar e atualizar regularmente o programa conforme as necessidades evoluem propõe medir a porcentagem de participantes que mudaram um comportamento no trabalho, por exemplo relatar um e-mail suspeito de phishing, e uma simulação de phishing pode medir quantos usuários detectam a tentativa, clicam em um link malicioso simulado ou abrem um anexo infectado simulado recomenda estabelecer taxas iniciais de clique por grupo ou função para determinar se é necessário um treinamento mais direcionado NIST SP 800-50 Rev. 1
NIST SP 800-172 Exige treinamento de conscientização voltado a reconhecer e responder a ameaças de engenharia social, atores APT, violações e comportamentos suspeitos; também exige exercícios práticos e feedback às pessoas envolvidas e a seus supervisores com frequência definida pela organização atualizar com a frequência definida ou diante de mudanças significativas na ameaça inclui exercícios práticos para funções definidas pela organização, alinhados a cenários atuais, com feedback para funções definidas pela organização NIST SP 800-172
CIS Controls v8 Estabelecer e manter um programa de conscientização de segurança e treinar a força de trabalho para reconhecer ataques de engenharia social como phishing, pretexting e tailgating na admissão e, no mínimo, anualmente revisar e atualizar o conteúdo anualmente ou quando ocorrerem mudanças empresariais significativas não especificado recomenda treinamento de conscientização e habilidades específico por função, com conscientização avançada sobre engenharia social para funções de alto perfil CIS Controls v8
PCI DSS v4.0 Implementar um programa formal de conscientização para que todo o pessoal conheça as políticas e procedimentos de segurança e seu papel na proteção dos dados do titular do cartão; o treinamento deve incluir phishing e ataques relacionados, além de engenharia social a educação de conscientização de segurança é uma atividade contínua o programa de conscientização deve ser revisado e atualizado, conforme necessário, pelo menos uma vez a cada 12 meses não especificado todo o pessoal, e seu papel na proteção dos dados do titular do cartão PCI DSS v4.0
PCI DSS v2.0 Educar o pessoal e usar múltiplos métodos de comunicação e educação, incluindo cartazes, cartas, memorandos, treinamento online, reuniões e promoções; além disso, o pessoal deve reconhecer ao menos anualmente que leu e compreendeu a política e os procedimentos na admissão e pelo menos anualmente não especificado reconhecimento por escrito ou eletronicamente de que leu e compreendeu a política e os procedimentos a nota do requisito permite variar os métodos conforme a função e o nível de acesso aos dados do titular do cartão PCI DSS v2.0

O que muda quando a definição é tratada como risco comportamental?

NIST define engenharia social como uma tentativa de enganar alguém para que revele informações que possam ser usadas para atacar sistemas ou redes, e também como o ato de enganar uma pessoa para que revele informação sensível, obtenha acesso não autorizado ou cometa fraude por meio da criação de confiança, segundo o glossário do NIST. A ENISA descreve isso como um conjunto amplo de atividades que exploram erro ou comportamento humano para obter acesso a informações ou serviços, segundo o ENISA Threat Landscape 2024 e o relatório setorial de finanças 2024.

A leitura da Whalemate é que a definição relevante não termina no canal, seja e-mail, ligação ou rede social, mas na ação induzida. Se o risco consiste em enganar, ganhar confiança e provocar a entrega de dados ou uma ação, então a unidade de gestão não é o curso, e sim o comportamento observável diante de cenários concretos.

Cumprimento mínimo equivale a redução comprovada do risco?

Os marcos de controle convergem ao exigir conscientização e atualização, mas não afirmam que o mero cumprimento dessa frequência reduza, por si só, o risco. O NIST CSF 2.0 PR.AT indica que o pessoal deve receber awareness e training para executar suas tarefas com os riscos de segurança em mente, segundo os exemplos de implementação do NIST, enquanto o CIS Controls v8 exige estabelecer e manter um programa de conscientização, segundo o catálogo do CIS.

A leitura da Whalemate é que há uma diferença material entre provar a existência do programa e provar a efetividade operacional. Um auditor pode verificar que houve treinamento, mas um CISO precisa saber se uma pessoa detecta, reporta e se recupera diante de uma manobra realista.

Basta treinar uma vez por ano?

O CIS Controls v8 exige treinamento na admissão e, no mínimo, anualmente, além de revisar e atualizar o conteúdo anualmente ou quando ocorrerem mudanças empresariais significativas, segundo o próprio CIS Controls v8. A PCI DSS v4.0, por sua vez, estabelece que a educação de conscientização de segurança é uma atividade contínua e que o programa deve ser revisado e atualizado, conforme necessário, ao menos uma vez a cada 12 meses, segundo a PCI DSS v4.0 e seu resumo de mudanças.

A leitura da Whalemate é que a tensão não é normativa, e sim operacional. Se uma norma permite um mínimo anual e outra fala em atividade contínua, desenhar o programa pela régua mais baixa deixa a organização perto do cumprimento documental, mas longe de uma capacidade sustentada de detecção e resposta.

O que as normas dizem sobre exercícios práticos e segmentação por função?

NIST SP 800-172 exige treinamento com frequência definida pela organização, focado em reconhecer e responder a ameaças de engenharia social, atores APT, violações e comportamentos suspeitos, e também exige exercícios práticos para funções definidas pela organização, alinhados a cenários atuais, com feedback para as pessoas envolvidas e seus supervisores, segundo o NIST SP 800-172. O NIST SP 800-50 Rev. 1 recomenda estabelecer taxas de clique iniciais por grupo ou função para determinar se é necessário um treinamento mais direcionado, segundo o NIST SP 800-50 Rev. 1.

A leitura da Whalemate é que a segmentação por função não é um refinamento opcional. É a condição para decidir onde intervir primeiro, com qual cenário e com qual intensidade, sobretudo quando acesso, exposição e impacto potencial não são iguais entre finanças, service desk, compras ou pessoal com privilégios.

O que realmente deveria ser medido?

O NIST SP 800-50 Rev. 1 propõe medir a porcentagem de participantes que mudaram um comportamento no trabalho, por exemplo relatar um e-mail suspeito de phishing, e indica que uma simulação de phishing pode medir quantos usuários detectam a tentativa, clicam em um link malicioso simulado ou abrem um anexo infectado simulado, segundo o NIST SP 800-50 Rev. 1. A Keepnet identifica como métricas a taxa de clique, a taxa de reporte, o tempo até o reporte, a reincidência, a conclusão do treinamento, a melhora em avaliações, as taxas de falha em vishing, smishing e QR, e uma pontuação composta de risco humano, segundo a Keepnet Labs.

A leitura da Whalemate é que a métrica útil combina exposição, resposta e recuperação. Para esse problema, medir dificuldade da simulação, clique ou entrega de dados, reporte, tempo até o reporte, reincidência, recuperação após o erro e reporte de ameaças reais permite decisões melhores do que qualquer indicador isolado.

A taxa de clique ajuda ou distorce o risco?

O NIST SP 800-50 Rev. 1 inclui o clique e a detecção em testes de phishing como insumos de medição, segundo o NIST SP 800-50 Rev. 1. A Hoxhunt sustenta que medir apenas a taxa de clique produz uma visão distorcida do risco, porque ela depende da dificuldade do modelo e não demonstra sozinha a capacidade de detecção, por isso recomenda combinar taxa de reporte, tempo até o reporte, taxa de mensagens perdidas e recuperação depois de um erro, segundo a Hoxhunt.

A leitura da Whalemate é que não há contradição real se o clique for usado como sinal e não como veredito. O problema aparece quando uma organização transforma isso no único KPI, em meta política ou em mecanismo disciplinar, porque aí deixa de medir risco e passa a otimizar um número incompleto.

A evidência empírica sustenta treinamento recorrente?

Um estudo de campo publicado no arXiv com 12.511 funcionários não encontrou efeitos principais significativos das intervenções de treinamento sobre as taxas de clique, p=0,450, nem sobre as taxas de reporte, p=0,417, segundo o arXiv. Outro estudo citado no arXiv encontrou que o treinamento atrasado foi mais eficaz que o controle para reduzir cliques e ações perigosas, com H(1)=8,09, p<0,05 para cliques e H(1)=13,94, p<0,05 para ações perigosas, segundo o arXiv.

A leitura da Whalemate é que a pergunta correta não é se o treinamento funciona sempre ou nunca. A evidência sugere que o efeito depende do desenho, do momento da intervenção, do tipo de reforço e do cenário medido. Por isso, uma política de frequência fixa sem medição contextual deixa a efetividade sem verificação.

A dificuldade do isco muda a leitura dos resultados?

A NIST Phish Scale mede a dificuldade de detecção humana de um e-mail de phishing ao avaliar propriedades da mensagem e características de seus destinatários, segundo a NIST TN.2276. No estudo de campo do arXiv, essa escala previu o comportamento: a taxa de clique foi de 7,0% para iscos fáceis e de 15,0% para iscos difíceis, segundo o arXiv.

A leitura da Whalemate é que comparar taxas de clique sem controlar a dificuldade é metodologicamente frágil. Se uma unidade recebe simulações simples e outra enfrenta pretextos críveis, o mesmo percentual não expressa o mesmo risco nem a mesma capacidade de detecção.

O que os dados reais mostram em tempo e reporte?

A CISA informou que, em suas avaliações, 8 em cada 10 organizações tiveram ao menos uma pessoa que caiu vítima de uma tentativa de phishing, e que 1 em cada 10 e-mails de phishing enviados por avaliadores fez um usuário executar um anexo malicioso ou interagir com um link malicioso, segundo o infográfico da CISA. A mesma fonte informou que 84% dos funcionários avaliados respondeu com informações sensíveis ou interagiu com um link ou anexo falso nos primeiros 10 minutos, enquanto apenas 13% denunciou as tentativas, segundo a CISA.

A leitura da Whalemate é que o tempo até o reporte importa tanto quanto a falha inicial. Se a interação ocorre em minutos e o reporte é baixo, a organização precisa medir velocidade de escalonamento e não apenas exposição, porque a janela de contenção é curta.

O problema segue concentrado no e-mail ou se expandiu para outros canais?

NIST define phishing como uma técnica para obter dados sensíveis por meio de solicitações fraudulentas via e-mail ou sites, passando-se por uma entidade legítima ou pessoa confiável, segundo o glossário do NIST. A ENISA lista como vetores de engenharia social phishing, spear phishing, whaling, smishing, vishing, watering-hole attacks, baiting, pretexting, quid pro quo, honeytraps e scareware, segundo seu relatório do setor financeiro de 2024, e a FTC informou que, em 2025, quase 30% das pessoas que relataram ter perdido dinheiro por golpe disseram que tudo começou em redes sociais, com perdas reportadas de 2,100 bilhões de dólares, segundo a FTC.

A leitura da Whalemate é que reduzir o programa a awareness de e-mail deixa fora parte do risco observável. Para a América Latina, onde times de negócio, atendimento, vendas e finanças operam em canais mistos, a medição também precisa contemplar vishing, smishing, QR e iscos originados em redes sociais.

Que decisão isso habilita para CISO, TI e compliance na América Latina?

A PCI DSS v4.0 exige um programa formal de conscientização e trata a educação de segurança como atividade contínua, segundo a PCI DSS v4.0. O NIST SP 800-172 exige exercícios práticos alinhados a cenários atuais e o NIST SP 800-50 Rev. 1 recomenda medir mudança de comportamento e segmentar por grupo ou função, segundo o NIST.

A leitura da Whalemate é que a decisão não é comprar mais conteúdo genérico nem comemorar uma taxa baixa de clique. A decisão é instrumentar um programa de Human Risk Management que modele contexto, simule por cenário, treine de forma adaptativa, consolide sinais de simulações, cursos, reportes e comportamento em um risk score, e use esse dado para priorizar controles técnicos e treinamento direcionado, não para disciplinar pessoas.

Consequência operacional

Para um CISO, TI ou compliance na América Latina que precisa decidir algo amanhã, esse cruzamento permite uma mudança concreta de desenho. O baseline mínimo deve separar métricas por função, cenário e dificuldade do isco, e incluir clique, entrega de dados, reporte, tempo até o reporte, reincidência, recuperação após o erro e reporte de ameaças reais, porque isso se alinha às recomendações de medição do NIST SP 800-50 Rev. 1, aos exercícios práticos por função do NIST SP 800-172 e à exigência de continuidade da PCI DSS v4.0.

Também implica parar de usar o resultado como medida disciplinar e passá-lo a usar para priorizar onde reforçar DMARC, SPF e DKIM, ou o filtragem prévia ao usuário, como recomenda a orientação do NCSC, e onde concentrar treinamento direcionado para funções de maior exposição. Se o programa continuar limitado a um curso anual e a uma taxa global de clique, pode servir para mostrar conformidade, mas não para comprovar capacidade real de detecção e resposta.

O que ler em seguida?

Ver o guia completo do tema

Perguntas

Perguntas frequentes

O que a definição de engenharia social significa para uma equipe de segurança?

Significa que a definição não deve ficar em um conceito teórico. Segundo o NIST e a ENISA, o núcleo do risco é enganar uma pessoa, ganhar sua confiança e fazer com que ela entregue informações ou realize uma ação. Operacionalmente, isso obriga a medir comportamento observável e não apenas participação em treinamento.

Quais métricas um CISO deveria olhar primeiro?

Segundo o NIST SP 800-50 Rev. 1 e as métricas levantadas pela Keepnet, convém começar por dificuldade da simulação, clique, entrega de dados, reporte, tempo até o reporte e reincidência. Essa base permite identificar onde há exposição real e quais grupos exigem treinamento ou controles técnicos adicionais.

Um treinamento anual cumpre o necessário?

Depende do marco, mas não basta como prova de efetividade. O CIS Controls v8 exige treinamento na admissão e, no mínimo, anualmente, enquanto a PCI DSS v4.0 define a conscientização como atividade contínua. A evidência empírica do material também mostra que a frequência, por si só, não garante menos cliques nem mais reportes.

Por que não basta medir a taxa de clique?

Porque o clique depende da dificuldade do isco e, por si só, não reflete detecção, escalonamento nem recuperação. A Hoxhunt sustenta que medir apenas clique distorce o risco, e a NIST Phish Scale mostra que a dificuldade da mensagem altera o comportamento observado. Sem contexto, a comparação entre áreas ou campanhas pode ser enganosa.

Que decisão prática compliance deveria tomar se tiver PCI DSS?

Deveria exigir que o programa formal de conscientização não se reduza a evidência de realização de treinamento. Segundo a PCI DSS v4.0, a atividade é contínua e inclui phishing and related attacks e engenharia social. Isso permite exigir revisão periódica, treinamento vigente e métricas de comportamento que demonstrem capacidade real, e não apenas conformidade documental.

Gostaria de se aprofundar neste tema?

Abra este artigo diretamente no Claude ou ChatGPT — faça perguntas, peça um resumo ou explore ideias relacionadas.

Abrir com ClaudeAbrir com ChatGPT