Programa do Curso
Introdução à Modelagem de Ameaças em IA
- O que torna os sistemas de IA vulneráveis?
- Superfície de ataque da IA vs. sistemas tradicionais
- Principais vetores de ataque: dados, modelo, saída e interface
Ataques Adversários em Modelos de IA
- Compreensão de exemplos adversários e técnicas de perturbação
- Ataques de caixa branca vs. caixa preta
- Métodos FGSM, PGD e DeepFool
- Visualização e criação de amostras adversárias
Inversão de Modelo e Vazamento de Privacidade
- Inferência dos dados de treinamento a partir da saída do modelo
- Ataques de inferência de pertinência
- Riscos de privacidade em modelos de classificação e generativos
Envenenamento de Dados e Injeção de Backdoors
- Como dados corrompidos influenciam o comportamento do modelo
- Backdoors baseados em gatilhos e ataques tipo Trojan
- Estratégias de detecção e sanitização
Técnicas de Robustez e Defesa
- Treinamento adversário e aumento de dados (data augmentation)
- Máscara de gradiente e pré-processamento de entrada
- Técnicas de suavização de modelos e regularização
Defesas de IA Preservadoras de Privacidade
- Introdução à privacidade diferencial
- Injeção de ruído e orçamentos de privacidade
- Aprendizado federado e agregação segura
Segurança da IA na Prática
- Avaliação e implantação de modelos cientes de ameaças
- Uso da ART (Adversarial Robustness Toolbox) em cenários aplicados
- Estudos de caso da indústria: violações reais e mitigações
Resumo e Próximos Passos
Requisitos
- Compreensão dos fluxos de trabalho de aprendizado de máquina e treinamento de modelos
- Experiência com Python e frameworks comuns de ML, como PyTorch ou TensorFlow
- Familiaridade com conceitos básicos de segurança ou modelagem de ameaças é útil
Público-Alvo
- Engenheiros de aprendizado de máquina
- Analistas de segurança cibernética
- Pesquisadores de IA e equipes de validação de modelos
Testemunhos de Clientes (2)
Gostei muito de aprender sobre ataques de IA e as ferramentas disponíveis para começar a praticar e usar ativamente na segurança. Saí da aula com bastante conhecimento que eu não tinha no começo, e o curso foi exatamente o que eu esperava. A parte que mais me chamou atenção na apresentação foi o Comet Browser, e fiquei impressionado com o que ele pode fazer. Com certeza investigarei isso mais a fundo. No geral, foi um ótimo curso e aproveitei muito para aprender o OWASP Top 10 para GenAI.
Patrick Collins - Optum
Curso - OWASP GenAI Security
Máquina Traduzida
O conhecimento profissional e a maneira como ele o apresentou a nós
Miroslav Nachev - PUBLIC COURSE
Curso - Cybersecurity in AI Systems
Máquina Traduzida