Cours sur les deepfakes

Leçon 1 • Introduction à l'IA et à l'apprentissage automatique

Présente les concepts d'apprentissage automatique essentiels à la compréhension des modèles génératifs. Relie les fondamentaux de l'IA directement aux mécanismes qui alimentent la création de deepfakes.

Leçon 2 • Aperçu des architectures de modèles génératifs

Présente les GAN, les VAE et les modèles de diffusion à un niveau conceptuel. Prépare les étudiants à comprendre quelle architecture sous-tend chaque technique de deepfake abordée ultérieurement.

Leçon 3 • Définition des deepfakes et des médias synthétiques

Clarifie la terminologie précise distinguant les deepfakes, les shallowfakes et le contenu généré par l'IA. Fournit la base définitionnelle requise pour toute analyse technique et éthique ultérieure.

Leçon 1 • Stratégies de collecte d'ensembles de données

Couvre les méthodes éthiques et pratiques pour obtenir des données d'entraînement faciales et vocales. Établit des habitudes de provenance des données essentielles pour une recherche responsable sur les deepfakes.

Leçon 2 • Configuration de l'environnement de calcul

Guide la configuration des environnements GPU, la gestion des dépendances et le suivi reproductible des expériences. Assure que les étudiants peuvent exécuter les pipelines d'entraînement introduits dans les chapitres suivants.

Leçon 3 • Augmentation des données pour les modèles génératifs

Applique des stratégies d'augmentation qui améliorent la robustesse du modèle sans introduire d'artefacts. Relie la préparation des données à la stabilité de l'entraînement abordée dans la section suivante.

Leçon 1 • Clonage vocal et synthèse audio

Présente les systèmes de synthèse vocale et de conversion de la voix qui reproduisent l'identité vocale d'un locuteur. Établit les concepts audio deepfake nécessaires pour la synthèse multimodale ultérieure.

Leçon 2 • Synthèse de corps entier et de scène

Étend les concepts de deepfake au-delà du visage à la pose du corps, aux gestes et à la génération d'arrière-plan. Prépare les étudiants aux sujets avancés de synthèse multimodale et vidéo.

Leçon 3 • Réanimation faciale et manipulation à distance

Explique les méthodes de transfert de mouvement qui animent un visage cible en utilisant les expressions d'un conducteur. Distingue la réanimation de l'échange de visage en termes de préservation de l'identité.

Leçon 4 • Méthodes de génération basées sur la diffusion

Couvre les pipelines de modèles de diffusion modernes pour la synthèse d'images et de vidéos haute fidélité. Positionne les modèles de diffusion comme l'état de l'art actuel par rapport aux méthodes basées sur les GAN.

Leçon 1 • Fonctions de perte et optimisation

Explique les pertes adversariales, perceptuelles et de préservation de l'identité utilisées dans l'entraînement des deepfakes. Comprendre la conception de la perte est un prérequis pour diagnostiquer l'instabilité de l'entraînement.

Leçon 2 • Apprentissage par transfert et réglage fin

Tire parti des modèles pré-entraînés pour réduire le temps d'entraînement et les besoins en données pour de nouvelles identités. Permet la création pratique de deepfakes sans sessions d'entraînement complètes à partir de zéro.

Leçon 3 • Workflows de réglage des hyperparamètres

Introduit des approches systématiques pour la planification du taux d'apprentissage, la sélection de la taille de lot et la régularisation. Un réglage efficace réduit le coût de calcul et accélère l'amélioration du modèle.

Leçon 4 • Techniques de stabilité de l'entraînement des GAN

Couvre les pénalités de gradient, la normalisation spectrale et la croissance progressive pour stabiliser l'entraînement des GAN. Aborde directement les modes de défaillance les plus courants rencontrés par les étudiants.

Leçon 1 • Suppression d'artefacts et accentuation

Utilise la super-résolution et le remplissage pour éliminer le flou, le fantôme et les artefacts de bordure. Produit une sortie de qualité diffusion adaptée aux applications médiatiques professionnelles.

Leçon 2 • Lissage temporel et stabilisation

Réduit le scintillement d'image à l'image à l'aide de techniques de flux optique et de filtrage temporel. La cohérence temporelle est essentielle pour les deepfakes intégrés dans une vidéo en mouvement.

Leçon 3 • Synchronisation audio-visuelle

Aligne la voix synthétisée avec les mouvements des lèvres et les expressions faciales dans la vidéo finale. Les échecs de synchronisation sont parmi les indices de détection les plus courants exploités par les outils forensiques.

Leçon 4 • Étalonnage des couleurs et correction de l'éclairage

Applique l'appariement d'histogrammes et le rééclairage pour aligner les visages synthétisés avec l'illumination de la scène. Corrige les incohérences les plus visuellement détectables dans la sortie brute du deepfake.

Leçon 1 • Analyse des artefacts visuels

Entraîne l'œil et les outils automatisés à repérer les limites de fusion, les textures non naturelles et les incohérences d'éclairage. L'analyse visuelle est la première étape de tri dans tout workflow forensique.

Leçon 2 • Modèles de détection par apprentissage profond

Entraîne et évalue les classifieurs basés sur les CNN et les transformers pour distinguer les médias réels des médias synthétiques. Couvre les ensembles de données de référence et les défis de généralisation inter-ensembles.

Leçon 3 • Détection des deepfakes audio

Applique l'analyse de spectrogramme et les modèles anti-usurpation pour identifier les voix clonées ou synthétisées. Complète la boîte à outils forensique multimodale introduite dans ce chapitre.

Leçon 4 • Détection basée sur les signaux biologiques

Exploite les signaux physiologiques tels que le rPPG, les motifs de clignement des yeux et le regard pour détecter les artefacts de synthèse. Les signaux biologiques sont difficiles à reproduire avec précision pour les générateurs actuels.

Leçon 1 • Paysage réglementaire et juridique

Présente les catégories fonctionnelles de droit régissant les médias synthétiques : diffamation, fraude et propriété intellectuelle. Évite les codes juridictionnels spécifiques tout en construisant une culture juridique transférable.

Leçon 2 • Élaboration de politiques organisationnelles

Guide la création de politiques internes sur les médias synthétiques couvrant les utilisations acceptables et les processus de révision. Prépare les étudiants à institutionnaliser des normes éthiques au sein de leurs organisations.

Leçon 3 • Protocoles de divulgation responsable

Définit les procédures de signalement des abus liés aux deepfakes aux plateformes, aux organisations et aux autorités. Équipe les étudiants pour agir en tant que professionnels responsables lorsqu'ils rencontrent des médias synthétiques nuisibles.

Leçon 4 • Cadres éthiques pour les médias synthétiques

Applique les prismes de l'éthique conséquentialiste, déontologique et des vertus aux décisions de création de deepfakes. Fournit des outils de raisonnement structurés pour naviguer dans des scénarios professionnels ambigus.

Leçon 1 • Architecture de pipeline de niveau production

Conçoit des pipelines de deepfake évolutifs et modulaires adaptés au déploiement en production et à la collaboration en équipe. Intègre toutes les compétences techniques des chapitres précédents dans une conception système unifiée.

Leçon 2 • Systèmes de vérification des médias et de provenance

Intègre les normes d'authentification de contenu et le filigrane dans les workflows de production. Positionne les praticiens du deepfake comme des contributeurs à l'infrastructure d'intégrité des médias.

Leçon 3 • Systèmes de deepfake en temps réel

Couvre la compression de modèles et l'accélération matérielle pour la synthèse vidéo en direct à faible latence. La capacité temps réel débloque des applications dans la diffusion en direct et les médias interactifs.

Leçon 4 • Deepfakes dans la sécurité et les tests d'intrusion

Applique les compétences de génération de deepfakes aux tests d'intrusion autorisés et aux simulations d'ingénierie sociale. Cadre l'utilisation offensive dans des limites éthiques et contractuelles strictes.