TIC: multimédia

1. LES INTERFACES ÉMOTIONNELLES
Réalisé par: Sabrine MASTOURA
Présenté le: 14/12/2016
Mastère de Recherche TIC: Multimédia
2016-2017
Université de Carthage
Ecole Nationale d’ingénieurs de Carthage

2. PLAN
 Introduction
 Les interfaces émotionnelles
 Modélisation des interfaces émotionnelles
 Transfert des expressions faciales émotionnelles
 Conclusion

3. INTRODUCTION
 Les émotions représentent pour les chercheurs un
champs d’étude promoteur pour modéliser des
interfaces.
1

4. LES INTERFACES ÉMOTIONNELLES
 Inspiration du Pyramide des besoin de Maslow
 Interaction plus naturelle
 Création de sentiment de confiance et d’engagement
 Déclenchement des émotions positives
2

5. LES INTERFACES ÉMOTIONNELLES
 Convivialité du logo de Google
 Changement des logos de Google
 Inspiration de la vie quotidienne
 Inspiration des données personnelles
3

6. MODÉLISATION DES INTERFACES ÉMOTIONNELLES
 Des Images en grand:
 Des images occupant tout l’espace
 Des images utiles:
 Des images significatives
4

7. MODÉLISATION DES INTERFACES ÉMOTIONNELLES
 Agent de Poste
 Un visage poupon
 Un sourire engageant
 Une démarche en avant
5

8. MODÉLISATION DES INTERFACES ÉMOTIONNELLES
 L’émotion par petite touche:
 Impacter la mémoire à court terme par des surprises
 Des messages drôles
 Des messages de divertissements 6

9. MODÉLISATION DES INTERFACES
ÉMOTIONNELLES
 La ligne éditoriale
 Accompagner l’image par une courte phrase
 Insister sur l’idée
 Ajouter de l’humour
7

10. TRANSFERT DES EXPRESSIONS FACIALES
ÉMOTIONNELLES
 But:
 Evaluer la performance des machines de Boltzman
restreintes dans le transfert des expressions faciales
émotionnelles
8

11. TRANSFERT DES EXPRESSIONS FACIALES
ÉMOTIONNELLES
 Collecte des données:
 Détecter la parole et le visage:
 Un visage comportant 103 détails
 7 émotions différentes du même visage
 Des captures en 2D (x et y)
 Des captures avec une fréquence de 100 images/sec
 Chaque émotion est capturée 532 fois
 Sélection de 200 capture pour chaque émotion
 Le jeu de donnée
206 attributs
200 exemples 9

12. TRANSFERT DES EXPRESSIONS FACIALES
ÉMOTIONNELLES
 Préparation des données:
 Normalisation des données
 Choix de la référence: Neutre avec bouche fermée
 Alignement de l’audio avec les phonèmes
 Mise en correspondance des phonèmes et des captures
 Former des couples d’émotions tq (neutre, heureux)
 Utilisation de l’ACP
 Jeu de donnée = Base d’apprentissage (150) + Base de test(50) 10

13. TRANSFERT DES EXPRESSIONS FACIALES
ÉMOTIONNELLES
 Modélisation:
 Concentration sur la variation neutre heureux
 Utilisation de la machine de Boltzmann temporelle TRBM
 Capter les dépendances temporelles
 Générer des séquences d’émotions de sortie
 Utilisation de la machine entrée sortie de Boltzmann temporelle
IOTRBM
 Transformer une expression neutre en une expression émotionnelle
 Utilisation de , 10, 50 et 100 unités par couche
 Comparaison des résultats avec
 Régression Linéaire LR
 Modèle Autorégressive AR
 Perceptron Multi Couches MLP
3
11

14. TRANSFERT DES EXPRESSIONS FACIALES
ÉMOTIONNELLES
 Evaluation:
 Utilisation de la moyenne des erreurs quadratiques MSE
 IOTRBM est capable de détecter les variations des
expressions faciales du neutre à l’heureux
12

15. CONCLUSION
 Amélioration de l’interaction utilisateur-interface
 Vérifier la machine sur le reste des émotions
 Vérifier la machine sur des captures 3D
13

16. Merci pour votre attention
14