Dans le résumé, il est expliqué que dans l’un des modes de réalisation, un composant de détection d'émotions pourrait identifier au moins un type d'émotion associé à au moins une caractéristique d'émotion détectée. Un composant de stockage viendrait alors stocker le type d'émotion identifié. Une API pourrait recevoir une demande d'une ou plusieurs applications pour un type d'émotion et, en réponse à la demande, renvoyer le type d'émotion identifié. Une ou plusieurs applications peuvent identifier le contenu pour l'affichage en fonction du type d'émotion identifié. L'identification du contenu pour l'affichage par une ou plusieurs applications en fonction du type d'émotion identifié peut inclure la recherche parmi une pluralité d'éléments de contenus, chaque élément de contenu étant associé à un ou plusieurs types d'émotion.
Pour surveiller l'utilisateur, Facebook propose d'utiliser des « données d'imagerie passive », ou des données visuelles capturées automatiquement à l'aide d'un appareil photo portable ou de la caméra frontale d'un téléphone. L'utilisateur fait souvent face à cette caméra sans y prêter attention, tout en utilisant normalement le téléphone ou l'ordinateur, et Facebook espère commencer à exploiter ces données d'imagerie.
Une fois que le système capture les images, un composant d’API identifiera l'émotion de l'utilisateur et stockera les données. Ensuite, Facebook pourrait
- déterminer quelles émotions un produit provoque, ce qui pourrait être utile pour Facebook et les producteurs de contenus ;
- et livrer du contenu à l'utilisateur en fonction de l'émotion affichée, ce qui pourrait aider Facebook à garder les utilisateurs plus engagés .
Dans l’exemple d’application donné par le brevet, si un utilisateur détourne le regard devant une vidéo de chatons, l’algorithme en déduira qu’il convient de présenter moins de contenus de ce type à cet utilisateur. À l’inverse, si l’expression de l’utilisateur change alors qu’il regarde un message ou une photo d’un autre utilisateur, il saura que ce type de contenu présente un intérêt particulier.
En clair, lorsque l’utilisateur réagit positivement ou avec joie au contenu affiché, Facebook peut décider de lui présenter des messages similaires. En revanche, si l’attitude de l’utilisateur est négative ou triste, des messages de ce genre pourraient être évités.
Est-ce que Facebook va se décider à implémenter réellement cette technologie ? Cela reste incertain. Cependant, les experts l'ont qualifié de « champ de mines éthique ».
Pour la société new-yorkaise de renseignement CB Insights : « D'une part, ils veulent identifier quel contenu est le plus engageant et s’adapter aux réactions du public, d'autre part la détection d’émotions est techniquement difficile, sans parler du fait que c’est un véritable champ de mines éthique ».
D'autres techniques listées par Facebook en ce qui concerne les publicités ciblées incluent l'utilisation d'une technologie qui surveillerait la rapidité ou la pression avec laquelle une personne tape et si l'utilisateur a inclus les émoji dans un message.
Pour CB Insights, cela peut également être une indication d'un état émotionnel des utilisateurs.
Facebook a déposé sa demande de brevet en 2014 et l’a obtenu en 2015.
Source : CB Insight, brevet Facebook