Numérisation des visages qui scannent les écrans mobiles

Là, ils regardent, la tête baissée, mais pas en prière.

C'est le profil de votre utilisateur type de smartphone, surfant sur le net, cherchant la prochaine chose. En tournant de page en page et en faisant défiler de haut en bas, ils peuvent ressentir l'une des six émotions de base : la peur, la colère, la joie, la tristesse, le dégoût et la surprise.

Si la vue de la page suscite la bonne émotion, alors ce spectateur pourrait être transformé en prospect. Mais quelle émotion peut faire cela ? Cela peut-il être fait dans un environnement bruyant et distrayant (comme dans la vraie vie) ? Et pouvez-vous évaluer l'interaction pour l'efficacité de la publicité et l'utiliser pour optimiser une campagne ?

Tout d'abord, un peu de contexte

L'hypothèse selon laquelle tous les humains ressentent l'une des six émotions de base a été proposée par le psychologue Paul Ekman. Son travail a également inspiré d'autres personnes travaillant à l'intersection de la psychologie et du marketing, cherchant des moyens de mesurer la réponse émotionnelle afin d'affiner leur approche des consommateurs.

L'apprentissage automatique et la modélisation de l'IA ont été utilisés par diverses entreprises, adoptant toutes des approches différentes de la lecture des émotions à travers les expressions faciales humaines. Certaines de ces approches étaient limitées par la technologie, obligeant le sujet à s'asseoir devant un ordinateur de bureau, soit dans un laboratoire, soit à la maison, afin que l'appareil photo numérique puisse scanner leurs visages et calibrer ces images avec le logiciel, Max Kalehoff, VP de croissance et de marketing chez Realeyes nous a dit.

Avec les personnes utilisant des smartphones, rester immobile assez longtemps pour être calibré n'allait pas fonctionner.

Creusez plus profondément : vous avez souri, nous pensons donc que vous aimez ce produit

Cue le visage

Realeyes a construit son application de reconnaissance faciale pour mobile sur des travaux antérieurs. Son IA a été entraînée sur près d'un milliard d'images. Ces images ont ensuite été annotées par des psychologues de différents pays pour tenir compte des nuances culturelles. L'algorithme à son tour a été formé en utilisant ces annotations, a expliqué Kalehoff, donnant une précision de plus de 90 %.

Le potentiel de Realeyes à travailler sur la plate-forme mobile se croise avec l'explosion des médias sociaux, et dans ce domaine, l'application est agnostique. Peu importe ce que l'utilisateur regarde - TikTok, YouTube, Facebook, Instagram. L'application Realeyes évalue leur réaction.

"Au meilleur de notre connaissance, c'est la première fois que cela est fait", a déclaré Kalehoff. "Nous répondons à une demande de détection de l'attention portée aux créations dans un environnement mobile."

Pour mettre Realeyes sur le smartphone, les utilisateurs doivent s'inscrire, puis sont dirigés vers un environnement où ils peuvent regarder certaines publicités. On leur dit de faire défiler certains écrans, "en faisant ce qu'ils font normalement", a déclaré Kalehoff. Une petite application résidera sur le téléphone pour aider à mesurer les données d'attention visuelle et les données d'interaction de parcours de navigation. "Notre définition (de l'attention) se concentre sur un stimulus tout en ignorant tous les autres stimuli", a-t-il déclaré. "L'expérience pour les participants dure moins de trois minutes."

Rechercher des données aux bons endroits

Ce que Realeyes recherche dépend du média que le consommateur regarde. L'un des résultats recherchés est ce qu'ils appellent une "percée". "De vraies personnes essaient d'éviter les publicités", a noté Kalehoff, donc une percée se produit lorsqu'une publicité réussit à attirer l'attention de quelqu'un malgré un environnement naturellement distrayant.

Cela est important car les gens « glissent, sautent ou font défiler » les publicités pour accéder au contenu. Ils glisseront sur TikTok, feront défiler Facebook ou Instagram, ou sauteront sur YouTube, a observé Kalehoff. L'annonce est-elle passée ?

Ensuite, il y a le type de visionnage, comme Netflix ou Hulu, où l'implication du consommateur est passive. Ici, Realeyes recherche une "réaction de mise au point". Le spectateur prête-t-il attention à l'annonce ? Que voient-ils, seconde par seconde, et cela crée-t-il une impression positive ou négative ?

Ensuite, il y a les achats en ligne, par exemple sur Amazon. Ici, la validation des données visuelles fait l'objet d'un suivi en quatre questions, testant la reconnaissance de la marque, le rappel de la publicité, la confiance dans la marque et la sympathie d'une publicité.

La simplicité de l'approche de Realeyes est que la numérisation de l'expression faciale fonctionnera n'importe où avec n'importe quoi. Comme les deux tiers des dépenses en médias numériques vont à trois ou quatre plates-formes majeures, "il suffit d'aller à quelques endroits pour attirer l'attention", a déclaré Kalehoff.

Marge d'amélioration

La base de Realeyes est la base de données de formation qui informe l'IA de la signification d'une expression faciale. Le portage de l'application sur l'ordinateur de poche signifie être capable de repérer les sourires et les froncements de sourcils, puis d'utiliser ces informations pour corriger une mauvaise impression ou améliorer une bonne.

Néanmoins, Realeyes est conscient qu'il y a place à l'amélioration. Il a dû travailler sur l'ajustement de son application de lecture de visage pour fonctionner dans des conditions de faible luminosité tout en restant précis, a souligné Kalehoff. L'IA a également reçu une formation supplémentaire reconnaissant différents tons de peau et fournissant à nouveau des lectures précises.

Il y a aussi des avantages. Realeyes peut dire si le même visage apparaît plus d'une fois. Cela peut être un problème avec les sondages rémunérés, où un sujet peut vouloir participer plus d'une fois pour gagner un peu d'argent supplémentaire, a noté Kalehoff.

En ce qui concerne l'application pratique, Realeyes a travaillé avec Mars Inc. sur un projet visant à augmenter les ventes en utilisant des mesures d'attention accrue. L'expérience a entraîné une augmentation des ventes de 18 % sur 19 marchés, optimisant les dépenses publicitaires d'environ 30 millions de dollars, a déclaré Kalehoff. Même une augmentation de 5 % de « l'attention créative » peut entraîner une augmentation de 40 % de la notoriété de la marque.