La piattaforma di intelligenza artificiale emotiva rivela che i sorrisi sono diminuiti del 32% a causa del COVID-19

Con sede a Londra, Realeyes è una piattaforma di monitoraggio oculare e misurazione delle emozioni che utilizza l'intelligenza artificiale e l'apprendimento automatico per ottenere informazioni sul comportamento e l'espressione umana. I loro clienti includono Buzzfeed, Coca-Cola, Conde Nast, eBay, Mars e Publicis Groupe, tra gli altri.

Realeyes utilizza fotocamere frontali, computer vision e tecnologie di apprendimento automatico per rilevare l'attenzione e le emozioni tra il pubblico opt-in mentre guarda i contenuti video.

ClickZ ha recentemente parlato con Max Kalehoff, vicepresidente marketing e crescita di Realeyes, per discutere della tecnologia innovativa dell'azienda e delle capacità che offrono a professionisti del marketing ed editori.

Un background nella misurazione digitale

Kalehoff è venuto a conoscenza di Realeyes dopo aver co-diretto una presentazione con il CEO di Realeyes alla Sustainable Brands Conference nel 2017. Ha iniziato a lavorare con l'azienda lo scorso novembre.

Kalehoff ha iniziato la sua carriera in start-up che si sono concentrate su analisi e nuova intelligenza nel marketing, tra cui Media Metrix che è stata acquisita da comScore nei primi anni.

Ha fatto parte del team di gestione fondatore di BuzzMetrics, che è stata acquisita da Nielsen e diventata Nielsen Digital. Kalehoff era anche nel team di gestione fondatore di Clickable, una società di tecnologia di ricerca.

"Sono davvero appassionato dello spazio di marketing", afferma Kalehoff, "Penso che sia interessante, in particolare l'analisi che è il collante che fa funzionare tutto".

Kalehoff ha riconosciuto che una parte importante di ciò che mancava all'analisi era il concetto di misurazione dell'attenzione. Ha aperto un blog al riguardo con la Advertising Research Foundation (ARF) nel 2006, uno dei primi blog di marketing che ha esaminato l'attenzione rispetto al coinvolgimento.

"Penso che l'attenzione sia una grande opportunità inesplorata", spiega Kalehoff. "Reaeyes offre una nuova prospettiva alla misurazione dell'attenzione applicando l'intelligenza artificiale delle emozioni e la visione artificiale per aiutare a comprendere l'attenzione, in particolare con i video e gli spazi interattivi".

La tecnologia AI dietro la misurazione delle emozioni

Realeyes utilizza le fotocamere frontali su dispositivi come laptop, telefoni cellulari e tablet. Con il permesso dell'utente, Realeyes abilita un algoritmo leggero, che applica le coordinate di base sul viso dell'utente e il sistema utilizza queste coordinate per misurare i segnali facciali.

Esempio del sistema di mappatura del viso di Kalehoff di Realeyes

Il sistema Realeyes è in grado di rilevare le principali emozioni tra cui felicità, confusione, disprezzo, disgusto, empatia, paura e sorpresa.

La tecnologia si basa su una branca della psicologia introdotta da Paul Ekman negli anni '70 e '80. Ekman ha creato la codifica facciale, una tecnica che gli psicologi usano per rilevare le emozioni usando l'osservazione passiva del volto di qualcuno.

Dice Kalehoff, “È una scuola di psicologia consolidata. Usiamo psicologi addestrati e annotatori umani per rivedere i media come video o meme e altre esperienze che accadono digitalmente. Facciamo in modo che questi utenti umani tagghino quali emozioni stanno accadendo in determinati punti. Nel tempo le macchine imparano e diventano molto precise nel comprendere l'emozione.”

Circa un anno fa, Realeyes ha aperto la strada al monitoraggio dell'attenzione come una svolta fondamentale nella sua tecnologia. Il monitoraggio dell'attenzione misura il coinvolgimento di un utente con il contenuto che sta guardando e applica diversi livelli di intensità in base alla sua interazione con gli stimoli che sta ricevendo.

L'attenzione può essere rafforzata o degradata in base al livello di distrazione dell'utente: guardano altrove, bevono qualcosa, masticano gomme, ecc.?

“Nel marketing e nella pubblicità l'elemento fondamentale è l'attenzione”, spiega Kalehoff. “È ciò che la gente compra e vende. Se sei un editore, vendi attenzione. Se sei un marketer o un media buyer, stai acquistando attenzione".

Realeyes utilizza le stesse piattaforme di risposta del pannello utilizzate da Nielsen, Kantar e Ipsos. Gli esperti di marketing possono caricare un video sul sito Web di Realeyes che viene quindi visualizzato dai risponditori del pannello che hanno integrato il software di Realeyes nel proprio dispositivo.

"Forniamo un video con esposizione forzata e i relatori passano attraverso una procedura di consenso in modo che capiscano che accenderemo la videocamera, lo scopo di ciò che stiamo facendo e che stiamo cercando di capire la loro risposta agli annunci e altri media”.

Applicare l'intelligenza artificiale emotiva al marketing

Oggi, Realeyes utilizza la sua tecnologia di intelligenza artificiale emotiva per aiutare i professionisti del marketing nella misurazione dell'attenzione. Comprendere l'attenzione in una creatività pubblicitaria consente ai professionisti del marketing di prevedere quale contenuto o quale creatività guadagnerà loro la maggiore attenzione una volta che lo avranno messo sul mercato.

I classificatori di emozioni consentono al sistema di fare previsioni sul livello di attenzione che un creativo riceverà prima che entrino nel mercato o vengano spinti dai media a pagamento.

"Questo è un vantaggio molto diretto dei progressi nell'accuratezza del rilevamento delle emozioni", afferma Kalehoff. “Un altro importante vantaggio è che abbiamo migliorato il nostro set di formazione utilizzando nuovi classificatori per rilevare con precisione l'emozione delle persone asiatiche che rappresentano gran parte del nostro mondo. Avere la capacità di essere rilevanti e applicare la tecnologia in altri paesi, compresi i paesi asiatici, è una parte enorme del progresso nei classificatori di emozioni".

In futuro, Realeyes porterà la propria intelligenza artificiale emotiva nell'esperienza dal vivo. Hanno prodotti beta con varie importanti piattaforme video e società di gioco in cui stiamo utilizzando il rilevamento dell'attenzione su streaming in-app, giochi ed esperienze mobili dal vivo.

Dice Kalehoff, "Pensa alla tua piattaforma video preferita in grado di comprendere l'attenzione degli utenti attraverso la codifica facciale effettiva o immagina se sei una società di streaming di giochi in grado di capire se gli utenti prestano attenzione allo streaming della celebrità dei videogiochi Ninja, o sono concentrati sul gioco che stanno svolgendo in un'altra finestra?"

I classificatori di Realeyes consentono loro di utilizzare l'attenzione per prevedere i risultati della creatività pubblicitaria. I classificatori di emozioni consentono agli utenti di espandersi in nuovi mercati e culture. Il futuro di questa tecnologia è nella misurazione dell'esperienza dal vivo.

Misurare il successo nei sorrisi

Realeyes ha recentemente pubblicato un caso di studio incentrato sul monitoraggio delle norme. Kalehoff spiega.

"Mentre il COVID-19 ha preso piede, abbiamo fatto un'analisi sulla 'quota di sorrisi' o felicità che i consumatori hanno mentre guardano i video", afferma Kalehoff. “Abbiamo riscontrato una diminuzione del 32% dei sorrisi a seguito dell'esperienza del COVID-19. La riduzione dei sorrisi è stata trainata da alcuni settori, come i viaggi, l'ospitalità, l'elettronica di consumo e i beni di lusso. Questo è significativo perché dà un contesto al fatto che il sentimento dei consumatori sta cambiando e forse su larga scala".

Realeyes ha anche realizzato un caso di studio con la società di annunci digitali mobili Teads che offre esperienze pubblicitarie mobili interattive a editori premium su scala globale.

Teads ha lavorato con Realeyes per utilizzare la classificazione delle emozioni e la misurazione dell'attenzione per costruire il proprio modello di previsione dell'attenzione. Questo modello consente al sistema di esaminare la creatività o il contenuto esistente, testare tale creatività su un test di esposizione forzata e prevedere l'attenzione nella visualizzazione che tali annunci matureranno in futuro.

"Si tratta di un'intelligenza molto potente sia per il marketer che per un editore", afferma Kalehoff. "Teads è un editore tecnologico e utilizza questa intelligenza direttamente per promuovere le prestazioni e i risultati migliori dei propri inserzionisti".