Platforma Emotional AI dezvăluie că zâmbetele au scăzut cu 32% din cauza COVID-19

Cu sediul central la Londra, Realeyes este o platformă de urmărire a ochilor și de măsurare a emoțiilor care utilizează inteligența artificială și învățarea automată pentru a obține o perspectivă asupra comportamentului și expresiei umane. Printre clienții lor se numără Buzzfeed, Coca-Cola, Conde Nast, eBay, Mars și Publicis Groupe, printre alții.

Realeyes folosește camere frontale, viziune computerizată și tehnologii de învățare automată pentru a detecta atenția și emoția în rândul publicului opt-in în timp ce vizionează conținut video.

ClickZ a discutat recent cu Max Kalehoff, VP Marketing & Growth pentru Realeyes, pentru a discuta despre tehnologia inovatoare a companiei și capacitățile pe care le aduc agenților de marketing și editorilor.

Un fundal în măsurarea digitală

Kalehoff a aflat despre Realeyes după ce a condus împreună o prezentare cu directorul general al Realeyes la Sustainable Brands Conference din 2017. A început să lucreze cu compania în noiembrie trecut.

Kalehoff și-a început cariera la start-up-uri care s-au concentrat pe analiză și noi informații în marketing, inclusiv Media Metrix, care a fost achiziționată de comScore la începutul anului.

A făcut parte din echipa de management fondatoare a BuzzMetrics, care a fost achiziționată de Nielsen și a devenit Nielsen Digital. Kalehoff a fost, de asemenea, în echipa de management fondatoare a Clickable, o companie de tehnologie de căutare.

„Sunt foarte pasionat de spațiul de marketing”, spune Kalehoff, „cred că este interesant, în special analiza, care este lipiciul care face ca totul să funcționeze.”

Kalehoff a recunoscut că o mare parte din ceea ce lipsea din analiză era noțiunea de măsurare a atenției. A început un blog despre asta cu Advertising Research Foundation (ARF) în 2006, unul dintre primele bloguri de marketing care a examinat atenția versus angajament.

„Cred că atenția este o oportunitate mare, neexploatată”, explică Kalehoff. „Realeyes aduce o perspectivă nouă în măsurarea atenției prin aplicarea IA a emoțiilor și viziunea pe computer pentru a ajuta la înțelegerea atenției, în special cu videoclipuri și cu spații interactive.”

Tehnologia AI din spatele măsurării emoțiilor

Realeyes folosește camerele frontale pe dispozitive precum laptopuri, telefoane mobile și tablete. Cu permisiunea utilizatorului, Realeyes activează un algoritm ușor, care aplică coordonatele de bază peste fața utilizatorului, iar sistemul folosește aceste coordonate pentru a măsura indicațiile faciale.

Exemplu de sistem al lui Realeyes care mapează chipul lui Kalehoff

Sistemul Realeyes poate detecta emoții majore, inclusiv fericire, confuzie, dispreț, dezgust, empatie, frică și surpriză.

Tehnologia se bazează pe o ramură a psihologiei inițiată de Paul Ekman, în anii 1970 și 80. Ekman a creat codificarea facială, care este o tehnică pe care psihologii o folosesc pentru a detecta emoțiile folosind observarea pasivă a feței cuiva.

Kalehoff spune: „Este o școală consacrată de psihologie. Folosim psihologi instruiți și adnotatori umani pentru a analiza conținut media, cum ar fi videoclipuri sau meme-uri și alte experiențe care au loc digital. Avem acești utilizatori umani să eticheteze ce emoții se întâmplă în anumite puncte. În timp, mașinile învață și devin foarte precise în înțelegerea emoției.”

În urmă cu aproximativ un an, Realeyes a fost pionierat în monitorizarea atenției ca o descoperire fundamentală în tehnologia lor. Monitorizarea atenției măsoară implicarea unui utilizator cu conținutul pe care îl vizionează și aplică diferite niveluri de intensitate în funcție de interacțiunea acestuia cu stimulii pe care îi primesc.

Atenția poate fi întărită sau degradată în funcție de nivelul de distragere a atenției utilizatorului - se uită în altă parte, beau ceva, mestecă gumă etc.?

„În marketing și publicitate, elementul fundamental este atenția”, explică Kalehoff. „Este ceea ce oamenii cumpără și vând. Dacă ești editor, vinzi atenție. Dacă ești un agent de marketing sau un cumpărător de media, câștigi atenție.”

Realeyes folosește aceleași platforme de răspuns pe panouri pe care le folosesc Nielsen, Kantar și Ipsos. Agenții de marketing pot încărca un videoclip pe site-ul web Realeyes, care este apoi vizualizat de către cei care răspund la panoul care au integrat software-ul Realeyes pe dispozitivul lor.

„Livrăm un videoclip cu expunere forțată, iar participanții trec printr-un proces de consimțământ, astfel încât să înțeleagă că le vom porni camera, scopul a ceea ce facem și că căutăm să înțelegem răspunsul lor la reclame. și alte mass-media.”

Aplicarea IA emoțională în marketing

Astăzi, Realeyes își folosește tehnologia AI emoțională pentru a-i ajuta pe marketeri cu măsurarea atenției. Înțelegerea atenției într-o reclamă publicitară le permite specialiștilor în marketing să prezică ce conținut sau ce reclamă le va câștiga cea mai mare atenție odată ce o introduc pe piață.

Clasificatoarele de emoții permit sistemului să facă predicții despre nivelul de atenție pe care o va primi un creativ înainte de a intra vreodată pe piață sau de a fi împins de media plătită.

„Acesta este un beneficiu foarte direct al progreselor în acuratețea detectării emoțiilor”, spune Kalehoff. „Un alt beneficiu important este că ne-am avansat setul de antrenament folosind noi clasificatoare pentru a detecta cu exactitate emoția asiaticilor care reprezintă o mare parte a lumii noastre. Abilitatea de a fi relevant și de a aplica tehnologia în alte țări, inclusiv în țările asiatice, este o parte uriașă a progresului în clasificarea emoțiilor.”

Mergând mai departe, Realeyes își duce emoțiile AI către experiența live. Au produse beta cu diverse platforme video importante și companii de jocuri în care folosesc detectarea atenției în fluxul live în aplicație, jocuri și experiențe mobile.

Spune Kalehoff: „Gândiți-vă la platforma dvs. video preferată care poate înțelege atenția utilizatorilor prin codificare facială reală sau imaginați-vă dacă sunteți o companie de streaming de jocuri care este capabilă să înțeleagă dacă utilizatorii acordă atenție redării în flux a celebrității jocurilor video Ninja, sau sunt concentrați pe jocul pe care îl au în altă fereastră?”

Clasificatoarele lui Realeyes le permit să folosească atenția pentru a prezice rezultate ale reclamelor publicitare. Clasificatoarele de emoții le permit utilizatorilor să se ramifică pe noi piețe și culturi. Viitorul acestei tehnologii constă în măsurarea experienței live.

Măsurarea succesului în zâmbete

Realeyes a publicat recent un studiu de caz care sa concentrat pe monitorizarea normelor. explică Kalehoff.

„Pe măsură ce COVID-19 a luat stăpânire, am făcut o analiză cu privire la „cota de zâmbet” sau de fericire pe care o au consumatorii în timp ce vizionează videoclipuri”, spune Kalehoff. „Am găsit o scădere cu 32% a zâmbetelor ca urmare a experienței cu COVID-19. Reducerea zâmbetelor a fost determinată de anumite industrii, cum ar fi călătoriile, ospitalitatea, electronicele de larg consum și bunurile de lux. Acest lucru este semnificativ, deoarece oferă contextul că sentimentul consumatorilor se schimbă și, eventual, la scară mare.”

Realeyes a făcut, de asemenea, un studiu de caz cu compania de anunțuri mobile digitale Teads, care oferă experiențe interactive de anunțuri mobile pentru editori premium la scară globală.

Teads a lucrat cu Realeyes pentru a folosi clasificarea emoțiilor și măsurarea atenției pentru a-și construi modelul de predicție a atenției. Acest model permite sistemului să analizeze reclamele sau conținutul existent, să testeze respectiva reclamă printr-un test de expunere forțată și să prezică atenția în vizionarea că reclamele respective se vor acumula în viitor.

„Este o inteligență foarte puternică atât pentru marketer, cât și pentru editor,” spune Kalehoff. „Teads este un editor de tehnologie și folosește această inteligență direct pentru a genera performanța și rezultate mai bune ale agenților de publicitate.”