Emocjonalna platforma AI ujawnia, że ​​uśmiechy spadły o 32% z powodu COVID-19

Realeyes z siedzibą w Londynie to platforma do śledzenia wzroku i pomiaru emocji, która wykorzystuje sztuczną inteligencję i uczenie maszynowe, aby uzyskać wgląd w ludzkie zachowanie i ekspresję. Do ich klientów należą między innymi Buzzfeed, Coca-Cola, Conde Nast, eBay, Mars i Publicis Groupe.

Realeyes korzysta z przednich kamer, wizji komputerowej i technologii uczenia maszynowego, aby wykrywać uwagę i emocje wśród dobrowolnych odbiorców podczas oglądania treści wideo.

ClickZ niedawno rozmawiał z Maxem Kalehoffem, wiceprezesem ds. marketingu i rozwoju Realeyes, aby omówić innowacyjną technologię firmy oraz możliwości, jakie oferują marketerom i wydawcom.

Tło w pomiarach cyfrowych

Kalehoff dowiedział się o Realeyes po współprowadzeniu prezentacji panelowej z dyrektorem generalnym Realeyes na konferencji Sustainable Brands Conference w 2017 roku. Rozpoczął współpracę z firmą w listopadzie ubiegłego roku.

Kalehoff rozpoczął swoją karierę w start-upach, które koncentrowały się na analityce i nowej inteligencji w marketingu, w tym w Media Metrix, która została przejęta przez comScore we wczesnych latach.

Był członkiem założycielskiego zespołu zarządzającego w BuzzMetrics, który został przejęty przez Nielsen i stał się Nielsen Digital. Kalehoff był również członkiem założycielskiego zespołu zarządzającego Clickable, firmy zajmującej się technologią wyszukiwania.

„Naprawdę pasjonuję się przestrzenią marketingową”, mówi Kalehoff, „Myślę, że to interesujące, zwłaszcza analityka, która jest spoiwem, dzięki któremu wszystko działa”.

Kalehoff zauważył, że dużą częścią tego, czego brakuje w analityce, jest pojęcie mierzenia uwagi. W 2006 roku założył o tym blog z Advertising Research Foundation (ARF), jednym z pierwszych blogów marketingowych, w których analizowano uwagę i zaangażowanie.

„Myślę, że uwaga to wielka, niezbadana szansa”, wyjaśnia Kalehoff. „Realeyes zapewnia nowe spojrzenie na pomiar uwagi, stosując sztuczną inteligencję i wizję komputerową, aby pomóc zrozumieć uwagę, szczególnie w przypadku wideo i interaktywnych przestrzeni”.

Technologia AI stojąca za pomiarem emocji

Realeyes używa przednich kamer na urządzeniach takich jak laptopy, telefony komórkowe i tablety. Za zgodą użytkownika Realeyes włącza lekki algorytm, który stosuje podstawowe współrzędne na twarzy użytkownika, a system wykorzystuje te współrzędne do mierzenia wskazań twarzy.

Przykład systemu Realeyes mapującego twarz Kalehoffa

System Realeyes może wykrywać główne emocje, w tym szczęście, dezorientację, pogardę, wstręt, empatię, strach i zaskoczenie.

Technologia opiera się na gałęzi psychologii zapoczątkowanej przez Paula Ekmana w latach 70. i 80. XX wieku. Ekman stworzył kodowanie twarzy, czyli technikę wykorzystywaną przez psychologów do wykrywania emocji poprzez pasywną obserwację czyjejś twarzy.

Kalehoff mówi: „To uznana szkoła psychologii. Korzystamy z usług przeszkolonych psychologów i ludzkich adnotatorów, aby przeglądać media, takie jak filmy lub memy, i inne doświadczenia, które mają miejsce cyfrowo. Mamy tych ludzkich użytkowników, którzy zaznaczają, jakie emocje mają miejsce w określonych momentach. Z biegiem czasu maszyny uczą się i stają się bardzo precyzyjne w zrozumieniu emocji.”

Około rok temu firma Realeyes była pionierem monitorowania uwagi jako fundamentalnego przełomu w swojej technologii. Monitorowanie uwagi mierzy zaangażowanie użytkownika w oglądane treści i stosuje różne poziomy intensywności w oparciu o ich interakcję z odbieranymi bodźcami.

Uwaga może być wzmocniona lub obniżona w zależności od poziomu rozproszenia użytkownika — czy odwraca wzrok, coś pije, żuje gumę itp.?

„W marketingu i reklamie podstawowym elementem jest uwaga” – wyjaśnia Kalehoff. „To jest to, co ludzie kupują i sprzedają. Jeśli jesteś wydawcą, sprzedajesz uwagę. Jeśli jesteś marketerem lub kupcem mediów, kupujesz uwagę”.

Realeyes korzysta z tych samych platform, z których korzystają firmy Nielsen, Kantar i Ipsos. Marketerzy mogą przesyłać wideo do witryny Realeyes, które są następnie oglądane przez osoby odpowiadające na panel, które zintegrowały oprogramowanie Realeyes ze swoim urządzeniem.

„Dostarczamy film z wymuszoną ekspozycją, a paneliści przechodzą proces zgody, aby zrozumieli, że włączymy ich kamerę, cel naszych działań i że chcemy zrozumieć ich reakcję na reklamy i inne media”.

Stosowanie emocjonalnej sztucznej inteligencji w marketingu

Dziś Realeyes wykorzystuje swoją technologię sztucznej inteligencji emocjonalnej, aby pomóc marketerom w pomiarze uwagi. Zrozumienie uwagi w reklamie pozwala marketerom przewidzieć, która treść lub która kreacja przyciągnie ich najwięcej uwagi po wprowadzeniu jej na rynek.

Klasyfikatory emocji umożliwiają systemowi przewidywanie poziomu uwagi, jaką przyciągnie kreacja, zanim wejdzie ona na rynek lub zostanie popchnięta przez płatne media.

„Jest to bardzo bezpośrednia korzyść z postępu w dokładności wykrywania emocji”, mówi Kalehoff. „Kolejną ważną korzyścią jest to, że rozszerzyliśmy nasz zestaw treningowy za pomocą nowych klasyfikatorów, aby dokładnie wykrywać emocje ludzi z Azji, którzy reprezentują dużą część naszego świata. Możliwość bycia istotnym i zastosowania technologii w innych krajach, w tym w krajach azjatyckich, stanowi ogromną część postępu w klasyfikatorach emocji”.

Idąc dalej, Realeyes przenosi swoją sztuczną inteligencję emocji do doświadczenia na żywo. Oferują produkty w wersji beta z różnymi dużymi platformami wideo i firmami zajmującymi się grami, w których wykorzystujemy wykrywanie uwagi podczas przesyłania strumieniowego na żywo w aplikacji, gier i urządzeń mobilnych.

Mówi Kalehoff: „Pomyśl o swojej ulubionej platformie wideo, która jest w stanie zrozumieć uwagę użytkowników poprzez kodowanie twarzy lub wyobraź sobie, że jesteś firmą zajmującą się streamingiem gier, która jest w stanie zrozumieć, czy użytkownicy zwracają uwagę na transmisję strumieniową sławy gier wideo Ninja, czy są skupieni na grze, którą toczą się w innym oknie?”

Klasyfikatory Realeyes umożliwiają im wykorzystanie uwagi do przewidywania wyników kreacji reklamowej. Klasyfikatory emocji umożliwiają użytkownikom wejście na nowe rynki i kultury. Przyszłość tej technologii polega na mierzeniu doświadczenia na żywo.

Mierzenie sukcesu w uśmiechach

Realeyes opublikował niedawno studium przypadku, które skupiało się na monitorowaniu norm. Kalehoff wyjaśnia.

„Kiedy panował COVID-19, przeprowadziliśmy analizę „udziału uśmiechów” lub szczęścia, jakie konsumenci mają podczas oglądania filmów” – mówi Kalehoff. „Odkryliśmy 32% spadek uśmiechów w wyniku doświadczenia z COVID-19. Zmniejszenie liczby uśmiechów było napędzane przez niektóre branże, takie jak podróże, hotelarstwo, elektronika użytkowa i dobra luksusowe. Jest to ważne, ponieważ daje kontekst, w którym nastroje konsumentów zmieniają się i być może na dużą skalę”.

Realeyes przeprowadził również studium przypadku z firmą Teads zajmującą się reklamą mobilną, która dostarcza interaktywne reklamy mobilne wydawcom premium na skalę globalną.

Teads współpracował z Realeyes, aby wykorzystać klasyfikację emocji i pomiary uwagi, aby zbudować swój model przewidywania uwagi. Ten model umożliwia systemowi przyjrzenie się istniejącej kreacji lub treści, przetestowanie tej kreacji w teście wymuszonej ekspozycji i przewidzenie zainteresowania widzów, jakie te reklamy przyciągną w przyszłości.

„To bardzo potężna inteligencja zarówno dla marketera, jak i dla wydawcy”, mówi Kalehoff. „Teads jest wydawcą technologii i wykorzystuje tę inteligencję bezpośrednio do zwiększania wydajności i lepszych wyników swoich reklamodawców”.