감성 AI 플랫폼, 코로나19로 미소 32% 감소

런던에 본사를 둔 Realeyes는 AI와 기계 학습을 사용하여 인간의 행동과 표현에 대한 통찰력을 얻는 시선 추적 및 감정 측정 플랫폼입니다. 그들의 고객으로는 Buzzfeed, Coca-Cola, Conde Nast, eBay, Mars, Publicis Groupe 등이 있습니다.

Realeyes는 전면 카메라, 컴퓨터 비전 및 기계 학습 기술을 사용하여 비디오 콘텐츠를 시청할 때 옵트인 청중 사이의 주의와 감정을 감지합니다.

ClickZ는 최근 Realeyes의 마케팅 및 성장 담당 부사장인 Max Kalehoff와 대화하여 회사의 혁신적인 기술과 이 기술이 마케터와 퍼블리셔에게 제공하는 기능에 대해 논의했습니다.

디지털 측정의 배경

Kalehoff는 2017년 Sustainable Brands Conference에서 Realeyes의 CEO와 함께 패널 프레젠테이션을 공동 주도한 후 Realeyes에 대해 알게 되었습니다. 그는 지난 11월 회사와 함께 일하기 시작했습니다.

Kalehoff는 초기에 comScore가 인수한 Media Metrix를 포함하여 분석 및 마케팅의 새로운 인텔리전스에 중점을 둔 신생 기업에서 경력을 시작했습니다.

그는 Nielsen에 인수되어 Nielsen Digital이 된 BuzzMetrics의 창립 관리 팀의 일원이었습니다. Kalehoff는 또한 검색 기술 회사인 Clickable의 창립 관리 팀에 있었습니다.

Kalehoff는 다음과 같이 말했습니다. "저는 마케팅 공간에 대해 정말 열정적입니다."라고 Kalehoff는 말합니다.

Kalehoff는 분석에서 놓치고 있는 큰 부분이 주의 측정이라는 개념이라는 것을 인식했습니다. 그는 관심 대 참여를 조사한 최초의 마케팅 블로그 중 하나인 2006년에 광고 연구 재단(ARF)과 함께 이에 대한 블로그를 시작했습니다.

Kalehoff는 "관심은 크고 미지의 기회라고 생각합니다."라고 설명합니다. "Realeyes는 특히 비디오 및 대화형 공간에서 주의를 이해하는 데 도움이 되도록 감정 AI와 컴퓨터 비전을 적용하여 주의 측정에 새로운 관점을 제공합니다."

감정을 측정하는 AI 기술

Realeyes는 노트북, 휴대폰 및 태블릿과 같은 장치에서 전면 카메라를 사용합니다. Realeyes는 사용자의 허가를 받아 사용자의 얼굴에 기본 좌표를 적용하고 시스템이 이러한 좌표를 사용하여 얼굴 신호를 측정하는 경량 알고리즘을 활성화합니다.

Kalehoff의 얼굴을 매핑하는 Realeyes 시스템의 예

Realeyes 시스템은 행복, 혼란, 경멸, 혐오, 공감, 두려움 및 놀라움과 같은 주요 감정을 감지할 수 있습니다.

이 기술은 1970년대와 80년대에 Paul Ekman이 개척한 심리학의 한 분야를 기반으로 합니다. Ekman은 심리학자가 누군가의 얼굴을 수동적으로 관찰하여 감정을 감지하는 데 사용하는 기술인 얼굴 코딩을 만들었습니다.

Kalehoff는 다음과 같이 말합니다. “확실한 심리학 학교입니다. 우리는 훈련된 심리학자와 인간 주석가를 사용하여 디지털 방식으로 발생하는 비디오나 밈 및 기타 경험과 같은 미디어를 검토합니다. 우리는 이러한 인간 사용자에게 특정 지점에서 어떤 감정이 일어나는지 태그하도록 했습니다. 시간이 지남에 따라 기계는 감정을 배우고 매우 정확하게 이해하게 됩니다.”

약 1년 전 Realeyes는 기술의 근본적인 혁신으로 주의 모니터링을 개척했습니다. 주의 모니터링은 시청 중인 콘텐츠에 대한 사용자의 참여를 측정하고 사용자가 받는 자극과의 상호 작용을 기반으로 다양한 수준의 강도를 적용합니다.

주의 산만 수준에 따라 주의가 강화되거나 저하될 수 있습니다. 사용자가 시선을 돌리거나, 무언가를 마시고, 껌을 씹는 등의 활동을 합니까?

Kalehoff는 "마케팅 및 광고에서 기본 요소는 관심입니다. “사람들이 사고파는 것입니다. 당신이 퍼블리셔라면 관심을 팔고 있는 것입니다. 당신이 마케터나 미디어 바이어라면 주목을 받고 있는 것입니다.”

Realeyes는 Nielsen, Kantar 및 Ipsos가 사용하는 것과 동일한 패널 응답자 플랫폼을 사용합니다. 마케터는 Realeyes의 소프트웨어를 장치에 통합한 패널 응답자가 볼 수 있는 비디오를 Realeyes 웹사이트에 업로드할 수 있습니다.

“우리는 강제 노출 비디오를 제공하고 패널리스트는 동의 절차를 거쳐 우리가 카메라를 켜고 우리가 하는 일의 목적을 이해하고 광고에 대한 반응을 이해하려고 합니다. 그리고 다른 미디어.”

감성 AI를 마케팅에 적용

오늘날 Realeyes는 감정적 AI 기술을 사용하여 마케터의 관심 측정을 돕고 있습니다. 광고 크리에이티브의 관심을 이해하면 마케팅 담당자는 시장에 출시된 후 어떤 콘텐츠 또는 어떤 크리에이티브가 가장 많은 관심을 끌지 예측할 수 있습니다.

감정 분류기를 사용하면 시스템에서 광고 소재가 시장에 출시되거나 유료 미디어에 밀려나기 전에 광고 소재가 받게 될 관심 수준을 예측할 수 있습니다.

Kalehoff는 "이는 감정 감지의 정확성 향상으로 인한 직접적인 이점입니다."라고 말합니다. “또 다른 중요한 이점은 우리가 세계의 많은 부분을 대표하는 아시아인의 감정을 정확하게 감지하기 위해 새로운 분류기를 사용하여 훈련 세트를 발전시켰다는 것입니다. 아시아 국가를 포함한 다른 국가에서 관련 기술을 적용하고 적용할 수 있는 능력을 보유하는 것은 감정 분류기 발전의 큰 부분입니다.”

앞으로 Realeyes는 감정 AI를 라이브 경험으로 가져갈 것입니다. 그들은 라이브 인앱 스트리밍, 게임 및 모바일 경험에 주의 감지를 사용하고 있는 다양한 주요 비디오 플랫폼 및 게임 회사와 함께 베타 제품을 보유하고 있습니다.

Kalehoff는 다음과 같이 말합니다. 아니면 다른 창에서 진행 중인 게임에 집중하고 있습니까?”

Realeyes의 분류기는 주의력을 사용하여 광고 크리에이티브의 결과를 예측할 수 있도록 합니다. 감정 분류기는 사용자가 새로운 시장과 문화로 진출할 수 있도록 합니다. 이 기술의 미래는 라이브 경험을 측정하는 것입니다.

미소로 성공 측정하기

Realeyes는 최근 규범 모니터링에 초점을 맞춘 사례 연구를 발표했습니다. Kalehoff는 설명합니다.

Kalehoff는 "COVID-19가 확산되면서 소비자가 비디오를 시청할 때 갖는 '미소의 몫' 또는 행복에 대한 분석을 수행했습니다."라고 말합니다. “우리는 COVID-19 경험의 결과로 미소가 32% 감소한 것을 발견했습니다. 미소의 감소는 여행, 접객, 소비자 전자 제품 및 사치품과 같은 특정 산업에 의해 주도되었습니다. 이는 소비자 감정이 변화하고 있고 아마도 대규모로 변화하고 있다는 맥락을 제공하기 때문에 중요합니다.”

Realeyes는 또한 글로벌 규모의 프리미엄 게시자에게 양방향 모바일 광고 경험을 제공하는 모바일 디지털 광고 회사 Teads와 함께 사례 연구를 수행했습니다.

Teads는 Realeyes와 협력하여 감정 분류 및 주의 측정을 사용하여 주의 예측 모델을 구축했습니다. 이 모델을 통해 시스템은 기존 광고 소재 또는 콘텐츠를 보고, 강제 노출 테스트에서 해당 광고 소재를 테스트하고, 이러한 광고가 앞으로 누적될 시청 주의를 예측할 수 있습니다.

Kalehoff는 “마케터와 퍼블리셔 모두에게 매우 강력한 인텔리전스입니다. "Teads는 기술 퍼블리셔이며 이 인텔리전스를 직접 사용하여 광고주의 실적과 더 나은 결과를 이끌어내고 있습니다."