感情的なAIプラットフォームは、COVID-19により笑顔が32％減少していることを明らかにしています

ロンドンに本社を置くRealeyesは、AIと機械学習を使用して人間の行動と表現に関する洞察を得る、視線追跡と感情測定のプラットフォームです。 クライアントには、Buzzfeed、Coca-Cola、Conde Nast、eBay、Mars、PublicisGroupeなどがあります。

Realeyesは、正面カメラ、コンピュータービジョン、機械学習テクノロジーを使用して、オプトインした視聴者がビデオコンテンツを視聴する際の注意と感情を検出します。

ClickZは最近、Realeyesのマーケティングおよび成長担当副社長であるMax Kalehoffと話をし、同社の革新的なテクノロジーと、マーケターやパブリッシャーにもたらす機能について話し合いました。

デジタル測定の背景

Kalehoffは、2017年のSustainable Brands ConferenceでRealeyesのCEOとパネルプレゼンテーションを共同で主導した後、Realeyesについて学びました。彼はこの11月に同社で働き始めました。

Kalehoffは、早い段階でcomScoreに買収されたMedia Metrixなど、マーケティングにおける分析と新しいインテリジェンスに焦点を当てた新興企業でキャリアをスタートさせました。

彼は、ニールセンに買収されてニールセンデジタルとなったBuzzMetricsの創設管理チームの一員でした。 Kalehoffは、検索テクノロジー企業であるClickableの創設管理チームにも所属していました。

「私はマーケティングスペースに非常に情熱を注いでいます」とKalehoff氏は言います。「特に、すべてを機能させるための接着剤である分析は興味深いと思います。」

Kalehoffは、分析に欠けていたものの大きな部分が注意を測定するという概念であることを認識しました。 彼は2006年にAdvertisingResearch Foundation（ARF）でブログを開始しました。これは、注目とエンゲージメントを比較した最初のマーケティングブログの1つです。

「注意は、未知の大きなチャンスだと思います」とカレホフは説明します。 「Realeyesは、感情AIとコンピュータービジョンを適用して、特にビデオやインタラクティブスペースで注意を理解するのに役立つことで、注意の測定に新鮮な視点をもたらします。」

感情測定の背後にあるAIテクノロジー

Realeyesは、ラップトップ、携帯電話、タブレットなどのデバイスで前面カメラを使用します。 Realeyesは、ユーザーの許可を得て、ユーザーの顔に基本座標を適用する軽量アルゴリズムを有効にし、システムはこれらの座標を使用して顔の手がかりを測定します。

カレホフの顔をマッピングするRealeyesのシステムの例

Realeyesシステムは、幸福、混乱、軽蔑、嫌悪感、共感、恐れ、驚きなどの主要な感情を検出できます。

このテクノロジーは、1970年代と80年代にポールエクマンによって開拓された心理学の一分野に基づいています。 エクマンは、心理学者が誰かの顔の受動的観察を使用して感情を検出するために使用する手法である顔のコーディングを作成しました。

カレホフは言います。「それは確立された心理学の学校です。 訓練を受けた心理学者と人間のアノテーターを使用して、ビデオやミームなどのメディアやデジタルで発生するその他の体験を確認します。 これらの人間のユーザーに、特定の時点でどのような感情が起こっているかをタグ付けしてもらいます。 時間が経つにつれて、機械は感情を理解することを学び、非常に正確になります。」

約1年前、Realeyesは、テクノロジーの根本的な進歩として、注意の監視を開拓しました。 注意の監視は、ユーザーが見ているコンテンツに対するユーザーの関与を測定し、ユーザーが受けている刺激との相互作用に基づいて、さまざまなレベルの強度を適用します。

ユーザーの注意散漫のレベルに基づいて、注意を強化または低下させることができます—目をそらしたり、何かを飲んだり、ガムを噛んだりしていますか？

「マーケティングと広告では、基本的な要素は注意です」とカレホフは説明します。 「それは人々が売買するものです。 あなたが出版社なら、あなたは注目を集めています。 あなたがマーケターまたはメディアバイヤーであるなら、あなたは注目を集めています。」

Realeyesは、Nielsen、Kantar、Ipsosが使用しているものと同じパネルレスポンダープラットフォームを使用しています。 マーケターは、R​​ealeyes Webサイトにビデオをアップロードして、Realeyesのソフトウェアをデバイスに統合したパネルレスポンダーが視聴できます。

「私たちは強制露出ビデオを配信し、パネリストは同意プロセスを経て、カメラをオンにすること、私たちが行っていることの目的、そして広告に対する彼らの反応を理解しようとしていることを理解します。およびその他のメディア。」

感情的なAIをマーケティングに適用する

今日、Realeyesは感情的なAIテクノロジーを使用して、マーケターの注意力の測定を支援しています。 広告クリエイティブの注目度を理解することで、マーケターは、どのコンテンツまたはどのクリエイティブが市場に出たときに最も注目を集めるかを予測できます。

感情分類子を使用すると、システムは、クリエイティブが市場に参入したり、有料メディアにプッシュされる前に、クリエイティブが受ける注目のレベルについて予測を行うことができます。

「これは、感情検出の精度の向上による非常に直接的なメリットです」とKalehoff氏は言います。 「もう1つの重要な利点は、新しい分類子を使用してトレーニングセットを進化させ、世界の大部分を占めるアジアの人々の感情を正確に検出できることです。 関連性があり、アジア諸国を含む他の国でテクノロジーを適用する能力を持つことは、感情分類器の進歩の大きな部分です。」

今後、Realeyesは感情AIをライブ体験に取り入れています。 彼らは、さまざまな主要なビデオプラットフォームおよびゲーム会社とのベータ製品を持っており、ライブのアプリ内ストリーミング、ゲーム、およびモバイルエクスペリエンスで注意検出を使用しています。

Kalehoff氏は、次のように述べています。「実際の顔のコーディングを通じてユーザーの注意を理解できるお気に入りのビデオプラットフォームを考えたり、ユーザーがビデオゲームの有名人Ninjaのストリーミングに注意を向けているかどうかを理解できるゲームストリーミング会社であるかどうかを想像してみてください。それとも、別のウィンドウで行っているゲームに集中しているのでしょうか？」

Realeyesの分類子を使用すると、注意を使用して広告クリエイティブの結果を予測できます。 感情分類子を使用すると、ユーザーは新しい市場や文化に参入できます。 このテクノロジーの未来は、ライブ体験の測定にあります。

笑顔で成功を測定する

Realeyesは最近、規範の監視に焦点を当てたケーススタディを発表しました。 カレホフは説明します。

「COVID-19が定着したので、私たちは消費者がビデオを見ているときの「笑顔のシェア」または幸福について分析しました」とカレホフは言います。 「COVID-19の経験の結果、笑顔が32％減少したことがわかりました。 笑顔の減少は、旅行、ホスピタリティ、家電、高級品などの特定の業界によって推進されました。 これは、消費者の感情が変化しており、おそらく大規模であるというコンテキストを提供するため、重要です。」

Realeyesはまた、モバイルデジタル広告会社Teadsとのケーススタディを行いました。これは、世界規模でプレミアムパブリッシャー全体にインタラクティブなモバイル広告体験を提供します。

TeadsはRealeyesと協力して、感情分類と注意測定を使用して、注意予測モデルを構築しました。 このモデルにより、システムは既存のクリエイティブまたはコンテンツを確認し、そのクリエイティブを強制露出テストでテストし、それらの広告が将来発生することを確認する際の注意を予測できます。

「これは、マーケティング担当者とパブリッシャーの両方にとって非常に強力なインテリジェンスです」とKalehoff氏は言います。 「Teadsはテクノロジーパブリッシャーであり、このインテリジェンスを直接使用して、広告主のパフォーマンスとより良い結果を推進しています。」