
情感检测触发器
概述
Labvanced中的情感检测触发器用于在检测到参与者的情感状态时自动启动事件或记录响应。这是Labvanced的情感检测的关键组成部分,允许研究人员将刺激呈现或任务变化直接与实时情感反应联系起来,使实验更具动态性,并能够更精确地测量情感如何影响行为、注意力或决策。
Note: 所有处理都发生在客户端,确保符合GDPR,并保证没有面部数据被传输或存储到外部。

记录情感检测数据
选择触发器并为操作命名后,将出现一个对话框,提示您设置相关事件以记录情感检测的数据:

由于自动创建此事件,将创建以下操作(如下图所示)。变量名称emotion_Emotion Detection被分配,并且触发器特定值[All Emotions, Valence, Arousal, T]数组被指定为在数据收集过程中要记录的值。
从这里,变量名称可以通过Variables面板进一步编辑,触发器值也可以被重新分配为不同的值。请参见下面的Value-select Menu以获取更多选项。

预览在Labvanced中收集的情感检测数据
下面是一个示例,记录了在Labvanced中激活上述事件所产生的数据:

启用 / 激活情感检测
为了使情感检测触发器正常工作,必须在Task Controls和Settings下激活和启用相关设置,如下所述。
研究设置 - 启用情感检测
在Settings选项卡中,导航至Physiology → Emotion Detection并勾选复选框,以激活研究中的情感检测。
任务设置 - 启用情感检测
在Task Controls节下的Task Editor中,导航至Physiological Signals选项卡并点击复选框,以使情感检测在特定任务中有效。
通过点击复选框激活情感检测后,将出现一个对话框,提示您指示是否应该创建用于记录情感检测数据值的事件,以及记录应发生在哪一帧上:

特定于触发器的值
选择Emotion Detection Trigger后,在Value-Select Menu中可以使用以下选项。

| 值 | 描述 |
|---|---|
Max Emotion | 检测到的最大情感。字符串值,其可用参数包括:angry,contempt,disgust,fear,happy,neutral,sad,surprise。 |
Max Emotion Score | 检测到的Max Emotion的分数。 |
Valence Score | 价值检测的数值分数。 |
Arousal Score | 检测到的唤醒的数值分数。 |
Camera Capture Time T | 基于图像快照(即相机捕获)发生时的调整时间戳值,这在进行情感检测计算时是必需的。 **注意:**触发器时间戳是触发器启动的时间,但算法需要几毫秒来捕获图像帧并处理情感分数。因此, Camera Capture Time T值是更准确的时间戳。 |
[Max Emotion, Score, T] Array | 一个数组,包含以下值:最大情感(字符串标签)分数(数字),相机捕获T(Unix时间)。 |
[Valence, Arousal, T] Array | 一个数组,包含以下值:价值(数字),唤醒(数字),相机捕获T(Unix时间)。 |
[All Emotions, T] Array | 记录8种情感的分数和相机捕获T(Unix时间)。 请参阅上面数据记录部分图像预览中前8列和最后一列以获取使用此特定值收集的数据的概念。 注意: All Emotions下的8种情感的值彼此相关,因为所有8种情感的分数总和为1。 |
[All Emotions, Valence, Arousal, T] Array | 记录所有8种情感、价值、唤醒和相机捕获T(Unix时间)的数值分数。 请参阅上面的图像预览中使用此特定值收集的数据的概念。 注意: All Emotions下的8种情感的值彼此相关,因为所有8种情感的分数总和为1。 |
Trigger Timestamp (Unixtime) | 触发器时间戳的UNIX时间。 **注意:**请参阅相机捕获T值,因为这是发生情感检测时的更准确值,如上所述。 |
Trigger Time (From Frame Onset) | 触发器从帧开始/开始发生的时间(以毫秒为单位)。 |
包含情感检测触发器的实际示例
根据情感状态控制实验进程
在此示例中,Delayed Action包含一个Requirement Action (If...Then),以指定在延迟2000毫秒后,如果Max Emotion等于sad,则进展到Jump To特定任务。

实时情感检测
一系列图像被呈现,参与者被要求模仿表情。报告参与者表情中检测到的最高情感,以及价值和唤醒值。