情感检测触发器
概述
Labvanced中的情感检测触发器用于在检测到参与者的情感状态时自动启动事件或记录反应。这是Labvanced的情感检测的关键组成部分,允许研究人员将刺激呈现或任务变化直接链接到实时情感反应,使实验更加动态,并能够更精确地测量情感如何影响行为、注意力或决策。
注意: 所有处理都发生在客户端,确保符合GDPR并保证不会传输或存储任何面部数据。

从事件的触发器菜单中找到情感检测触发器。
记录情感检测数据
选择触发器并为操作命名后,将出现一个对话框,提示您设置与记录情感检测数据相关的事件:

选择情感检测触发器后,将出现一个提示,设置事件以记录情感相关的分数和时间戳。 注意: 请参阅下面的数据表图像以预览此事件记录的数据。
由于自动创建此事件,以下操作将被创建(如下图所示)。变量名称emotion_Emotion Detection被分配,触发器特定值[所有情感, 情感价值, 激发度, T]数组被指定为在数据收集期间要记录的值。
从这里,变量名称可以通过变量面板进一步编辑,触发器值也可以重新分配为不同的值。请参阅下面的值选择菜单以获取更多选项。

自动生成的事件用于记录情感检测结果,创建事件时提示的步骤,如上图所示。
在Labvanced中收集的情感检测数据预览
以下是一个示例,显示由于在Labvanced的任务中启用上述事件而记录的数据:

使用[所有情感, 情感价值, 激发度, T]触发器特定值收集的数据预览。
启用/激活情感检测
为了使情感检测触发器正常工作,必须在任务控制和设置中激活和启用相关设置,如下所述。
研究设置 - 启用情感检测
在设置选项卡中,导航到生理 → 情感检测,并勾选该复选框以在您的研究中激活情感检测。
任务设置 - 启用情感检测
在任务编辑器的任务控制部分,导航到生理信号选项卡并勾选复选框以使情感检测在特定任务中处于活动状态。
勾选复选框激活情感检测后,将出现一个对话框,提示您指明是否应创建记录情感检测数据值的事件,以及应在哪一帧进行记录:

通过任务控制下的生理信号,还可以自动生成情感检测的数据记录,以及指定数据记录应具体发生的帧。
触发器特定值
选择情感检测触发器后,值选择菜单中提供以下选项。

通过值选择菜单访问情感检测触发器的触发器特定值。
| 值 | 描述 |
|---|---|
最大情感 | 检测到的最大情感。字符串值,具有以下可用参数:生气, 轻蔑, 厌恶, 恐惧, 快乐, 中立, 伤心, 惊讶. |
最大情感分数 | 检测到的最大情感的分数。 |
情感价值分数 | 情感检测的数字分数。 |
激发度分数 | 检测到的激发度的数字分数。 |
相机捕获时间T | 基于发生图像快照(即相机捕获)时的调整时间戳值,这对于执行情感检测计算是必需的。 注意: 虽然触发器时间戳是触发器启动的时间值,但算法需要几毫秒的时间来在本地捕获图像帧并处理情感分数。因此, 相机捕获时间T值是更准确的时间戳。 |
[最大情感, 分数, T] 数组 | 包含以下值的数组:最大情感(字符串标签)分数(数字),相机捕获T(Unix时间)。 |
[情感价值, 激发度, T] 数组 | 包含以下值的数组:情感价值(数字),激发度(数字),相机捕获T(Unix时间)。 |
[所有情感, T] 数组 | 记录所有8种情感及相机捕获T(Unix时间)的分数。 请参考上面数据记录部分中前8列和最后一列的图像预览,以感受使用此触发器特定值收集的数据。 注意: 所有情感下的8种情感的值是相对的,因为所有8种情感的分数加起来总和为1。 |
[所有情感, 情感价值, 激发度, T] 数组 | 记录所有8种情感的数字分数、情感价值、激发度及相机捕获T(Unix时间)。 参考上面数据记录部分中的图像预览,以感受使用此触发器特定值收集的数据。 注意: 所有情感下的8种情感的值是相对的,因为所有8种情感的分数加起来总和为1。 |
触发器时间戳(Unix时间) | 以UNIXTIME形式表示的触发器时间戳。 注意: 请参考相机捕获T值,因为这是情感检测发生时的更准确值,如上所述。 |
触发器时间(从帧起始) | 触发器从帧起始/开始发生的时间(以毫秒为单位)。 |
实际示例
基于情感状态控制实验进度
在这个示例中,延迟动作包含一个需求动作(如果...那么),以指定在延迟2000毫秒后,如果最大情感等于伤心,则跳转到特定任务。

使用情感检测参数最大情感的事件示例,以控制任务进度。
实时情感检测
情感检测演示
一系列图像被呈现,参与者被要求模仿表情。报告参与者表情中检测到的最高情感,以及情感价值和激发度的值。