labvanced logoLabVanced
  • Research
    • Publications
    • Researcher Interviews
    • Use Cases
      • Developmental Psychology
      • Linguistics
      • Clinical & Digital Health
      • Educational Psychology
      • Cognitive & Neuro
      • Social & Personality
      • Arts Research
      • Sports & Movement
      • Marketing & Consumer Behavior
      • Economics
      • HCI / UX
      • Commercial / Industry Use
    • Labvanced Blog
    • Services
  • Technology
    • Feature Overview
    • Code-Free Study Building
    • Eye Tracking
    • Mouse Tracking
    • Generative AI Integration
    • Multi User Studies
    • More ...
      • Reaction Time/Precise Timing
      • Text Transcription
      • Heart Rate Detection (rPPG)
      • Emotion Detection
      • Questionnaires/Surveys
      • Experimental Control
      • Data Privacy & Security
      • Desktop App
      • Mobile App
  • Learn
    • Guide
    • Videos
    • Walkthroughs
    • FAQ
    • Release Notes
    • Documents
    • Classroom
  • Experiments
    • Cognitive Tests
    • Sample Studies
    • Public Experiment Library
  • Pricing
    • Licenses
    • Top-Up Recordings
    • Subject Recruitment
    • Study Building
    • Dedicated Support
    • Checkout
  • About
    • About Us
    • Contact
    • Downloads
    • Careers
    • Impressum
    • Disclaimer
    • Privacy & Security
    • Terms & Conditions
    • Third-Party Licenses
  • Appgo to app icon
  • Logingo to app icon
Learn
指南
视频
步骤说明
常见问题解答
通讯档案
文档
课堂
  • 中國人
  • Deutsch
  • Français
  • Español
  • English
  • 日本語
指南
视频
步骤说明
常见问题解答
通讯档案
文档
课堂
  • 中國人
  • Deutsch
  • Français
  • Español
  • English
  • 日本語
  • 指南
    • 开始使用

      • 任务编辑器
      • 框架
        • 画布框架
        • 页面框架
        • 网站框架
      • 试验时间线
      • 刺激呈现
      • 响应的正确性
      • 对象
      • 事件
      • 变量
      • 任务向导
      • 试验系统
      • 实验设计
        • 创建研究
        • 数据框模式
        • 多用户实验设计
    • 特色主题

      • 随机化与平衡
      • 眼动追踪
        • 在眼动追踪任务中呈现刺激
        • 如何选择眼动追踪校准设置
        • 在任务中设置眼动追踪
        • 记录和导出注视数据
        • 使用形状作为眼动追踪的兴趣区域 (AOI)
        • 参与者校准体验
      • 网络桥接
        • 选择网站 AOI | 锚定、调整和验证 AOI 跟踪
        • 在网站 AOI 上跟踪鼠标行为 | Web Bridge 指南
      • 问卷调查
      • 桌面应用
      • 示例研究
      • 参与者招募
      • API访问
        • REST API
        • Webhook API
        • WebSocket API
      • 其他主题

        • 精确刺激时间
        • 多用户研究
        • Labvanced中的头部追踪 | 指南
    • 主应用标签

      • 概述:主标签
      • 仪表盘
      • 我的研究
      • 共享研究
      • 我的文件
      • 实验库
      • 我的账户
      • 许可证与服务
    • 研究标签

      • 概述:研究特定标签
      • 研究设计
        • 任务
        • 阻塞
        • 会议
        • 组
      • 任务编辑器
        • 任务控制
        • 试验系统
        • 框架类型
        • 对象
        • 对象属性表
        • 变量
        • 系统变量表
        • 事件系统
        • 文本编辑器功能
        • 任务编辑器中的眼动追踪选项
        • 任务中的头部追踪
        • 多用户研究
      • 设置
      • 变量
      • 媒体
      • 文本与翻译
      • 启动与参与
      • 受试者管理
      • 数据视图与导出
        • 数据视图和变量 & 任务选择(旧版本)
        • 访问录音(旧版本)
  • 视频
    • 视频概述
    • 在 Labvanced 中开始使用
    • 创建任务
    • 元素视频
    • 事件与变量
    • 高级主题
  • 教程
    • 介绍
    • 斯特鲁普任务
    • 词汇决策任务
    • 波斯纳凝视提示任务
    • 改变盲区闪烁范式
    • 眼动追踪示例研究
    • 婴儿眼动追踪研究
    • 带鼠标追踪的注意力捕获研究
    • 快速序列视觉呈现
    • ChatGPT 研究
    • 眼动追踪演示:SVG 作为 AOI
    • 多用户演示:显示参与者光标
    • 游戏手柄/操纵杆控制器 - 基本设置
    • 与 EEG 集成的桌面应用研究
    • 受试者组平衡和变量设置
    • 构建多用户研究
    • 网站框架眼动追踪教程
    • 条件性网络摄像头眼动追踪
  • 常见问题
    • 功能
    • 支持政策与指南
    • 安全与数据隐私
    • 许可证
    • Labvanced 的精确度
    • 程序化使用与 API
    • 离线使用 Labvanced
    • 故障排除
    • 研究创建问题
  • 新闻通讯档案
  • 文档
  • 课堂
情感检测触发器在Labvanced中根据参与者检测到的情感状态触发

情感检测触发器

目录

  • 概述
  • 记录情感检测数据
  • 启用情感检测
  • 特定于触发器的值
  • 实际示例

概述

Labvanced中的情感检测触发器用于在检测到参与者的情感状态时自动启动事件或记录响应。这是Labvanced的情感检测的关键组成部分,允许研究人员将刺激呈现或任务变化直接与实时情感反应联系起来,使实验更具动态性,并能够更精确地测量情感如何影响行为、注意力或决策。

Note: 所有处理都发生在客户端,确保符合GDPR,并保证没有面部数据被传输或存储到外部。

Labvanced中的情感检测触发器菜单。

从事件的触发器菜单定位情感检测触发器。

记录情感检测数据

选择触发器并为操作命名后,将出现一个对话框,提示您设置相关事件以记录情感检测的数据:

在Labvanced中自动创建用于记录情感检测的事件。

选择情感检测触发器后,会出现一个提示,设置事件以记录与情感相关的分数和时间戳。注意:请参见下面的数据表图像,以预览此事件记录的数据。

由于自动创建此事件,将创建以下操作(如下图所示)。变量名称emotion_Emotion Detection被分配,并且触发器特定值[All Emotions, Valence, Arousal, T]数组被指定为在数据收集过程中要记录的值。

从这里,变量名称可以通过Variables面板进一步编辑,触发器值也可以被重新分配为不同的值。请参见下面的Value-select Menu以获取更多选项。

在Labvanced中用于情感检测的触发器生成的自动事件。

自动生成的事件,用于记录创建事件提示的情感检测结果,如上图所示。

预览在Labvanced中收集的情感检测数据

下面是一个示例,记录了在Labvanced中激活上述事件所产生的数据:

信息图显示在Labvanced中进行面部表情分析时收集的情感标签、置信度分数和时间戳.

使用[所有情感, 价值, 唤醒, T]触发器特定值收集的数据预览。

启用 / 激活情感检测

为了使情感检测触发器正常工作,必须在Task Controls和Settings下激活和启用相关设置,如下所述。

研究设置 - 启用情感检测

在Settings选项卡中,导航至Physiology → Emotion Detection并勾选复选框,以激活研究中的情感检测。

任务设置 - 启用情感检测

在Task Controls节下的Task Editor中,导航至Physiological Signals选项卡并点击复选框,以使情感检测在特定任务中有效。

通过点击复选框激活情感检测后,将出现一个对话框,提示您指示是否应该创建用于记录情感检测数据值的事件,以及记录应发生在哪一帧上:

通过任务控制创建记录情感检测数据的事件

在生理信号下通过任务控制,也可以自动生成情感检测的数据记录,并指定数据记录应具体发生在哪一帧上。

特定于触发器的值

选择Emotion Detection Trigger后,在Value-Select Menu中可以使用以下选项。

通过变量选择菜单在Labvanced中访问触发器特定菜单

通过值选择菜单访问情感检测触发器的特定值。

值描述
Max Emotion检测到的最大情感。字符串值,其可用参数包括:angry,contempt,disgust,fear,happy,neutral,sad,surprise。
Max Emotion Score检测到的Max Emotion的分数。
Valence Score价值检测的数值分数。
Arousal Score检测到的唤醒的数值分数。
Camera Capture Time T基于图像快照(即相机捕获)发生时的调整时间戳值,这在进行情感检测计算时是必需的。

**注意:**触发器时间戳是触发器启动的时间,但算法需要几毫秒来捕获图像帧并处理情感分数。因此,Camera Capture Time T值是更准确的时间戳。
[Max Emotion, Score, T] Array一个数组,包含以下值:最大情感(字符串标签)分数(数字),相机捕获T(Unix时间)。
[Valence, Arousal, T] Array一个数组,包含以下值:价值(数字),唤醒(数字),相机捕获T(Unix时间)。
[All Emotions, T] Array记录8种情感的分数和相机捕获T(Unix时间)。

请参阅上面数据记录部分图像预览中前8列和最后一列以获取使用此特定值收集的数据的概念。

注意:All Emotions下的8种情感的值彼此相关,因为所有8种情感的分数总和为1。
[All Emotions, Valence, Arousal, T] Array记录所有8种情感、价值、唤醒和相机捕获T(Unix时间)的数值分数。

请参阅上面的图像预览中使用此特定值收集的数据的概念。

注意:All Emotions下的8种情感的值彼此相关,因为所有8种情感的分数总和为1。
Trigger Timestamp (Unixtime)触发器时间戳的UNIX时间。

**注意:**请参阅相机捕获T值,因为这是发生情感检测时的更准确值,如上所述。
Trigger Time (From Frame Onset)触发器从帧开始/开始发生的时间(以毫秒为单位)。

包含情感检测触发器的实际示例

根据情感状态控制实验进程

在此示例中,Delayed Action包含一个Requirement Action (If...Then),以指定在延迟2000毫秒后,如果Max Emotion等于sad,则进展到Jump To特定任务。

Labvanced中使用的情感检测触发器。

使用情感检测参数最大情感在事件中控制任务进度的示例。

实时情感检测

情感检测演示

一系列图像被呈现,参与者被要求模仿表情。报告参与者表情中检测到的最高情感,以及价值和唤醒值。