自然场景下评估面部连续的效价维和唤醒维

2023-11-04 05:30

本文主要是介绍自然场景下评估面部连续的效价维和唤醒维,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Estimation of continuous valence and arousal levels from faces in naturalistic conditions

论文发表于2021年1月21日

最近几年,研究人员开发了许多基于面部表情的预测情绪的深度神经网络模型。但是,目前的大多数模型仅仅检测几个主要的情绪状态例如生气、开心等,而不是关注更加微妙变化的人类情绪。

离散的情绪类别无法全面的表达人类的日常情绪,心理学家提出情绪效价(情绪的积极程度,或者说对刺激的感兴趣/排斥的程度)和情绪唤醒(情绪表达的激烈程度)。然而,识别人脸情绪的效价维和唤醒维对于人类来说是很容易的,对于计算机来说却是很大的挑战,自然场景下情绪效价和唤醒的评估是一个非常重要的问题。这些评估方式的主观性导致很难获得高质量的训练数据。

最近,三星人人工智能研究院(Samsung AI)联合伦敦帝国理工学院(Imperial College London)在《自然机器智能》期刊发表了一篇名为《自然状态下人脸连续性效价和唤醒水平估计》的论文,创新的提出一种深度神经网络框架来高准确率地分析自然场景下面部情感。本文提出的网络,同时集成了面部矫正并联合情绪分类和连续情绪的评估,使得该模型非常适合于实时应用。

模型效果:

连续状态下,模型能够精准识别面部情绪。

蓝色条表示愤怒程度。红色条表示激烈程度。

8种面部表情实时追踪,你的喜怒哀乐全被AI看穿了

黄色条表示悲伤程度。

8种面部表情实时追踪,你的喜怒哀乐全被AI看穿了

8种面部表情实时追踪,你的喜怒哀乐全被AI看穿了

 

本文使用数据集:

AFEW-VA (https://ibug.doc.ic.ac.uk/resources/afew-va-database/)

AffectNet (http://mohammadmahoor.com/affectnet/)

SEWA (https://db.sewaproject.eu/) 

本论文开源代码:

 https://github.com/face-analysis/emonet

开源协议: Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International Licence (CC BY-NC-ND)

 

 

 

这篇关于自然场景下评估面部连续的效价维和唤醒维的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/343577

相关文章

Android kotlin中 Channel 和 Flow 的区别和选择使用场景分析

《Androidkotlin中Channel和Flow的区别和选择使用场景分析》Kotlin协程中,Flow是冷数据流,按需触发,适合响应式数据处理;Channel是热数据流,持续发送,支持... 目录一、基本概念界定FlowChannel二、核心特性对比数据生产触发条件生产与消费的关系背压处理机制生命周期

MyBatis-Plus 中 nested() 与 and() 方法详解(最佳实践场景)

《MyBatis-Plus中nested()与and()方法详解(最佳实践场景)》在MyBatis-Plus的条件构造器中,nested()和and()都是用于构建复杂查询条件的关键方法,但... 目录MyBATis-Plus 中nested()与and()方法详解一、核心区别对比二、方法详解1.and()

ModelMapper基本使用和常见场景示例详解

《ModelMapper基本使用和常见场景示例详解》ModelMapper是Java对象映射库,支持自动映射、自定义规则、集合转换及高级配置(如匹配策略、转换器),可集成SpringBoot,减少样板... 目录1. 添加依赖2. 基本用法示例:简单对象映射3. 自定义映射规则4. 集合映射5. 高级配置匹

python中Hash使用场景分析

《python中Hash使用场景分析》Python的hash()函数用于获取对象哈希值,常用于字典和集合,不可变类型可哈希,可变类型不可,常见算法包括除法、乘法、平方取中和随机数哈希,各有优缺点,需根... 目录python中的 Hash除法哈希算法乘法哈希算法平方取中法随机数哈希算法小结在Python中,

Python主动抛出异常的各种用法和场景分析

《Python主动抛出异常的各种用法和场景分析》在Python中,我们不仅可以捕获和处理异常,还可以主动抛出异常,也就是以类的方式自定义错误的类型和提示信息,这在编程中非常有用,下面我将详细解释主动抛... 目录一、为什么要主动抛出异常?二、基本语法:raise关键字基本示例三、raise的多种用法1. 抛

Spring组件实例化扩展点之InstantiationAwareBeanPostProcessor使用场景解析

《Spring组件实例化扩展点之InstantiationAwareBeanPostProcessor使用场景解析》InstantiationAwareBeanPostProcessor是Spring... 目录一、什么是InstantiationAwareBeanPostProcessor?二、核心方法解

Java 枚举的基本使用方法及实际使用场景

《Java枚举的基本使用方法及实际使用场景》枚举是Java中一种特殊的类,用于定义一组固定的常量,枚举类型提供了更好的类型安全性和可读性,适用于需要定义一组有限且固定的值的场景,本文给大家介绍Jav... 目录一、什么是枚举?二、枚举的基本使用方法定义枚举三、实际使用场景代替常量状态机四、更多用法1.实现接

java -jar命令运行 jar包时运行外部依赖jar包的场景分析

《java-jar命令运行jar包时运行外部依赖jar包的场景分析》:本文主要介绍java-jar命令运行jar包时运行外部依赖jar包的场景分析,本文给大家介绍的非常详细,对大家的学习或工作... 目录Java -jar命令运行 jar包时如何运行外部依赖jar包场景:解决:方法一、启动参数添加: -Xb

C/C++ chrono简单使用场景示例详解

《C/C++chrono简单使用场景示例详解》:本文主要介绍C/C++chrono简单使用场景示例详解,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友... 目录chrono使用场景举例1 输出格式化字符串chrono使用场景China编程举例1 输出格式化字符串示

Java集成Onlyoffice的示例代码及场景分析

《Java集成Onlyoffice的示例代码及场景分析》:本文主要介绍Java集成Onlyoffice的示例代码及场景分析,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要... 需求场景:实现文档的在线编辑,团队协作总结:两个接口 + 前端页面 + 配置项接口1:一个接口,将o