{“状态”：“确定”，“消息类型”：“工作”，“信息版本”：“1.0.0”，“邮件”：{“索引”：{“日期部分”：[[2024,7,6]]，“日期时间”：“2024-07-06T05:55:00Z”，“时间戳”：1720245300394}，“引用计数”：0，“发布者”：“人工智能发展协会（AAAI）”，“问题”：“01”，“许可证”：[{“开始”：}“日期部分“：[[2020,4,3]]，“日期-时间”：“2020-04-03T00:00:00Z”，“timestamp”：1585872000000}，“content-version”：“unspecified”，“delay-in-days”：0，“URL”：“https:\\/www.aaai.org”}]，“content-domain”：{“domain”:[]，“crossmark-restriction”：false}，”short-container-title“：[”aaai“]，“abstract”：“用户生成视频中的情感识别在以人为中心的计算中发挥着重要作用。现有的方法主要采用传统的两阶段浅管道，即提取视觉和/或音频特征和训练分类器。本文提出了一种基于卷积神经网络（CNN）的端到端视频情感识别方法。具体而言，我们开发了一种深度视觉音频注意力网络（VAANet），这是一种新的架构，将空间、通道和时间注意力集成到视觉3D CNN中，并将时间注意力集成到音频2D CNN中。此外，我们基于极性运动层次约束设计了一种特殊的分类损失，即极性一致的交叉熵损失，以指导注意力生成。在具有挑战性的VideoEmotion-8和Ekman-6数据集上进行的大量实验表明，所提出的VAANet优于最先进的视频情感识别方法。我们的源代码发布于：https:\/\/github.com/maysonma\/VAANet<\/jats:p>“，”DOI“：”10.1609\/aaai.v34i01.5364“，”type“：”journal-article“，”created“：{”date-parts“：[[2020,6,4]]，”date-time“：”2020-06-04T08:24:01Z“，”timestamp“：1591259041000}，”page“：“]，”前缀“：”10.1609“，“卷”：“34”，“作者”：[{“给定”：“司城”，“家庭”：“赵”，“序列”：“第一”，“从属关系”：[]}，{“给出”：“云生”，“家族”：“马”，“顺序”：“附加”，“隶属关系”：[]}、{“已知”：“阳”，“家人”：“顾”，“次序”：“额外”，“附属关系”：【】}，}“给定的”：“巨峰”，“家”：“杨”，“序号”：“additional”“，”隶属关系“：[]}，{”给定“：”腾飞“，”“家族”：“兴”，“序列”：“附加”，“隶属关系”：[]｝，{“给定”：“鹏飞”，“家族”：“徐”，“序列”：“附加”，“隶属关系”：[]｝，{“给定”：“润博”，“家族”：“胡”，“序列”：“附加”，“隶属关系”：[]｝，{“给定”：“华”，“家族”：“柴”，“序列”：“附加”，“隶属关系”：[]｝，{“给定”：“库尔特”，“家族”：“凯泽”，“序列”：“附加“，”affiliation“：[]}]，”member“：”9382“，”published-online“：{”date-parts“：[2020,4,3]]}，”container-title“：[”AAAI人工智能会议记录“]，”original-title”：[]，”link“：[{”URL“：”https:\/\/ojs.AAAI.org\/index.php\/AAAAI\/article\/download\/5364\/5220“，”content-type“：”application\/pdf“，”content-version“：”vor“，“intended-application“：”text-mining“}，{”URL“：”https:\/\/ojs.aaai.org\/index.php\/aaai\/aarticle\/download\/5364\/5220“，”content-type“：”unspecified“，”content-version“：”vor“，”intended-application”：“similarity-checking”}]，“deposed”：{“date-parts”：[2022,11,3]]，“date-time”：“2022-11-03T23:41:16Z”，“timestamp”：1667518876000}，“分数“：1，”资源“：{”primary“：{”URL“：”https:\/\/ojs.aaai.org\/index.php\/aaai\/article\/view\/5364“}}，”subtitle“：[]，”shorttitle“：[]，”issued“：{date-parts”：[[2020,4,3]]}，“references-count”：0，“journal-issue”：{“issue”：“01”，“published-on-line”：{data-parts“：[2020,6,2]}}”，“URL”：“http://dx.doi.org \/10.10609 \/aaai.v34i01.5364“，”关系“：{}，”ISSN“：[”2374-3468“，”2159-5399“]，“issn-type”：[{“value”：“2374-3468”，“type”:“electronic”}，{“value”：“2159-5399”，“type”：“print”}]，“subject”：[]，“published”：{“date-parts”：[2020,4,3]]}}}