ACCENT（接受）：开放域对话系统的自动事件常识评估度量

萨里克·加扎里安,邵一嘉,韩如军,Aram Galstyan公司,彭南云

摘要
常识推理在人类通信中无处不在，因此是开放域对话系统的一个重要特征。然而，评估对话系统中的常识仍然是一个公开的挑战。我们迈出第一步，专注于事件常识它考虑事件及其关系，在对话和一般常识推理中都至关重要。我们建议ACCENT（接受），一个由常识性知识库（CSKB）授权的事件常识性评估度量。ACCENT首先从对话中提取事件相关元组，然后根据元组与CSKB的兼容性对其进行评分，从而评估响应。为了评估ACCENT，我们为开放领域对话构建了第一个公共事件常识评估数据集。我们的实验表明，ACCENT是一种有效的事件常识评估指标，与现有基线相比，它与人类判断具有更高的相关性。
选集ID:
2023.acl长241
体积：
计算语言学协会第六十一届年会论文集（第一卷：长篇论文）
月份：
七月
年份：
2023
地址：
加拿大多伦多
编辑：
安娜·罗杰斯,乔丹·博伊德·格雷伯,冈崎直（Naoaki Okazaki）
地点：
国际计算语言学协会
SIG公司：
出版商：
计算语言学协会
注：
页：
4398–4419
语言：
网址：
https://aclantology.org/2023.acl-long.241
内政部：
10.18653/v1/2023.acl长度241
比比键：
引用（ACL）：
萨里克·加扎里安（Sarik Ghazarian）、邵一嘉（Yijia Shao）、韩汝君（Rujun Han）、阿兰·加尔斯蒂安（Aram Galstyan）和彭南云（Nanyun Peng）。2023ACCENT：开放域对话系统的自动事件常识评估度量.英寸计算语言学协会第61届年会论文集（第一卷：长篇论文），第4398–4419页，加拿大多伦多。计算语言学协会。
引用（非正式）：
ACCENT：开放域对话系统的自动事件常识评估度量（Ghazarian等人，ACL 2023）
复制引文：
PDF格式：
https://aclantology.org/2023.acl-long.241.pdf
视频：
 https://aclantology.org/2023.acl-long.241.mp4
PDF格式 引用 搜索 视频