计算机工程与应用››2021,第57卷››问题(6): 101-107.DOI(操作界面):10.3778/j.issn.1002-8331.1912-0196

模式识别与人工智能 • 上一篇   下一篇

基于位置感知能力胶囊网络的实体关系提取

刘博闻,范春晓  

  1. 北京邮电大学 电子工程学院,北京 100876
  • 出版日期:2021-03-15 发布日期:2021-03-12

基于位置感知的CapsuleNet关系提取

刘伯温、范春晓  

  1. 北京邮电大学电子工程学院,北京100876
  • 在线:2021-03-15 出版:2021-03-12

摘要:

目前实体关系提取大都使用卷积神经网络(美国有线电视新闻网)和循环神经网络(RNN)国家和地区均以标量形式进行特征表达,对位置信息的敏感度不够理想。同时,CNN和RNN(最大池)导致特征信息丢失。针对这两个问题,引入胶囊网络(CapsuleNet)构建了具备位置感知能力的位置感知CapsuleNet(PPCNet)胶囊(胶囊)是一组神经元,特征表达基于向量形式。PPC网将词间的位置关系转化为位置向量(位置嵌入)胶囊以获得位置感知能力。此外,PPCNet(动态路由)替代池化,以减少特征损失,在2010年第二学期任务82.84%

关键词: 自然语言处理, 实体关系提取, 胶囊网络(CapsuleNet), 位置感知能力, PPC网

摘要:

目前的关系提取方法大多采用卷积神经网络(CNN)和递归神经网络(RNN)方法。然而,CNN和RNN都以标量形式表达其特征,这导致它们对位置信息的敏感性较差。此外,CNN和RNN的最大池会导致特征信息的丢失。针对这两个问题,构建了位置感知CapsuleNet(PPCNet)。胶囊是一组神经元,其特征表达基于向量形式。PPCNet将单词之间的位置关系转换为位置嵌入,并将其集成到胶囊中,以获得位置感知能力。此外,PPCNet使用动态路由而不是池来减少特征丢失,并在SemEval-2010task8数据集上获得82.84%的F1值。

关键词: 自然语言处理(NLP), 关系提取, CapsuleNet、, 位置感知, 位置感知CapsuleNet(PPCNet)