基于Transformer和重要词识别的句子融合方法

谭红叶; 李飞艳

首页> 中文期刊> 《计算机应用与软件》 >基于Transformer和重要词识别的句子融合方法

基于Transformer和重要词识别的句子融合方法

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

句子融合是为多个句子生成言简意赅、符合语法的句子,可应用到自动摘要、复述生成等自然语言处理任务。目前句子融合方法已取得一定成效,但还存在重要信息缺失、语义偏离原句等问题。该文提出基于Transformer和重要词识别的方法来缓解上述问题。该方法包括两个模块,(1)重要词识别模块:利用序列标注模型识别原句重要词;(2)句子融合模块:将重要词与原句输入到Transformer框架并利用BERT进行语义表示,然后在全连接层引入基于原句和词表获得的向量作为先验知识进行句子融合。基于NLPCC2017摘要任务集构建句子融合数据集,并进行相关实验,结果表明所提方法的性能明显优于基线系统。

著录项

来源
《计算机应用与软件》 |2023年第7期|145-150|共6页
作者
谭红叶; 李飞艳;
展开▼
作者单位

山西大学计算机与信息技术学院;

山西大学计算智能与中文信息处理教育部重点实验室;

展开▼
原文格式 PDF
正文语种 chi
中图分类计算技术、计算机技术;
关键词
句子融合; 重要词; TRANSFORMER; 文本生成;

相似文献

中文文献
外文文献
专利

1. 基于Transformer与技术词信息的知识产权实体识别方法 [J] . 王宇晖 ,杜军平 ,邵蓥侠 . 智能系统学报 . 2023,第1期
2. 基于Transformer编码器的多级表示与融合特征输入的语音情感识别方法 [J] . 贺正然 ,沈起帆 ,吴佳欣 . 东南大学学报:英文版 . 2023,第1期
3. 基于角度引导Transformer融合网络的多站协同目标识别方法 [J] . 郭帅 ,陈婷 ,王鹏辉 . 雷达学报 . 2023,第期
4. 一种融合Transformer和CNN的印刷体数学表达式图像识别方法 [J] . 尹锋 ,朱跃生 ,周昭坤 . 电子技术与软件工程 . 2022,第4期
5. 浅层卷积神经网络融合Transformer的金属缺陷图像识别方法 [J] . 唐东林 ,杨洲 ,程衡 . 中国机械工程 . 2022,第19期
6. 基于神经网络的唤醒词识别方法 [C] . LIU Ke-nan ,刘克楠 ,HOU Jian . 中国计算机用户协会网络应用分会2020年第二十四届网络新技术与应用年会 . 2020

基于Transformer和重要词识别的句子融合方法

摘要

著录项

相似文献

相关主题

期刊订阅