自然语言处理预训练模型专题导读

郑纬民

首页> 中文期刊> 《中兴通讯技术》 >自然语言处理预训练模型专题导读

自然语言处理预训练模型专题导读

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

近年来,预训练语言模型的出现给自然语言处理领域带来了一场变革,成为人工智能技术发展的前沿和热点。大规模预训练可以有效缓解传统技术在特征工程方面面临的压力。通过学习通用语言表示,模型具备了语言理解和生成能力,几乎在所有自然语言处理任务上都取得了突破。因此,各类基准测试任务的效果显著提高,这展示了大规模预训练广阔的应用前景。庞大的参数规模使得模型具备了更强的能力,同时也对模型的构建、训练和应用落地提出了挑战。

著录项

来源
《中兴通讯技术》 |2022年第2期|1-2|共2页
作者
郑纬民;
展开▼
作者单位

清华大学计算机系;

中国工程院;

展开▼
原文格式 PDF
正文语种 chi
中图分类中等教育;
关键词
自然语言处理; 人工智能技术; 通用语言; 基准测试; 语言模型; 生成能力; 语言理解; 预训练;

相似文献

中文文献
外文文献
专利

1. 自然语言处理新范式:基于预训练模型的方法 [J] . 车万翔 ,刘挺 . 中兴通讯技术 . 2022,第2期
2. 面向自然语言处理任务的预训练模型综述 [J] . 刘睿珩 ,叶霞 ,岳增营 . 计算机应用 . 2021,第005期
3. 自然语言处理:基于预训练模型的方法 [J] . . 中文信息学报 . 2021,第007期
4. 自然语言处理预训练模型的研究综述 [J] . 余同瑞 ,金冉 ,韩晓臻 . 计算机工程与应用 . 2020,第023期
5. 自然语言处理中的预训练范式 [J] . 冯志伟 ,李颖 . 外语研究 . 2021,第1期
6. CPLM-CSC:基于单字级别预训练语言模型的中文错别字纠正方法 [C] . Haihua XIE ,谢海华 ,Aolin LI . 第十八届中国计算语言学大会暨中国中文信息学会2019学术年会 . 2018
7. 基于三体训练与预训练模型的事件抽取研究 [A] . 胡圣杰 . 2021

自然语言处理预训练模型专题导读

摘要

著录项

相似文献

相关主题

期刊订阅