首页> 中国专利> 一种面向跨语言对话理解的模型预训练系统

一种面向跨语言对话理解的模型预训练系统

页面导航

摘要
著录项
法律信息
相似文献

摘要

一种面向跨语言对话理解的模型预训练系统，本发明涉及面向跨语言对话理解的模型预训练系统。本发明的目的是为了解决现有跨语言对话理解场景下由于小语种语料稀缺而导致模型训练效果有限，无法获得准确的对话理解系统，对用户话语无法完成准确的回复的问题。一种面向跨语言对话理解的模型预训练系统包括：数据采集模块、对话领域标签整理合并模块、训练语料整理模块、目标语种确定模块、静态词典确定模块、单词替换模块、编码模块、单词替换预测模块、样本所属对话领域预测模块、整体模型获取模块、训练模块和跨语言对话理解领域下游任务精调模块。本发明用于跨语言对话理解领域。

著录项

公开/公告号CN113312453A

专利类型发明专利
公开/公告日2021-08-27

原文格式PDF
申请/专利权人哈尔滨工业大学;
展开▼

申请/专利号CN202110667409.9
发明设计人车万翔;李祺欣;覃立波;刘挺;
展开▼

申请日2021-06-16
分类号G06F16/33(20190101);G06F16/332(20190101);G06F16/35(20190101);G06F40/58(20200101);
代理机构23213 哈尔滨华夏松花江知识产权代理有限公司;
代理人岳昕
地址 150001 黑龙江省哈尔滨市南岗区西大直街92号
入库时间 2023-06-19 12:22:51

法律信息

法律状态公告日

法律状态信息

法律状态
2022-09-23

授权

发明专利权授予

相似文献

专利
中文文献
外文文献

1. 一种面向跨语言对话理解的模型预训练系统 [P] . 中国专利： CN113312453A . 2021-08-27
2. 基于无监督对话预训练的对话理解与答案配置方法及系统 [P] . 中国专利： CN113032545A . 2021-06-25
3. CONVERSATIONAL INTELLIGENCE ACQUISITION METHOD FOR INTELLIGENTLY PERFORMING CONVERSATION BASED ON TRAINING ON LARGE-SCALE PRE-TRAINED MODEL [P] . KR102280489B1 . 2021-07-22

机译：基于大规模预训练模型训练智能执行对话的会话智能采集方法
4. Systems and methods for automatically configuring training data for training machine learning models of a machine learning-based dialogue system including seeding training samples or curating a corpus of training data based on instances of training data identified as anomalous [P] . 美国专利： US10679150B1 . 2020-06-09

机译：用于自动配置用于训练基于机器学习的对话系统的机器学习模型的训练数据的系统和方法，该系统和方法包括基于被识别为异常的训练数据的实例来播种训练样本或策划训练数据的语料库
5. SYSTEMS AND METHODS FOR AUTOMATICALLY CONFIGURING TRAINING DATA FOR TRAINING MACHINE LEARNING MODELS OF A MACHINE LEARNING-BASED DIALOGUE SYSTEM INCLUDING SEEDING TRAINING SAMPLES OR CURATING A CORPUS OF TRAINING DATA BASED ON INSTANCES OF TRAINING DATA IDENTIFIEDAS ANOMALOUS [P] . 美国专利： US2020193331A1 . 2020-06-18

机译：用于自动配置基于机器学习的对话系统的训练机器学习模型的训练数据的系统和方法，包括基于异常的训练数据标识的实例的训练样本或创建训练数据的语料库