自然语言处理中的预训练模型

【文件属性】：
文件名称：自然语言处理中的预训练模型
文件大小：12.75MB
文件格式：PDF
更新时间：2020-11-14 14:49:14
NLP 预训练模型 目前预训练模型在自然语言处理领域取得了广泛的成功。本报告的内容主要涵盖以下4部分内容：1）预训练模型的原理介绍，包括模型结构、学习准则、发展历程等；2）预训练模型的迁移方法：包括如何通过任务转换、多步迁移、改进精调等方法来进一步提高预训练模型在下游任务上的性能。