自然语言处理预训练模型的研究综述

上传：qq_45867 浏览： 35 推荐： 0 文件：PDF 大小：688.93KB 上传时间：2020-12-20 10:54:24 版权申诉

近年来,深度学习技术被广泛应用于各个领域,基于深度学习的预处理模型将自然语言处理带入一个新时代。预训练模型的目标是如何使预训练好的模型处于良好的初始状态,在下游任务中达到更好的性能表现。