Please enable JavaScript.
Coggle requires JavaScript to display documents.
预训练语言模型 (BERT系列 (引入多任务 (MTDNN, ERNIE2.0, GPT2), 改进生成任务 (MASS, UNILM), 引入知识…
预训练语言模型
BERT系列
改进生成任务
MASS
UNILM
引入知识
ERINE1.0
ERINE(THU)
引入多任务
MTDNN
ERNIE2.0
GPT2
精细调参
RoBERTa
跨语言
XLM
CamemBERT
模型压缩
DistilBERT
ALBERT
多模态
MMBT
自回归标准LM
ELMO
ULMFiT
GPT
最新应用
帮用户文档和邮件进行摘要化处理
微软的Turing-NLG
常识推理
开放域聊天机器人
谷歌的Meena
自回归+BERT
Transformer-XL
XLNet
Text2Text
T5