自然语言模型的发展历史

自然语言模型的发展，画成思维导图的方式，如下图，仅供参考
从上个世纪的统计语言模型，到RNN，Word2vec，glove，之后出现transformer，语言模型的发展前进了一大步，出现了BERT，GPT-2，T5，BART等语言模型。每个模型的优缺点即对应的论文如下：