基于TRANSFORMER的生成式通用人工智能(AIGC WITH TRANSFORMER)

生成式通用人工智能的主要推动力

transformer

transformer在长序列文本数据模式提取和海量数据处理方面碾压RNN

预训练模型

预训练模型成功的应用到NLP领域