其实是可以预见的事儿,之前就有很多人提到过,Open AI作为2015年才成立的团队,直到2018年,才推出了具有1.7亿个参数的GPT-1模型,其实这个阶段还算是跟在谷歌后面的小弟,多少受到了Transformer模型的影响。
这是一个从 https://www.zhihu.com/question/593943995/answer/2971643036 下的原始话题分离的讨论话题
其实是可以预见的事儿,之前就有很多人提到过,Open AI作为2015年才成立的团队,直到2018年,才推出了具有1.7亿个参数的GPT-1模型,其实这个阶段还算是跟在谷歌后面的小弟,多少受到了Transformer模型的影响。