-
-
开源精选
【编者按】四个参数画大象,新葡京DT:五个参数鼻子晃 著名实验和理论物理学家、诺奖得主费米曾经这样引用冯诺依曼的话:“四个参数,我就能拟合出一个大象出来,用五个参数我就能让他的鼻子摆动”。看似是个玩笑,实际上真的有一篇论文研究绘制大象,只是时间是在2010年。机器学习当中,参数越多,理论上的精度越高(也极易产生过拟合),当然需要的算力也更多,GPT-3 使用了惊人的 1750 亿参数,堪称史上最大 AI 模型,没想到这才多久,Google Brain 团队就搞了一个大新闻,他们使用了1.6万亿参数推出了语言模型 Sw.