中国AI模型紧跟美国的原因,蒸馏作用被高管强调
在10月19日,OpenAI战略未来主管Dean W. Ball在X平台回应了一条关于蒸馏的帖子。该帖子由用户Lisam al Gaib发布,他对DeepSeek与Astra在推理风格上的相似性感到好奇,并附上了一张对比表,展示了两者在几种写作风格上的联系。左侧为Astra max,右侧为DeepSeek,比较了省略词、粘连写法、草稿压缩和自述冗长度等四类风格。
Ball表示,蒸馏一直是解释中国AI模型在基准性能上紧跟美国的重要原因。加入OpenAI后,他得出一个新的认知:蒸馏在这个过程中的作用比他之前想象的要大。他在评论区中回答,尽管还未看到OpenAI内部的具体情况,他最初估计蒸馏对中国模型表现的贡献约为30%,但后来觉得这个比例可能接近50%。这两个数字仅是他的个人推测,并不代表OpenAI的官方观点。帖子没有具体提到哪家公司或模型,而对比表中的DeepSeek一侧也没有标明详细版本。