GPT-3中国

OpenAI在推出GPT-3后,分享过一个AI大模型的「伸缩法则」,简单说就是算法参数越大,数据量越高,AI大模型的效果就越好,但他们当时认为算法参数才是重点。

随着谷歌也加入到研究中,大家发现,数据才是更关键的部分,参数规模如何与数据规模匹配,数据质量的高低,对结果都有显著影响。

这也就是说,中国chatGPT的开发既要解决算法上的问题,还要积累一个与超大规模算法匹配的优质数据库,前者靠聪明的大脑或许能加速不少,但后者就是实打实的苦功夫,会成为不少AI企业面对的最大难点。

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

友情链接更多精彩内容