钛媒体App 11月22日消息,微软CEO纳德拉近日举行的微软 Ignite 2024大会上就Scaling Law当前面临的争议做出回应。他认为,现在讨论Scaling Law(缩放定律),跟之前讨论摩尔定律是一样的。摩尔定律之下,计算性能每18个月翻倍,有了人工智能,AI计算性能每六个月左右翻一番。过去几周里关于Scaling Law有很多争论,比如Scaling Law的极限是否已被触及,模型的性能还会随着参数的增长继续吗?需要记住的是,无论是摩尔定律还是Scaling Law,他们都不是物理定律,而只是经验观察。就像我们怀疑摩尔定律那样,对Scaling Law有一些怀疑和争论是好事,这会激励、推动模型架构、数据体系甚至系统架构方面的创新。