[ 导读 ]一直以来,半导体行业有自己的摩尔定律。近期,ChatGPT之父Sam Altman提出了新版摩尔定律,即宇宙中的智能数量每18个月翻一番。
近期,「ChatGPT之父」Sam Altman在社交媒体称,
一个全新的摩尔定律可能很快就会出现,即宇宙中的智能数量每18个月翻一番。
观点一出,直接炸了一波。
就连马库斯坐不住了,向其泼了一盆冷水,直言道,是AI的炒作量每18个月翻一番。
那么,对于Altman提到的宇宙中智能数量,我们该用什么指标来衡量这种增长?
根据现有的研究可以推测,一种拟合的评估方式如下:
运算能力
学术刊物
专利数量
数据存储
新版摩尔定律,也要背靠算力
一直以来,摩尔定律是半导体行业背后奉行的金科玉律:每隔18-24个月,封装在微芯片上的晶体管数量便会增加一倍,芯片的性能也会随之翻一番。
而如今,ChatGPT爆火出圈,是继2016年AlphaGo战胜李世石后,人工智能又一重大进步。
根据「2022年人工智能现状报告」,机器学习中的计算需求加速增长。根据每个模型的训练计算量翻倍的时间,它确定了机器学习的三个时代。
前深度学习时代(2010年前,训练计算量每20个月翻一番),深度学习时代(2010-15年,每6个月翻一番),以及大规模时代(2016年至今,100-1000倍增长,然后每10个月翻一番)。
要知道,ChatGPT的诞生,以及人人能够访问ChatGPT背后离不开的是算力。
在最新的财报会议上,英伟达CEO黄仁勋称,英伟达的GPU在过去的十年里将AI的处理性能提高了100万倍。
摩尔定律在其最好的日子里,可以在十年内实现 100 倍的增长。通过提出新处理器、新系统、新互连、新框架和算法,并与数据科学家、AI研究人员合作开发新模型,在整个跨度中,我们已经使大型语言模型的处理速度提高了一百万倍。