2012年12月初,在美国太浩湖的一家赌场酒店内,一场秘密竞拍正在悄然进行。
太浩湖,位于加州与内华达州的交界处,是北美最大的高山湖泊。湖面如蓝宝石般闪耀,顶级滑雪道吸引了无数游客。这里不仅是电影《教父2》的取景地,还是科技巨头的聚集地,如扎克伯格与拉里·埃里森等人均在此投资建设豪宅,太浩湖因而被誉为“硅谷的后花园”。
此次竞拍的标的,是一家刚成立仅一个月、仅有三名员工的公司——DNNresearch。创始人为多伦多大学教授杰夫·辛顿(Geoffrey Hinton)及其两名学生。尽管公司没有任何实质产品或资产,但其追求者却颇具分量,分别为Google、微软、DeepMind和百度。
辛顿,65岁,满脸疲惫,因腰椎间盘突出而苦恼。他坐在酒店703房间的地板上,设定竞拍规则,起价为1200万美元,竞价单位不得低于100万美元。数小时后,竞标价飙升至4400万美元,辛顿感到有些头晕,最终决定将公司卖给最后出价的买家——Google。
有趣的是,这场4400万美元的竞拍与六个月前的Google有关。
2012年6月,Google研究部门Google Brain公布了“谷歌猫”(The Cat Neurons)项目的研究成果。该项目旨在利用算法识别YouTube视频中的猫,发起人是从斯坦福大学跳槽至Google的吴恩达,他与Google的传奇人物Jeff Dean共同合作,获得了创始人Larry Page的大额预算。谷歌猫项目构建了一个神经网络,下载大量未标记的YouTube视频,让模型自行观察学习,最终实现了74.8%的识别准确率,震惊了整个业界。
吴恩达在项目临近结束时选择退出,转而投入互联网教育项目,并推荐辛顿接替他的职位。面对邀请,辛顿表示他不愿离开大学,只愿在Google“待一个夏天”。由于Google招聘政策的特殊性,辛顿在64岁时成为Google历史上最年长的暑期实习生。
作为深度学习领域的奠基者,辛顿从80年代开始便活跃在人工智能的前沿。他对“谷歌猫”项目的技术细节进行了深入分析,迅速发现了项目的潜在缺陷:“他们运行了错误的神经网络,并采用了不合适的计算资源。”
辛顿认为自己可以做得更好。短暂的“实习期”结束后,他迅速行动,邀请了两名学生——Ilya Sutskever和Alex Krizhevsky,共同创建了一个新型神经网络,并参与了ImageNet图像识别比赛(ILSVRC),最终以惊人的84%识别准确率夺得冠军。
2012年10月,在佛罗伦萨举行的计算机视觉会议上,辛顿团队介绍了其获胜算法AlexNet。相较于谷歌猫使用的16000个CPU,AlexNet仅用4个英伟达GPU,瞬间引发学术界和产业界的轰动。AlexNet的论文被认为是计算机科学史上最具影响力的论文之一,目前被引次数已超过12万,而谷歌猫则迅速被遗忘。
竞拍结束后,另一场更大的竞争随之展开。Google顺势收购了DeepMind,2014年再次巩固了在AI领域的领导地位;DeepMind于2016年推出的AlphaGo震撼全球;相对而言,输给Google的百度则加大了在AI领域的投入,十年间投入千亿,并邀请吴恩达加入。余凯则于几年后离职,创办了地平线。
微软看似行动缓慢,但最终获得了最大的战利品——OpenAI。其创始人之一便是辛顿的学生Ilya Sutskever。辛顿则在Google工作至2023年,期间荣获ACM图灵奖,尽管这份奖项的100万美元奖金与他从Google获得的4400万美元相比,显得微不足道。
从“谷歌猫”的研究,到AlexNet的论文,再到太浩湖的竞拍,短短六个月内,AI的变革几乎被全部埋下伏笔——深度学习的蓬勃发展、GPU与英伟达的崛起、AlphaGo的崇高地位、Transformer的诞生、ChatGPT的横空出世……硅基盛世的华彩乐章正式奏响。
2012年6月至12月的这180天,碳基人类的命运被深刻改变,而只有极少数人意识到这一点。
结尾:
在这些少数人中,斯坦福大学的教授李飞飞便是其中之一。2012年,当辛顿团队在ImageNet比赛中取得佳绩时,刚刚生完孩子的李飞飞仍在休产假,但她意识到历史的转折正悄然发生。作为ImageNet挑战赛的创办者,她立即搭乘当天的最后一班飞机前往佛罗伦萨,为辛顿团队颁奖。
李飞飞的故事同样引人注目,她出生于北京,随父母移民至美国。在普林斯顿大学完成学业后,李飞飞于2009年成为斯坦福大学助理教授,专注于计算机视觉与机器学习。她的目标是让计算机能够像人类一样理解图像和视频的含义。通过引导计算机“看”大量标注图像,李飞飞希望实现更高效的学习与识别。
此时,深度学习的未来充满了无限可能。李飞飞与其他先驱们的探索,将为人类开启一个全新的智能时代。