手握60万块GPU,扎克伯格ALL IN AGI文|新火种 文子
编辑|小迪
继 OpenAI和谷歌先后放出大招后,扎克伯格也做出了让整个科技圈震惊的举动。
在最新的一条视频里,扎克伯格毫不掩饰自己的野心。他表示,Meta从2024年开始将不惜一切代价ALL IN AI,尤其是在所有领域都能达到甚至超越人类的通用人工智能AGI。
按照扎克伯格的说法,Meta的长期愿景就是构建通用智能,让每个人都能受益。为了达到这一目的,Meta将在2024年年底前购买约35万块英伟达的H100 GPU芯片,用来解决全球AI算力的供应紧缺问题。以目前的市场价来算,一块H100芯片大概3万美金,35万块H100也就是105亿美金,约合750亿人民币,几乎相当于小半个京东的市值。
根据外部数据统计,2023年Meta的H100出货量累计达到了15万,与它平齐可以打造同等算力的公司只有微软,而这个规模已经比其他所有公司高出了至少三倍。如果将英伟达A100和其他AI芯片也算在内,到2024年底Meta将拥有近60万个GPU储备,以遥遥领先的数量远超其他公司。
扎克伯格的目的就是用这几十万块GPU芯片,建立出一个全世界最大的人工智能系统,从而实现AGI。
事实上,有这种想法的并不止扎克伯格一个人。据透露,山姆奥特曼执掌的OpenAI也计划用1000万块GPU对人类所有的知识和数据进行再次计算,这个量级将远远超过目前的10万GPU量级,放大了100倍。
有行业人士分析,按照这种指数级别的发展,AGI很有可能在未来的一两年就会到来。
加紧训练Llama 3,比GPT-5更快到来?
除了ALL IN AGI以外,扎克伯格还带来了一个重磅消息,即Meta正在加紧训练下一代LLM Llama 3。
按照扎克伯格的说法,为了训练Llama 3,现有的两个AI研究工作(FAIR 和GenAI)将合力推进。FAIR将从Reality Labs变成产品部门的一部分,主管Joelle Pineau及首席科学家Yann LeCun也将由技术长Andrew Bosworth辖下改向产品主管Chris Cox报告。
据内部员工透露,这次变动将使AI研究成为公司及产品的关键元素,FAIR及生成式AI整合可以让公司有一致化的AI研究布局及蓝图,而Llama也将成为Meta公司向AGI前进的最佳利器。
考虑到英伟达在2022年发布的H100中,每台包含800亿个晶体管,速度比之前的型号快6倍,内存带宽高达每秒3tb。也就是说,一台超级计算机Eos就相当于4600个H100,而Meta的算力将相当于Eos的130倍。
按照这个数字计算,扎克伯格的大规模人工智能算力将有4.8e+16个晶体管,也就是48千万亿个。如此强大的算力,也让扎克伯格更有信心能够训练出更好的Llama 3大模型。
关于Llama 3的细节,扎克伯格只说模型未来将会能自己撰写程式码,也将具有进阶推理及规画的能力,其他并没有过多透露。
不过,扎克伯格提到了另一个东西,智能眼镜。他认为,智能眼镜将是重要设备,帮助人类与AI沟通,并将AI和元宇宙结合在一起,其与雷朋合作开发的智能眼镜已经有了显著的进展。
至于Llama 3的发布时间,扎克伯格很可能想要比GPT-5更快出来。
据了解,OpenAI首席执行官山姆奥特曼此前在达沃斯论坛接受媒体采访时表示,他现在的首要任务就是推出下一代大模型GPT-5,与现有模型相比,GPT-5能做更多、更多的事情。所以扎克伯格选择在此时大力购买芯片,研发Llama 3的动机就显得更加迫切。
暗讽OpenAI不open,Meta将构建开源AGI
到目前为止,Meta一直遵循着Llama的开源发展路线。
在扎克伯格看来,有价值的东西就应该开源,这样才可以解决许多可能源自机会和价值不平等的问题,才不会陷入过度集中的局面。所以对于AGI,扎克伯格依旧是秉承着开源的想法,并没有任何改变。
他表示,虽然有许多公司曾经是开放的,曾经发布过他们的所有研究成果,并讨论过他们将如何开源所有的技术。但现在,很多人不能否认一个事实,那就是一个非常有价值的东西,许多公司并不想与人分享。
他甚至直接表达自己的怀疑,他觉得在很多情况下,那些一开始就拥有最大领先优势的大公司也是那些呼吁设置最多护栏的公司。这其中一些人可能确实是关心安全问题,但这与他们的战略有多大关系,值得商榷。
虽然扎克伯格这两句话没有直接点名OpenAI,但还是让不少人感觉意有所指,毕竟OpenAI不open一直以来就是业内争议的话题。
OpenAI首席科学家曾说过,开源并不明智,我们之前错了。这一句话也印证了OpenAI封闭的事实,这也让很多人不满意。不少人拿出了当初OpenAI成立时的宣言来讽刺,甚至马斯克也对此事也或多或少的表示过不满。
尽管按照山姆奥特曼和其他人的说法,更封闭的AI开发方法也更加安全,但这在扎克伯格眼里,就是精明的商业策略。他认为,目前抛开公平谈模型安全还为时尚早。
当然,扎克伯格也有自己的动机。一旦未来Meta真的实现了AGI,他对AI的开放愿景最终是否也会导致权力的集中,这点他也无法保证。
毕竟从规模来说,Meta已经拥有了最多的用户,比几乎所有公司都多,并且还有一个利润丰厚的社交媒体业务。AI的特性可以使它的平台更加吸引人、更加有用。如果Meta能够通过公开发布其模型来规范AI的发展,那么它对整个生态系统的影响力只会越来越大。
可以预见的是,2024年Meta将因AI变得更加强大,开源更多的重磅产品造福全球开发者和企业。而AGI的到来,还需些时日。
钛媒体A... 2024-07-24