趋势预测
GPT4的强大涌现能力,图灵奖得主Yoshua Bengio认为GPT-4已经通过图灵测试。
大模型为多个技术方向带来新的发展空间,也引发新的挑战
大语言模型(LLM)的理解和推理等能力推动了众多技术方向,例如多模态大模型(Multimodal large models)和自主智能体(Autonomous Agents):
前沿大模型或AGl实验室目前普遍假设Scaling Laws仍有效。谷歌的下一代大模型Gemini已开始在TPUv5 Pod上进行训练,算力高达~1e26 FLOPS,是训练GPT-4的5倍(SemiAnalysis,2023)。“可能不太明显的说法是,沉睡的巨人谷歌已经苏醒,他们正在迭代,将在年底前将GPT-4预训练总FLOPS提高5倍。鉴于他们目前的基础设施建设,到明年年底达到[GPT-4的]20倍的道路是明确的。”
来源:安远AI
免责声明:我们尊重知识产权、数据隐私,只做内容的收集、整理及分享,报告内容来源于网络,报告版权归原撰写发布机构所有,通过公开合法渠道获得,如涉及侵权,请及时联系我们删除,如对报告内容存疑,请与撰写、发布机构联系
琪琪学姐吖 2024-12-28
伯桢生物 2024-12-28