高通计划2024年起 旗舰智能手机和PC将支持基于Llama 2的AI部署
【手机之家新闻】7月19日，高通宣布和Meta正在合作优化Meta Llama 2大语言模型直接在终端侧的执行，无需仅依赖云服务。能够在智能手机、PC、VR/AR头显和汽车等终端上运行Llama 2一类的生成式AI模型，将支持开发者节省云成本，并为用户提供更加私密、可靠和个性化的体验。
高通技术公司高级副总裁兼技术、规划和边缘解决方案业务总经理马德嘉表示：我们十分赞赏Meta对于AI技术采取的开放且负责的策略。高通技术公司致力于推动创新，通过将生成式AI引入终端侧，将为各种规模的开发者降低开发门槛。为了将生成式AI有效地规模化扩展至主流市场，AI需要同时在云端和边缘终端上运行，比如智能手机、笔记本电脑、汽车和物联网终端。
Meta和高通技术公司双方目前在支持Llama生态系统方面的合作，覆盖了研究和产品工程技术工作。高通技术公司计划从2024年起，在搭载骁龙平台的终端上支持基于Llama 2的AI部署。现在开发者可以开始使用高通AI软件栈面向终端侧AI进行应用优化。高通AI软件栈是一套支持在骁龙平台上更高效处理AI的专用工具，让轻薄的小型终端也能支持终端侧AI。