腾讯研究院AI速递 20241009

生成式AI

一、 微调大模型，AMD MI300X就够？这篇博客微调效果媲美H100

1. AMD MI300X GPU 与 JAX 配合使用，能高效微调 LLaMA 3.1 405B 模型，提供与 NVIDIA H100 GPU 相当的性能；

2. JAX 优势包括多硬件并行支持、独立于底层硬件的优化，以及高适应性，使其成为非英伟达硬件上的首选机器学习库；

3. 通过使用 LoRA 微调策略和合理的内存分配，实现了在 8 张 GPU 上接近线性的扩展性和 70% 的内存效率。

https://mp.weixin.qq.com/s/eJwg4GwH--9IVFedum_BnA

二、 OpenAI再获40亿美元的循环信贷！总融资超100亿美元！

1. OpenAI获得了40亿美元的循环信贷额度，总融资额超过100亿美元；

2. 利率设定为有担保隔夜融资利率加100个基点，年化利率约6%；

3. OpenAI持续在AI领域扩大影响力，最新的资金将用于加速新产品研发。

https://mp.weixin.qq.com/s/ijtxEE4CsjK5ULJ6kbHDLw

三、 潞晨Video Ocean震撼发布，《沙丘》级大片视效，免费体验

1. 潞晨Video Ocean模型支持生成各种风格和角色的视频，功能包括文生视频、图生视频及角色生视频；

2. 视频生成质量高，能够处理复杂场景和写实人物，具备以假乱真的细节处理能力；

3. 新功能允许用户自定义角色并生成个性化视频，支持免费注册体验，降低了使用门槛。

https://mp.weixin.qq.com/s/vjxcCZYyeBD2FcxNLOftKw

四、 新一代文生图模型Playground v3发布！参数量高达240亿！

1. Playground v3模型采用240亿参数和深度融合大型语言模型，提升了图形设计和文本指令遵循能力；

2. 引入了内部描述生成器和新的CapsBench基准，以提高图像描述质量和评估精确性；

3. 模型支持精确的RGB颜色控制和多语言理解，可在复杂设计应用中超越人类设计师。

https://mp.weixin.qq.com/s/SNFzqPNCBaMA3ORpERtiGw

五、 AI逆向绘画火了！一键重绘梵高《星空》，来自华盛顿大学

1. 项目"Inverse Painting"由华盛顿大学领导，利用基于扩散的逆绘画方法，AI能逐步重现梵高等名家的画作；

2. 过程包括学习真实艺术家的绘画视频，定义绘画指令，并通过扩散模型在画布上逐步添加细节；

3. 该技术能为学习绘画提供辅助，也可能用于"破解"大师的遗作以探索隐藏技术。

https://mp.weixin.qq.com/s/FIX2QfQMJgsh2_E0CJHGbg

前沿科技

六、 Hinton等以人工神经网络机器学习获得2024年诺贝尔物理学奖

1. 诺贝尔物理学奖授予John J. Hopfield和Geoffrey E. Hinton，表彰其在人工神经网络机器学习方面的基础性发现和发明；

3. 这些技术应用了物理学工具，特别是统计物理，推动了现代机器学习技术的发展。

https://mp.weixin.qq.com/s/eAq84bc6xmyMtyds1f-czg

七、 诺贝尔生理学或医学奖公布，microRNA能否推动现代生物学？

1. 诺贝尔生理学或医学奖授予Victor Ambros和Gary Ruvkun，以表彰他们在发现microRNA及其在转录后基因调控中的作用；

2. microRNA是长度约为22个核苷酸的非编码小核糖核酸，通过与靶mRNA的互补配对对基因表达进行负调控；

3. microRNA的发现对理解多细胞生物的发育和功能至关重要，推动了生物医学和基因工程的进步。

https://mp.weixin.qq.com/s/JVWKoLf6nq3-qS8kMygGew

报告观点

八、 李飞飞：其他人一样，我也不知道什么是AGI（通用人工智能）

1. 李飞飞在Credo AI峰会上表示对人工通用智能（AGI）的概念感到困惑，认为目前对AGI的理解和定义不清；

2. 她强调重要的是关注人工智能技术的实际影响和对社会的保护，而不是专注于抽象的概念；

3. 李飞飞目前在斯坦福人本中心AI研究所领导工作，并正在运营她的初创公司World Labs，致力于开发大型世界模型和推动AI多样性。

https://mp.weixin.qq.com/s/PTHkf6QIU7129pyYKPhT8w

九、 No Priors最新访谈，大模型未来市场趋势：小模型，高性能

1. 大语言模型市场正经历整合，需要巨大资本支撑以提升算法泛化能力和差异化功能；

2. 硬件发展与资本配置至关重要，芯片的创新对支持大语言模型的发展尤为关键；

3. 市场竞争与功能整合并行，趋向专业化或定制化，如微调模型与垂直应用，以适应具体需求。

https://mp.weixin.qq.com/s/43f_tfjsb4cfjsm_n_PphQ

十、 Altman 也不得不服谷歌 这款AI 应用？OpenAI CEO 对话 CPO

1. NotebookLM 的热度逐渐高涨，具有自动生成播客式对话和深度分析个性化响应的特点；

2. Sam Altman 在 OpenAI 的开发者日上盛赞了 NotebookLM，认为其是心中最惊艳的 AI 应用实例；

3. 讨论了 OpenAI 内部的研发文化和产品开发背后的故事，包括对 AGI 的分级定义和未来的发展方向。

https://mp.weixin.qq.com/s/kmCq-zsbCZDKULJmmWenzA