生成式AI
一、 OpenAI新增美、欧、新各地5个办事处,持续扩大全球影响力
1. OpenAI在纽约、西雅图、巴黎、布鲁塞尔和新加坡开设新办事处,扩大全球影响力;
2. 新加坡办事处将成为亚太业务中心,与AI Singapore合作,并投资100万美元;
3. 巴黎和布鲁塞尔办事处专注于欧洲市场拓展,关注AI监管和推动AI普及。
https://mp.weixin.qq.com/s/f8X4mSfgraJlmjB8MUfD3w
二、 扩散模型训练方法一直错了?谢赛宁提出REPA表征对齐技术
1. 谢赛宁认为传统的扩散模型训练方法存在误区,强调表征的重要性;
2. 介绍了REPA(表征对齐技术),简化并提高扩散Transformer的训练效率;
3. Yann LeCun支持这项研究,表明结合自监督学习和表征对齐能显著提高模型性能。
https://mp.weixin.qq.com/s/a725rxzvyQXqNJoL1NsMaA
三、 幻境游戏CEO张筱帆再创业,打造首款3D伴侣,超万人观看!
1. 自然选择智能有限公司,推出首款男性向3D AI伴侣《EVE》;
2. 《EVE》结合Vibe和Echo模型,提供深度理解与记忆功能,旨在提供电影《Her》级别的伴侣体验;
3. 该产品已获主流美元VC投资,估值过亿,并在B站首演超万人观看,反响强烈。
https://mp.weixin.qq.com/s/COvvmBXkaVeN5gvy2-RZDw
四、 首个o1复现开源RL框架OpenR,UCL、上交等联合团队发布
1. OpenR由UCL、上交、利物浦大学、香港科技大学(广州)、西湖大学的团队联合开源,旨在提升大型语言模型的复杂推理能力;
2. 该框架整合了过程奖励模型训练、强化学习和多种搜索框架,支持在线和离线训练;
3. OpenR通过模拟OpenAI的o1模型成功,采用模型化方法超越自回归,并公开代码、模型和数据集。
https://mp.weixin.qq.com/s/Dr9IzbUjiWtZT7bgr58T2g
五、 陶哲轩用AI证明方程理论,19天进度99.99%!论文即将上线
1. 陶哲轩利用众包和AI辅助,完成4694条幺半群方程定理99.9963%的推理任务;
2. 项目通过Lean平台整合人工与机器贡献,发现了新技术和代数结构;
3. 传统自动定理证明器推理更强,但陶哲轩认为现代AI或许能解决剩余更复杂的难题。
https://mp.weixin.qq.com/s/QmKhWVtMD0lYJbq0n1e0KQ
六、 更快、更强、更经济!港大开源大模型RAG系统LightRAG
1. LightRAG提升了信息检索全面性与效率,通过双层检索范式和图结构索引增强查询的精确性和快速适应新数据的能力;
2. 在多个数据集测试中,LightRAG表现出较现有基线模型更高的检索准确性和响应多样性;
3. LightRAG在资源消耗和动态环境适应性方面表现优异,使其在实际应用中更经济有效。
https://mp.weixin.qq.com/s/oMtlTR1bOneohM9RhcX7Xg
前沿科技
七、 化学空间导航仪ChemFlow框架:流生成式AI引导分子属性控制
1. ChemFlow是一个基于生成式AI的新框架,通过学习向量场在潜在空间中导航,有效控制分子属性;
2. 该系统允许精确调整分子特性,如溶水性和类药性,并能在保持结构特征的同时实现预期属性变化;
3. ChemFlow展示了在单目标和多目标分子优化任务中的高效性,能够在多个属性间实现平衡,优化分子设计。
https://mp.weixin.qq.com/s/nmYJjbE9Xg37j-vE2Z3_XA
报告观点
八、 算力需求下降,2美元/小时出租H100:GPU泡沫破灭前夜?
1. H100 GPU的出租价格已从最高8美元/小时下降到不到2美元/小时,供需关系变化;
2. 主要AI模型公司的支出超过收入,导致他们筹集巨额风险投资以弥补亏损;
3. 预留算力资源的转售和开放模型的微调导致H100市场价格下降,使租用成为购买算力的经济选择。
https://mp.weixin.qq.com/s/jo11MHK-q1KoAwOK2aFE8g
九、 知名金融媒体国际银行家长文:ChatGPT等将彻底颠覆银行业务
1. 生成式AI将重塑银行业核心功能,如金融研究、风险评估和合规性,提升效率和洞察力;
2. AI可通过快速提取和分析数据,增强研究能力、提供早期风险预警,并自动生成财务报告;
3. AI推动智能KYC、反洗钱调查及合规管理,提高客户风险评估和监管响应的准确性和效率。
https://mp.weixin.qq.com/s/bM8vlTho0fhdWFpcye9dBA
十、 《STATE OF AI REPORT 2024》 200页 AI 现状报告说了什么?
1. 模型如Claude 3.5和Gemini 1.5接近OpenAI的GPT-4水平,显著缩小性能差距;
2. 多模态和新架构探索:研究者在提升多模态模型和探索Transformer替代方案上取得进展;
3. AI在特定科学领域的应用扩展:AI在生物学、材料科学和医学等领域的应用展示了其解决复杂科学问题的潜力。
https://mp.weixin.qq.com/s/ufBa5q9sdVo-HoCrqS6JxA