用FP8训练大模型有多香？微软：比BF16快64%，省42%内存

作者：机器之心发布时间：2023-11-02

微软 OpenAI 大语言模型

大型语言模型（LLM）具有前所未有的语言理解和生成能力，但是解锁这些高级的能力需要巨大的模型规模和训练计算量。在这种背景下，尤其是当我们关注扩展至 OpenAI 提出的超级智能 (Super Inte...【查看原文】

相关资讯

驱动之家 2024-10-29

安卓旗舰告别8GB内存时代，AI大模型推动手机厂商搞“大内存”

AI大模型

环球网 2024-10-28

近期资讯

纤丝纺特种纤维取得种再生高弹丝拉伸用温控装置专利，方便对再生高弹丝拉伸进行双面热风导热处理，保障拉伸质量

金融界2024年12月31日消息，国家知识产权局信息显示，纤丝纺特种纤维（苏州）有限公司取得一项名为“种再生高弹丝拉伸用温控装置”的专利，授权公告号CN222226727U，申请日期为2024年4月。

金融界 2024-12-31

全国首家全高帧LED影院落成乌尔善、费翔任名誉推广大使

中新网北京12月31日电“电影作为文化的承载者，是讲述国家故事的关键媒介。”这些影片涵盖了经典IP的续集以及汇集顶尖演员阵容的新作，不仅体现了中国电影的顶尖水平，而且得益于华夏电影中心的全高帧LED先进技术，它们以卓越的亮度和宽广的动态范围显著提升了画面质量。

中国新闻网 2024-12-31

杭州青云新材料取得一种氨纶纱线整经机的双层分纱组件专利，提高纱线的加工效果和成品质量

金融界2024年12月31日消息，国家知识产权局信息显示，杭州青云新材料股份有限公司取得一项名为“一种氨纶纱线整经机的双层分纱组件”的专利，授权公告号CN222226723U，申请日期为2024年5月。

金融界 2024-12-31

义乌市申凯线业取得抗拉缝纫线及线筒专利，便于提升缝纫线抗拉性能

金融界2024年12月31日消息，国家知识产权局信息显示，义乌市申凯线业有限公司取得一项名为“种抗拉缝纫线及线筒”的专利，授权公告号CN222226718U，申请日期为2024年2月。

金融界 2024-12-31

振华 LEADEX VII P1200W 白金 ATX 3.0 电源白色款预售，1799 元

IT之家12月31日消息，振华LEADEXVIIP1200W白金牌ATX3.0电源（型号SF-1200F14XP）的白色版本现已上架电商平台，预售价1799元。IT之家获悉，振华LEADEXVIIP1200W白色款电源长150mm，为全模组设计，配备11组振华“九宫格”通用免识别模组接口，采用转接方式提供12VHPWR显卡供电。

IT之家 2024-12-31

微信 iOS 版 8.0.55 最新官方正式版下载发布

IT之家12月31日消息，微信iOS平台迎来了8.0.55正式版更新。-解决了一些已知问题。本文由机器人发布，IT之家稍后将为大家带来具体更新内容。

IT之家 2024-12-31

海盐华诚经编取得高速整经机专利，解决整经机运行及工作环境相关问题

金融界2024年12月31日消息，国家知识产权局信息显示，海盐华诚经编股份有限公司取得一项名为“一种高速整经机”的专利，授权公告号CN222226719U，申请日期为2024年5月。

金融界 2024-12-31

江苏六甲科技取得超高分子量聚乙烯纤维六辊机专利，降低生产成本

金融界2024年12月31日消息，国家知识产权局信息显示，江苏六甲科技有限公司取得一项名为“一种超高分子量聚乙烯纤维六辊机”的专利，授权公告号CN222226726U，申请日期为2023年12月。

金融界 2024-12-31

浙江鼎艺新材料取得一种高弹性锦纶多孔丝专利，将局部的水快速向周围扩散并快速干燥

金融界2024年12月31日消息，国家知识产权局信息显示，浙江鼎艺新材料科技有限公司取得一项名为“一种高弹性锦纶多孔丝”的专利，授权公告号CN222226716U，申请日期为2023年12月。

金融界 2024-12-31

索尼 YY2986无线降噪耳机“证件照”曝光：4 种颜色

IT之家12月31日消息，科技媒体TheTechOutlook今天（12月31日）发布博文，在AUDIX和SDPPI认证数据库中发现了索尼YY2986耳机的踪迹，确认为无线降噪立体声耳机。

IT之家 2024-12-31

用FP8训练大模型有多香？微软：比BF16快64%，省42%内存

推荐体验

相关资讯

Stable Diffusion 大模型 ChilloutMix fp16

大模型微调实战（八）-使用INT8/FP4/NF4微调大模型

告别卡顿：iPhone 16系列8GB内存大升级，iOS 18智能体验全面爆发

小米15砍掉8GB内存版本王腾：端侧AI大模型对内存占用更多

安卓旗舰告别8GB内存时代，AI大模型推动手机厂商搞“大内存”

近期资讯

纤丝纺特种纤维取得种再生高弹丝拉伸用温控装置专利，方便对再生高弹丝拉伸进行双面热风导热处理，保障拉伸质量

全国首家全高帧LED影院落成乌尔善、费翔任名誉推广大使

杭州青云新材料取得一种氨纶纱线整经机的双层分纱组件专利，提高纱线的加工效果和成品质量

义乌市申凯线业取得抗拉缝纫线及线筒专利，便于提升缝纫线抗拉性能

振华 LEADEX VII P1200W 白金 ATX 3.0 电源白色款预售，1799 元

微信 iOS 版 8.0.55 最新官方正式版下载发布

海盐华诚经编取得高速整经机专利，解决整经机运行及工作环境相关问题

江苏六甲科技取得超高分子量聚乙烯纤维六辊机专利，降低生产成本

浙江鼎艺新材料取得一种高弹性锦纶多孔丝专利，将局部的水快速向周围扩散并快速干燥

索尼 YY2986无线降噪耳机“证件照”曝光：4 种颜色

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响