ChatGPT低成本复现流程开源！任意单张消费级显卡可体验，显存需求低至1.62GB

作者：量子位发布时间：2023-02-19

ChatGPT

要知道，在单机多卡服务器上，即便把显卡规格提升为A10080GB，由于ChatGPT的复杂性和内存碎片，PyTorch最大也只能启动基于GPT-L（774M）这样的小模型ChatGPT。以ChatGPT可选的…...【查看原文】

相关资讯

ChatGPT低成本复现流程开源！任意单张消费级显卡可体验

首个开源的ChatGPT低成本复现流程来了！预训练、奖励模型训练、强化学习训练，一次性打通。最小demo训练流程仅需1.62GB显存，随便一张消费级显卡都能满足了。单卡模型容量最多提升10.3倍。

ChatGPT

2023-02-15

量子位 2023-05-07

零门槛复现ChatGPT：预训练模型数据集直接用，包含完整RLHF流程，在线可体验

这不，“首个开源ChatGPT低成本复现流程”就来了波大更新！现在，仅需不到百亿参数，利用RLHF简单微调，模型即可掌握中、英双语能力，达到与ChatGPT和GPT-3.5相当的效果。比如Meta开源了LLaMA模型，其参数量从70亿到650亿不等，号称130亿参数即可胜过1750亿的GPT-3模型在大多数基准测试的表现。

ChatGPT LLaMA

量子位 2023-03-29

近期资讯

创维推出 23.8 英寸 2K 180Hz 电竞显示器 F24G52Q Pro，899 元

IT之家12月31日消息，除了27英寸的F27B50UPro之外，创维还推出了23.8英寸2K180Hz电竞显示器——F24G52QPro，首发到手价899元。

IT之家 2024-12-31

内容创作利器：AMD RX 9070 系列显卡将支持 AV1 B-Frame 编码

IT之家12月31日消息，科技媒体WccfTech昨日（12月30日）发布博文，报道称AMD基于RDNA4Navi48GPU（例如RX9070XT和RX9070）将支持AV1编码，为内容创作者和流媒体带来福音。

IT之家 2024-12-31

折叠屏iPhone定档2026年

中关村在线 2024-12-31

南昌南铃新材料科技有限公司取得减震胶片生产用覆膜装置专利，便于更换卷膜

金融界2024年12月31日消息，国家知识产权局信息显示，南昌南铃新材料科技有限公司取得一项名为“一种减震胶片生产用覆膜装置”的专利，授权公告号CN222225489U，申请日期为2024年4月。

金融界 2024-12-31

被“硬控”了！网易云音乐发布2024社区年度关键词

12月31日，网易云音乐2024社区年度报告正式发布，“硬控”成为年度社区关键词。

中关村在线 2024-12-31

技术驱动需求为先|智象未来完成Pre-A轮融资

12月28日，智象未来科技有限公司在安徽人工智能产业先导区启动仪式中，正式发布智象多模态生成大模型3.0版。

砍柴网 2024-12-31

南京韦尔德智能科技取得一种料卷推拉机构专利，提升生产效率

金融界2024年12月31日消息，国家知识产权局信息显示，南京韦尔德智能科技有限公司取得一项名为“一种料卷推拉机构”的专利，授权公告号CN222225490U，申请日期为2024年5月。

金融界 2024-12-31

如何高效设置权限以保障信息安全和团队协作效率

无论是在工作中，还是在个人生活里，权限的设置都是一个非常重要的环节。想象一下，如果你在一个团队中工作，大家都能随意访问和修改文件，那可能会导致混乱和误解。

新报观察 2024-12-31

如何正确使用榨汁机，轻松制作美味健康果汁的技巧与注意事项

榨汁机在现代厨房里可谓是一个非常实用的工具，很多人都爱用它来制作新鲜的果汁。今天就来聊聊榨汁机的使用方法和一些小技巧，让你轻松做出美味的果汁，享受健康生活。说到榨汁机，首先得知道它的基本构造。一般来说，榨汁机主要由一个电动机、榨汁杯、滤网和榨汁盖组成。

新报观察 2024-12-31

蜂巢能源取得自动接带机构及放卷设备专利，有效提高设备生产效率

金融界2024年12月31日消息，国家知识产权局信息显示，蜂巢能源科技股份有限公司取得一项名为“自动接带机构及放卷设备”的专利，授权公告号CN222225492U，申请日期为2023年12月。

金融界 2024-12-31

ChatGPT低成本复现流程开源！任意单张消费级显卡可体验，显存需求低至1.62GB

推荐体验

相关资讯

ChatGPT低成本复现流程开源！任意单张消费级显卡可体验

开源方案复现ChatGPT流程！1.62GB显存即可体验，单机训练提速7.73倍

开源方案低成本复现ChatGPT流程，仅需1.6GB显存即可体验

IBM加入战局！任意大模型低成本变ChatGPT方法开源，个别任务超GPT-4

零门槛复现ChatGPT：预训练模型数据集直接用，包含完整RLHF流程，在线可体验

近期资讯

创维推出 23.8 英寸 2K 180Hz 电竞显示器 F24G52Q Pro，899 元

内容创作利器：AMD RX 9070 系列显卡将支持 AV1 B-Frame 编码

折叠屏iPhone定档2026年

南昌南铃新材料科技有限公司取得减震胶片生产用覆膜装置专利，便于更换卷膜

被“硬控”了！网易云音乐发布2024社区年度关键词

技术驱动需求为先|智象未来完成Pre-A轮融资

南京韦尔德智能科技取得一种料卷推拉机构专利，提升生产效率

如何高效设置权限以保障信息安全和团队协作效率

如何正确使用榨汁机，轻松制作美味健康果汁的技巧与注意事项

蜂巢能源取得自动接带机构及放卷设备专利，有效提高设备生产效率

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响