首个开源的ChatGPT低成本复现流程来了！预训练、奖励模型训练、强化学习训练，一次性打通。最小demo训练流程仅需1.62GB显存，随便一张消费级显卡都能满足了。单卡模型容量最多提升10.3倍。...【查看原文】
要知道，在单机多卡服务器上，即便把显卡规格提升为A10080GB，由于ChatGPT的复杂性和内存碎片，PyTorch最大也只能启动基于GPT-L（774M）这样的小模型ChatGPT。以ChatGPT可选的…
ChatGPT
量子位 2023-02-19
其声称已通过ZeRO、Gemini、Chunk-based内存管理等技术，极大地降低ChatGPT训练的显存开销；仅需一半硬件资源即可启动1750亿参数模型训练（从64卡到32卡），显著降低应用成本。博客内容…
OSC开源社区 2023-02-21
但ChatGPT发布已有数月，市面上不仅没有预训练权重开源，连可靠的完整开源训练流程都仍是空白，更无法实现基于千亿大模型的ChatGPT全流程高效搭建和应用。Colossal-AI以开源方式复现了ChatGP…
机器之心Pro 2023-02-15
最新大模型研究工作中，以十六原则为基础，IBM让AI自己完成对齐流程。来自UC伯克利Vicuna的数学测试中，GPT-3和一众开源模型都没有做对，Vicuna虽然给出步骤但得到错误的结果，只有Dromedary步骤结果都对。
ChatGPTGPT-4Vicuna
量子位 2023-05-07
这不，“首个开源ChatGPT低成本复现流程”就来了波大更新！现在，仅需不到百亿参数，利用RLHF简单微调，模型即可掌握中、英双语能力，达到与ChatGPT和GPT-3.5相当的效果。比如Meta开源了LLaMA模型，其参数量从70亿到650亿不等，号称130亿参数即可胜过1750亿的GPT-3模型在大多数基准测试的表现。
ChatGPTLLaMA
量子位 2023-03-29
科技有限公司申请一项名为“一种面向交通工程建造的多源异构数据集成存储方法”的专利，公开号CN119128238A，申请日期为2024年11月。
金融界 2024-12-18
硅臻介绍称，此次交付的QRNG芯片尺寸为4×4mm，采用QFN封装形式。这是目前国内取得国家密码管理局官方认定报告的最小体积的量子密钥源芯片，亦是“国内首个公开可查证的真正实现10K级规模化商业应用的量子芯片”。QRNG-10从今年9月首轮量产下线启动免费样片试用，如今完成对合作伙伴的首批10K级批量出货。
IT之家 2024-12-18
2024年12月14日，昇思人工智能框架峰会在北京中关村国际创新中心召开，大会以“创新源动力，框架新选择”为主题召开。会上，中国科学院科技战略咨询研究院预测，中国AI框架2024年新增市场昇思份额将达30%，这标志着昇思MindSpore成为大模型时代AI框架的新选择，是中国乃至世界的框架新势力。
环球网科技 2024-12-18
测试麦克风的过程其实很简单，但却是一个重要的环节，尤其是对于那些热爱录音、播客或者直播的人来说。一个好的麦克风可以极大地提升音质，进而提高你内容的专业性和吸引力。现在，我就和你聊聊怎么测试麦克风，确保它能为你提供最好的音质。在开始测试之前，首先要了解你的麦克风类型。市面上有很多种麦克风，比如动圈麦克风、电容麦克风和领夹麦克风等。
新报观察 2024-12-18
#内容带货搜索热词种草计划#漫步者（EDIFIER）作为中国知名的音频设备制造商，其旗下电竞品牌HECATE推出的产品一直以高性价比和出色的用户体验著称。在电竞领域，漫步者不断推陈出新，推出了多款符合电竞玩家需求的设备，包括耳机、键盘和鼠标等。特别是在无线鼠标领域，漫步者以其创新的技术和对细节的执着追求，赢得了广大玩家的认可和好评。
小米地瓜 2024-12-18
#内容带货搜索热词种草计划#惠普（HP）作为全球知名的打印机制造商，其产品在全球市场上占据着重要的地位。惠普打印机以其卓越的打印质量、创新技术和用户友好的操作界面而广受欢迎。特别是在彩色喷墨打印机领域，惠普凭借其高性价比和多样化的产品线，满足了不同用户的需求。
有投资者在投资者互动平台提问：贵司的公众号上，显示微纳光学元器件DOE品类可以应用于智能家用机器人，这里的DOE元件具体都涉及哪些产品？美迪凯（688079.SH）12月18日在投资者互动平台表示，尊敬的投资者，您好！
每日经济新闻 2024-12-18
12月18日，上海医药公告，公司开发的“I048”临床试验申请收到国家药监局核准签发的《药物临床试验批准通知书》。I048是小分子一类新药，拟用于治疗精神分裂症。该项目由上海医药主导研发，公司拥有全球独占实施许可权益。截至目前，该项目已累计投入研发费用为2516.30万元。全球未有完全相同靶点和同适应症的药品上市。
12月18日消息，微软昨日（12月17日）更新FeedbackHub帖子，承认没有完全修复桌面端Outlook的“0x80049dd3”错误代码，状态从“已修复”再次调整为“正在调查”。根据Windows用户反馈，在尝试登录Outlook桌面应用时，会频繁遇到“0x80049dd3”错误代码，导致无法正常访问邮件。
砍柴网 2024-12-18
SWF文件，听起来可能有点陌生，但其实它在网络上的应用还是挺广泛的。SWF文件全名是“SmallWebFormat”，最早是为了在网页上展示动画和交互内容而设计的。那么，SWF文件到底怎么打开呢？
Copyright © 2024 aigcdaily.cn 北京智识时代科技有限公司 版权所有 京ICP备2023006237号-1
