大模型参数高效微调技术原理综述（五）-LoRA、AdaLoRA、QLoRA

作者：吃果冻不吐果冻皮发布时间：2023-06-12

随着，ChatGPT 迅速爆火，引发了大模型的时代变革。然而对于普通大众来说，进行大模型的预训练或者全量微调遥不可及。由此，催生了各种参数高效微调技术，让科研人员或者普通开发者有机会尝试微调大模型。...【查看原文】

近期资讯

Redmi 2K屏手机出货超过1000万台：位居行业第一

快科技11月18日消息，今天下午，Redmi举行K80屏幕技术沟通会。在这次活动上，Redmi王腾宣布，Redmi2K屏手机出货量超过了1000万台，在过去的三年时间里，Redmi国内市场2K屏机型的出货占比达到了69%，Redmi+小米占比达到了90%。

快科技 2024-11-18

兰剑智能：拥有 40 余项核心技术，引领物流

兰剑智能总经理张小艺称，公司成立时就树立“惟有创新”发展理念，现拥有40余项核心技术，是少数能将成套高端物流装备出口至海外发达国家的企业之一。面对AI技术爆发，兰剑智能将加大投入，结合市场需求，力求创造更多“世界之最”，成为仓储物流行业引领者。

和讯网 2024-11-18

浙江金冠制冷设备股份有限公司取得冷风机专利，完成对外壳底部以及百叶窗内侧的清理操作

金融界2024年11月18日消息，国家知识产权局信息显示，浙江金冠制冷设备股份有限公司取得一项名为“一种冷风机”的专利，授权公告号CN222012166U，申请日期为2023年12月。

金融界 2024-11-18

联想或率先推出IT服务智能体解中小企业大模型应用之“困”

当前，以大模型为代表的AI技术日新月异。11月28日，作为中国商业领域的全明星盛典，36氪年度商业大会“WISE2024商业之王”将落地北京。此次大会前期发布的信息显示，联想集团高级副总裁、中国方案服务业务群总经理戴炜将出席大会，并正式推出业内首个面向中小企业的IT服务智能体，致力于以大模型和智能体技术，加速中小企业智能化转型。

雷科技 2024-11-18

华为Mate 70一小时预订量已破百万：门店出现排队长龙

快科技11月18日消息，今天12:08，华为Mate70系列正式开启预订。Mate70Pro提供曜石黑、雪域白、云杉绿和风信紫四种配色，同样有12GB+256GB、12GB+512GB和12GB+1TB三种选择。

驱动之家 2024-11-18

红魔氘锋三合一能量魔方：一物多用的充电神器，仅售279

在现代生活中，移动设备已经成为我们不可或缺的伙伴，从智能手机到笔记本电脑，再到各种智能穿戴设备，它们极大地丰富了我们的日常生活。此外，其创新的三形态设计，搭配智能数码显示屏和可折叠插脚，无论是在家中还是旅途中，都能为用户提供极为便捷的充电体验。

小米地瓜 2024-11-18

创E+工程师创新成长计划“工业互联网”专场沙龙成功举办

11月14日，在北京市朝阳区人才工作局、朝阳区工业互联网产业园的大力支持下，由北京市科学技术协会创新服务中心、中关村科技园区朝阳园管理委员会（朝阳区科学技术和信息化局）、北京市朝阳区科学技术协会主办，北京科创空间投资发展有限公司（朝阳区科技企业赋能站、园区科协、优秀工程师人才服务基地）承办的朝阳启智创新领航“卓越工程师”赋能服务系列活动—...

中国财富网 2024-11-18

Rokid Spatial Link 发布：万物皆可空间显示、即插即用，699 元

IT之家11月18日消息，在今日下午的RokidJungle2024合作伙伴暨新品发布会上，RokidSpatialLink发布。据介绍，SpatialLink让“万物皆可空间显示”，通过SpatialLink，传统小屏设备可以快速把画面投射到300英寸的空间大屏中，并且可以支持巨幕、运动模式等特殊场景。

IT之家 2024-11-18

2024上海数智融合“智慧工匠”选树、“领军先锋”评选活动制造业智能化解决方案创新竞赛举办

中新网上海新闻11月16日电（记者缪璐）11月13日，2024上海数智融合“智慧工匠”选树、“领军先锋”评选活动制造业智能化解决方案创新竞赛圆满落幕。上海市经济和信息化委员会副主任汤文侃现场致辞并颁奖，上海市总工会基层工作部部长桂云林、上海市经信系统工会的同志出席本次活动。

中国新闻网 2024-11-18

影视、音乐、编剧等行业专家和从业者共话创新副中心举办新视听产业沙龙

交流促生灵感，创新引领未来。近日，“创新引领视听未来”副中心新视听产业内容创新与产业运营模式探索分享沙龙在北京城市副中心紫光VID网络视听产业园成功举办。

北京日报 2024-11-18

大模型参数高效微调技术原理综述（五）-LoRA、AdaLoRA、QLoRA

推荐体验

相关资讯

大模型参数高效微调技术实战（五）-LoRA

大模型参数高效微调技术原理综述（六）-MAM Adapter、UniPELT

大模型参数高效微调技术原理综述（七）-最佳实践、总结

大模型参数高效微调技术原理综述（四）-Adapter Tuning及其变体

大模型参数高效微调技术原理综述（二）-BitFit、Prefix Tuning、Prompt Tuning

近期资讯

Redmi 2K屏手机出货超过1000万台：位居行业第一

兰剑智能：拥有 40 余项核心技术，引领物流

浙江金冠制冷设备股份有限公司取得冷风机专利，完成对外壳底部以及百叶窗内侧的清理操作

联想或率先推出IT服务智能体解中小企业大模型应用之“困”

华为Mate 70一小时预订量已破百万：门店出现排队长龙

红魔氘锋三合一能量魔方：一物多用的充电神器，仅售279

创E+工程师创新成长计划“工业互联网”专场沙龙成功举办

Rokid Spatial Link 发布：万物皆可空间显示、即插即用，699 元

2024上海数智融合“智慧工匠”选树、“领军先锋”评选活动制造业智能化解决方案创新竞赛举办

影视、音乐、编剧等行业专家和从业者共话创新副中心举办新视听产业沙龙

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响