2022年12月15日,昆仑万维在北京举行AIGC技术发布会,会上昆仑万维CEO方汉正式发布了「昆仑天工」AIGC全系列算法与模型,并宣布模型开源。「昆仑天工」旗下模型包括天工巧绘SkyPaint、天工乐府SkyMusic、 天工妙笔SkyText、天工智码SkyCode,覆盖图像、音乐、文本、编程等多模态内容生成能力, 标志着昆仑万维成为目前国内AIGC领域布局最为全面的公司之一,也是国内第一个全身心投入到AIGC开源社区的公司。
昆仑万维CEO方汉表示,“昆仑天工之所以选择开源,因为我们坚信开源是推动AIGC生态发展的土壤和重要力量。昆仑万维致力于在AIGC模型算法方面的技术创新和开拓,致力于推进开源AIGC算法和模型社区的发展壮大,致力于降低AIGC技术在各行各业的使用和学习门槛。”
基于对人工智能技术的前瞻性判断,昆仑万维从2020年开始布局AIGC领域,训练集群200张卡,投入数千万元,组建了二百余人的研发团队,2020年底至2021年4月份研发出百亿参数的中文GPT-3模型,并于2021年8月开始研发基于自有大文本模型的对话机器人,迅速刷新国内技术指标;2022年1月启动SkyMusic音乐实验室,2022年4月达到人工智能领域最优效果;2022年9月份启动编程、图像、文本方向的AIGC产品。 目前AI图像、AI文本、 AI编程 的模型已经在GitHub上开源。
AI图像方面,天工巧绘SkyPaint采用全球第一款多语言Stable Diffusion分支模型,兼容Stable Diffusion;使用1.5亿中英双语语料,支持中英双语输入实现文字生成图像,是国内为数不多的支持中英双语的文图生成模型。
(天工巧绘生成作品,向右滑动查看更多)
AI音乐方面,天工乐府SkyMusic是国内第一款商用级作曲AI模型,该模型引入全局信息约束、和弦隐式表征,和弦准确率达到92.5%,远超目前行业最佳64.7%;支持中文、英文、日文、韩文、法文等31种语种,支持从旋律生成歌词、文案素材生成歌词,且支持全球多曲风。基于昆仑万维旗下StarMaker平台大量优质作品曲库,天工乐府具备高效供给具备ISRC版权认证的歌曲、配乐及氛围音乐等高质量AIGC音乐的能力。目前面向全球音乐市场,已在美国、韩国、印尼等国家及全球180多个音视频平台发行了近20首人工智能生成歌曲。
(天工乐府生成音乐“Holiday”)
AI文本方面,天工妙笔SkyText4采用生成效果最好的开源GPT中文预训练大模型,针对中文领域构建了千亿级别的高质量数据集,通过高性能A100-GPU集群,训练200张显卡,训练4周,后续优化2周,得到百亿参数量的GPT-3生成模型,提供包括续写、对话、中英翻译、内容风格生成、推理、诗词对联等功能,与现有大模型的比试中排列前茅。
(天工妙笔生成五言诗)
AI编程方面,天工智码SkyCode采取全球第一款多语言开源编程大模型,支持多种主流代码语言SkyCode能够生成的代码,不仅包括使用广泛的python、Java、C等,还涵盖了php、go、swift等共计十余种编程语言,使不同语言的使用者都能来体验SkyCode强大的代码生成能力。
未来昆仑天工将全面激活昆仑万维内部多元业务的“神经系统”,提升元宇宙、文娱、社交等业务版块的内容生成能力,助推内部业务的动能切换。此外,昆仑天工也将为全球用户输出定制化AI内容生成能力,提升C端用户效能,促进多行业B端企业降本增效。
此外,在发布会的圆桌论坛环节,太合音乐董事长钱实穆,LVS开源项目领导者、前阿里云CTO、前滴滴技术VP、中国计算机协会理事章文嵩,海通证券传媒互联网首席分析师毛云聪等业内嘉宾共同探讨了AIGC未来商业化前景。
太合音乐董事长钱实穆表示,从音乐制作角度看,借助AI对海量的版权数据的学习,搜集成功的音乐作品的共性,可能快速创作出新的音乐作品,效率大幅提高、成本大幅降低,同时使传播更迅速;从音乐的使用场景看,功能型、氛围型的音乐以及游戏和元宇宙BGM,通过AI制作很快能高效满足交互的需求。AI创作会使音乐产业提速以及效率化,“昆仑万维在AI音乐产业领域的布局如在汽车行业的布局,是非常具有前瞻性的布局。”
LVS开源项目领军者、前阿里云CTO、前滴滴技术VP、中国计算机协会理事章文嵩表示,软件开源是大势所趋,开源的软件会迭代得更快、更安全、更容易获得用户信赖。通过开源可以高效地获得用户,拓展全球市场,打造更加繁荣的AI应用生态,“AI应用效果80%来自高质量的训练数据,建议不光是数据开源,还要为用户提供数据标注、训练数据集管理等工具,让用户轻松构建高质量数据;其次要降低AI应用的门槛,要让业务人员、非程序员在平台上构建应用,把他们的经验沉淀到模型中,从而做出更好的AI应用效果。”
海通证券传媒互联网首席分析师毛云聪表示,AIGC除了效率提升、创作供给,促进多个行业降本增效之外,对元宇宙也具有变革性的力量,整个元宇宙建立在数字世界、数字内容之上,比如元宇宙落地案例虚拟人,通过AIGC的方式创造内容,就激活了虚拟人,虚拟人和虚拟人产生连接、产生对话,这在元宇宙里是革命性的变化,“我们在元宇宙里观察到的每一帧画面,都需要大量的算力和消耗,靠人工创作工作量非常大,需要聪明的AI来创造内容。”
随着人工智能的快速发展,AI行业重新塑造内容生产方式、推动人类生产关系的变革。自2008年成立以来,昆仑万维业务遍布全球5大洲、70多个国家和地区,截至2022年上半年,全球平均月活跃用户近 4 亿。基于全球海量用户以及在社交、游戏、内容形成的多场景商业沉淀和顶尖的互联网运营能力,昆仑万维将在AIGC赛道上乘风起航,打开全新的增量空间,也将长期致力于为AIGC 的生态建设贡献一份力量,给全世界的内容创作者提供便利的工具,让大家创造出更加无限的可能性。