2023年,AIGC是科技界的顶流话题,也被很多人视为行业变革的可能。有人说AIGC已是生产力,有人说它是泡沫。
但可以肯定的是,AIGC作为绽放在数据海洋上的一朵艳丽的花朵,也将成为数据增长的新引擎。作为大容量磁盘厂商,希捷希望用HAMR技术来帮助用户从容应对AIGC带来的数据挑战。
面对生成式AI的存储挑战,磁盘存储大有可为
IDC预计,到2027年,全球数据量将达到291 ZB,此前IDC预测的数据是,到2025年,全球数据量将达到175 ZB。短短几年前后,数据量预计又多出了100 多个ZB,可见数据增速是多么的不可思议。
2023年,随着以ChatGPT为代表的生成式AI技术的兴起,AI模型居然又成了新的数据增长引擎。因为,使用过生成式AI能力的人会知道,现在想要用生成式AI来产出点内容,简直太简单了。
比如,在全民自媒体时代,一个完整的视频只需要一个想法即可。内容创作者可以用AI来写视频脚本,用AI来生成图像内容和背景音乐,甚至配音都由AI来生成。同时,数字人技术越来越成熟,一些视频博主直接用自己的形象包装了数字人,做录视频根本不用本人出镜。
在希捷中国区产品线管理总监刘嘉看来,AIGC技术目前还处于偏早期的阶段,他认为,随着AIGC技术的不断成熟,AIGC相关应用也会越来越多,它会产生更多数据,AI会代替人来产生更多数据,磁盘将是这些数据的重要存储载体。
数据的加速产生自然会对数据存储设施带来挑战,作为全球主要的磁盘和闪存存储供应商,希捷不断在研究新的存储技术,以满足不断增长的数据存储市场。过去几年以来,希捷将采用HAMR(热辅助磁记录技术)的硬盘推向市场,改变了磁盘容量增长的节奏。
HAMR技术加快了磁盘容量的增长步伐
从此前希捷公布的技术产品路线图中可见,2023年要推出采用HAMR技术的30+TB磁盘,2024年将推出40TB+磁盘,2026年将会推出50+TB的磁盘,磁盘容量按照10+TB的节奏不断增长,这与过去十多年的磁盘容量增长节奏大不相同。
想提升磁盘容量主要有两个方面,一个是增加磁盘的碟片的个数,一个是提高碟片的面密度(Areal Density)。
从刘嘉的介绍中了解到,希捷是第一个做出10碟片硬盘的厂商,希捷认为,10个碟片在成本、良品率、容量、功耗方面达到了比较好的平衡,将碟片控制在10个是最优解,至少在未来5年以内都是最优解。
所以,磁盘容量提升主要就靠提升面密度了。HAMR技术可以使用更小、更稳定的磁性颗粒,这些小颗粒可以更密集地排列,从而进一步提高盘片的面密度,进而提高磁盘的整体容量。
当然也不能一味的只是提升容量,过去几年来,希捷通过双磁臂技术(MACH.2)提升磁盘的性能表现,其第一代双磁臂硬盘是14TB,第二代容量为18TB。据刘嘉介绍,双磁臂硬盘在国内外拥有众多用户,整体销量在百万级,称得上是机械硬盘近年来一个非常成功的创新。
在刘嘉看来,AIGC既对容量有要求,也对性能有要求。所以,采用双磁臂技术的产品非常适合AIGC。
当然,对存储性能有要求的远不只是AIGC,随着以HAMR为代表的更高密度硬盘的出现,双磁臂技术(MACH.2)甚至未来多磁臂技术也非常有必要,因为只提升容量而不提升性能意味着新的性能瓶颈。
大容量磁盘VS.大容量闪存盘
站在2023年,必须要考虑闪存存储对于磁盘存储的影响。2022年到2023年期间,闪存存储的单位容量成本有了明显降低,同时,随着QLC闪存产品的推出,以及一些基于QLC的闪存存储系统的推出,也都给磁盘存储带来了一些压力。
对此,刘嘉表示,在相对成熟度更高的海外市场上,一些互联网公司在采用磁盘和闪存存储时,会有一个相对稳定的整体比例,这一比例在过去几年都没有什么变化,闪存盘增长的同时,磁盘也在增长,两者在未来也会保持协同发展的态势。
从第三方公布的数据来看,在未来5年,固态硬盘每年年复合增长率在30%左右,大容量机械硬盘的增长率也是在25%-30%。在很多超大规模数据中心用户看来,成熟度和可靠性更高的磁盘,在数据留存时间、数据恢复以及成本方面还是有明显的竞争力的。
特别是HAMR技术带来高容量磁盘,将带来很高的TCO优势。刘嘉表示,HAMR带来的容量高增速对于用户成本有很大帮助,当40TB或者50TB的HAMR磁盘推出时,原来需要一万台服务器才能提供的容量,现在只需要五千多台就行,总体成本会大幅降低。
不得不说,超大规模数据中心用户自然有技术实力来用上大容量磁盘,为了安全地让更多企业用户也用上大容量磁盘,希捷开发了Exos CORVAULT磁盘存储系统。
此前发布的4U106 CORVAULT系统在4U空间里提供了106块大容量磁盘,提供2.12PB的容量,该系统采用专有的ASIC技术做主控,采用了ADAPT技术实现高可用,让用户轻松用上了大容量磁盘。希捷已经发布5U84的新版本系统,在高密度上会有新的突破。
当然,希捷除了不断开发磁盘技术,也在布局闪存存储。在ODCC活动现场,希捷除了展示各种磁盘以外,也展示雷霆(Nytro)系列大容量企业级固态硬盘,还有Nytro X 2U24在内的全闪存储系统以及混闪存储系统。