AI存储市场竞争激烈,HBM(高速磁带库)用量大增。

2024-03-23 热点资讯 关注公众号

本报记者 秦枭 北京报道

随着人工智能技术的飞速发展,特别是大型AI模型的广泛应用,不仅带动了GPU行业的蓬勃发展,同时带动了高性能存储器的需求呈现出不断增长的态势。国泰君安发布的研究报告称,高带宽存储器(HBM)的年需求增长率预计将高达40%。

面对这一市场趋势,国内外众多企业已纷纷加大投资力度,以应对市场的变化。HBM技术通过先进的封装工艺,实现了多个DRAM(动态随机存取存储器)的垂直堆叠,为高性能AI算力提供了高效、稳定、低延迟和低功耗的存储解决方案。

多位业内人士在接受《中国经营报》记者采访时表示,HBM技术确实展现出了显著的高速、高带宽和低功耗特性,这使得它在当前AI市场的热潮中具有广泛的应用前景,特别是在高性能计算和人工智能领域。然而,任何技术都不是完美的,HBM同样存在一些劣势,HBM的容量相对较小、延迟时间较长,且在系统搭配方面缺乏一定的灵活性。尽管如此,在实际应用中,仍可以通过混合搭配不同的产品来弥补这些不足,从而充分发挥HBM技术的优势,满足特定功能需求。

三分天下

自2022年11月OpenAI推出ChatGPT以来,AI大规模应用的时代正式拉开序幕。各大科技公司纷纷投入研发,推出大型AI模型产品。这些大型模型的训练与部署,对AI算力芯片的需求激增,同时,对于数据存储与传输的要求也显著提高。据美光公司测算,相较于传统服务器,AI服务器中的DRAM需求量提升了8倍,而NAND(计算机闪存设备)存储器的需求也增长了3倍。这一趋势无疑推动了存储芯片市场的快速增长。

华策战略咨询创始人詹军豪表示,HBM通过将多个DRAM 芯片堆叠在一起,并使用高速接口进行连接,提供了更高的带宽和更低的延迟,这对于人工智能、机器学习、高性能计算等领域非常重要。

“AI大模型是经由一种基于数据大爆炸模式的AI训练与推理流程所诞生,这一流程可能涵盖数以万亿计的参数,并极度依赖专注于高性能领域的HBM存储系统。”半导体分析师王志伟对记者表示,“以GPT-3模型为例,其参数量已达到惊人的1750亿,而最新推出的GPT-4模型更是将参数量提升至1.76万亿的庞大规模。为了突破限制,我们必须解决内存墙和功耗墙的瓶颈。由于数据交换通路的狭窄,带来了制约数据处理速度的内存墙,以及大量数据传输的高能耗的功耗墙问题。”

在面对AI大模型的千亿乃至万亿级别的参数时,服务器中的计算核心GPU几乎必须搭载HBM。AI服务器GPU市场以NVIDIA H100、A100、A800以及AMD MI250、MI250X系列为主,基本都配备了HBM。

中国民营科技实业家协会元宇宙委员会秘书长吴高斌表示,相比传统的存储,HBM的优势主要体现在更高的带宽和更低的延迟。HBM通过堆叠多个DRAM芯片,形成了高度集成的模块,可以在更小的空间内提供更大的容量和更高的带宽。此外,HBM的电压和电流也低于传统存储,从而降低了能耗。

英伟达联合创始人兼首席执行官黄仁勋表示:“HBM是一个技术奇迹。”他补充说,HBM还可以提高能源效率,并且随着耗电的人工智能芯片变得更加普遍,可以帮助世界变得更加可持续。

据中信建投测算,以8张80GB的NVIDIA A100/H100计算,需要的HBM用量约为640GB,已超越了常规服务器的内存条容量,H200、B100等算力卡将搭载更高容量、更高速率HBM。“我们测算,随着算力卡单卡HBM容量提升、算力卡出货量提升、技术迭代带来单GB HBM单价提升,2023年HBM市场规模为40亿美元,预计2024年将增长至148亿美元,2026年增长至242亿美元,2023~2026年CAGR(复合年均增长率)为82%。”中信建投称。

随着市场规模的持续扩张,各大厂商纷纷投身于HBM的激烈竞争中。作为全球领先的两大存储器芯片制造商,三星与SK海力士已明确表态,将显著增加HBM的生产规模,以满足市场迫切的需求。值得一提的是,SK海力士已经顺利启动高带宽内存产品HBM3E的量产,并稳步向客户供应。与此同时,全球第三大DRAM公司美光科技亦宣告,自2024年起将正式涉足HBM市场。

不过,就目前而言,全球HBM市场被海外存储大厂所“垄断”,并呈现“三分天下”的局面,存储芯片三巨头SK海力士、三星和美光分别占到53%、38%和9%的市场份额,而SK海力士则是唯一具备量产新世代HBM3能力的供应商。

TrendForce集邦咨询指出,以HBM产能来看,三星、SK海力士至今年年底的HBM产能规划最积极,三星HBM总产能至年底将达约130K(含TSV);SK海力士约120K,但产能会依据验证进度与客户订单持续而有变化。另以现阶段主流产品HBM3产品市占率来看,目前SK海力士的市场比重逾9成,而三星将随着后续数个季度AMD MI300逐季放量持续紧追。

看客还是玩家?

海外HBM竞争如火如荼,国内的存储厂商也蠢蠢欲动。据报道,国内存储厂商武汉新芯(XMC)已经启动了专注开发和制造的 HBM 项目,瞄准了人工智能和高性能计算(HPC)领域。长鑫存储(CXMT)也计划生产 HBM 内存,已经获得用于 HBM 存储器组装和测试的装置。

不过,中信建投研报指出,国产HBM正处于0到1的突破期,HBM供应主要为韩系、美系厂商,国内能获得的HBM资源较少。随着国产算力卡需求快速增长,对于算力卡性能至关重要的HBM也有强烈的供应保障诉求和国产化诉求,封测、设备、材料等环节值得关注。

此前,通富微电(002156.SZ)表示,南通通富工厂先进封装生产线建成后,公司将成为国内最先进的2.5D/3D先进封装研发及量产基地,实现国内在HBM高性能封装技术领域的突破,对于国家在集成电路封测领域突破“卡脖子”技术具有重要意义。

国内封测龙头长电科技(600584.SH)也曾在投资者互动中表示,其XDFOI高密度扇出封装解决方案也同样适用于HBM的Chip to Wafer 和Chip to Chip TSV堆叠应用。

詹军豪表示,在HBM的上下游中,中国企业可以选择成为玩家而不仅仅是看客。虽然HBM技术目前主要由国外企业主导,但中国企业仍可以通过加强研发投入、技术创新和产业合作,在这个领域获得更多的话语权和市场份额。这需要中国企业在芯片设计、制造工艺、封装技术等方面进行突破,并与国内外相关企业合作,共同推动HBM技术的发展。

 天使投资人、人工智能专家郭涛则指出,对于中国的企业来说,既有机会也有挑战。一方面,中国在AI和高性能计算领域有着强大的需求,这为HBM的发展提供了广阔的市场。另一方面,中国企业在HBM的研发和生产方面还存在一定的差距,需要加大投入和努力。因此,中国企业既可以作为玩家参与HBM的研发和生产,也可以作为看客观察和学习HBM的发展。

然而,尽管HBM市场前景广阔,但目前仍面临一些挑战。首先,HBM技术的生产成本较高,这在一定程度上限制了其在大规模商业应用中的普及,根据市场研究公司 Yole Group 2月8日的数据,今年 HBM 芯片的平均售价是传统 DRAM 内存芯片的5倍。其次,HBM的封装和集成技术也面临一定的难题,需要产业链上下游企业共同协作,才能推动技术的成熟和普及。

(:张靖超 :刘军)


随着AI技术的飞速发展,尤其是大型AI模型的广泛应用,不仅带动了GPU行业的蓬勃发展,同时带动了高性能存储器的需求呈现出不断增长的态势。HBM技术作为高速、高带宽和低功耗存储解决方案,被认为在未来的大数据分析、人工智能、机器学习等领域具有广泛的应用前景。
HBM技术的最大优势在于通过将多个DRAM芯片堆叠在一起,实现了多个DRAM的垂直堆叠,从而提高了存储器的速度和容量。然而,由于各种原因,HBM在实际应用中并未完全发挥其优势,仍需通过混合搭配不同的产品来弥补这些不足,以满足特定功能需求。
从市场趋势来看,AI大规模应用的时代正式拉开序幕,各大科技公司纷纷加大研发投入,推出大型AI模型产品。HBM因其高速、高带宽和低功耗特性,有望在这场浪潮中占据重要地位。
尽管面临一些挑战,例如高昂的成本、封装和集成的技术难题等,但随着技术和市场需求的变化,HBM技术仍有很大的发展空间。未来,中国企业的积极参与将有助于推动HBM技术在中国乃至全球市场的普及和发展。同时,中国的科技创新和产业合作也将有力地推动HBM技术的创新和发展。

上一篇:Tier1一哥博世终于交付高阶智驾:及时集成中国L4独角兽技术
下一篇:美团2023年第四季度营收737亿元 同比增长22.6%
更多更酷的内容分享
猜你感兴趣
口子窖:中国白酒市场竞争激烈,增速放缓

口子窖:中国白酒市场竞争激烈,增速放缓

问题。财报显示,2024年上半年,口子窖营业收入达到31.66亿元,同比增长8.72%,净利润达到9.49亿元,同比增长11.91%。此外,口子窖高端白酒销售收入占比高,尤其是高档白酒实现销售收入29.73亿元,同比增长7.34%。然而,中档白酒销售下降,市场份额受到挑战。另外,口子窖公司在省内市场实现了较高收入,而省外市场的收入则相对较低。口子窖目前仍把重心放在省内市场,预计未来需要在省外市场寻求更多的发展机会。总的来说,口子窖通过扩大高档白酒销售,提升整体业绩。然而,面对激烈的市场竞争,口子窖在未来的发展策略上有待探讨。

热点资讯 08.30
OpenAI高级管理人员:AI的应用之年凸显人才竞争激烈

OpenAI高级管理人员:AI的应用之年凸显人才竞争激烈

OpenAI预计2024年将成为人工智能“应用之年”,ChatGPT企业版需求增加。目前已有超过60万人注册使用ChatGPT企业版,面今年1月份仅约有15万人。同时,OpenAI面临来自anthropic、Cohere以及微软的竞争,公司需实现收入来源并证明生成式AI盈利。此外,OpenAI还正对抗诉《纽约时报》案件,认为该报未经许可使用其版权作品,并创造AI工具导致流量流失。同时,OpenAI正在筹备建设芯片企业。

热点资讯 04.05
市场竞争激烈,但苹果看好iPhone的长期发展前景

或

中国经济大环境下的市场竞争与展望:中国市场的未来趋势,且看iPhone如何应对

市场竞争激烈,但苹果看好iPhone的长期发展前景 或 中国经济大环境下的市场竞争与展望:中国市场的未来趋势,且看iPhone如何应对

苹果发布2024财年Q2季度财报,尽管整体营收下降4%,但大中华区营收仍录得163.72亿美元,较去年同期增长8%。

热点资讯 05.04
AI驱动的高带宽存储使用量增长迅猛,三星或有望在2025年推出HBM4芯片,引领人工智能时代,带宽存储使用量年增超200

AI驱动的高带宽存储使用量增长迅猛,三星或有望在2025年推出HBM4芯片,引领人工智能时代,带宽存储使用量年增超200

三星电子预计将于2025年推出HBM4芯片,该芯片将在AI推动高带宽存储使用量上带来显著增长。此外,英伟达预计将在2025年采购占比将突破70%的HBM市场,并已开始销售Blackwell Ultra和B200A等产品。TrendForce预计2024年HBM消耗量将超过200%,并预计到2025年HBM消耗量将翻倍。中国银行预计HBM市场将继续增长,全球HBM销售额将达到266亿美元,年均增长率为59%。同时,目前AI服务器最核心的三个要素——计算、网络和存储都面临供需不均衡情况,市场需求增多,但供给和创新技术面临瓶颈。

热点资讯 08.09
宝可梦大集结六边形战士甜冷美后解析: 了解宝可梦大集结甜冷美后特性、能力及进化详解

宝可梦大集结六边形战士甜冷美后解析: 了解宝可梦大集结甜冷美后特性、能力及进化详解

事件起因:冲阵战士冲锋。 事件关注爆点:五级质变能打能扛伤害高、位移有减速有回血有护盾适合打各种规模的团战;五级前很弱,前期抢资源能力几乎为零。

热点资讯 11.10
揭露:EDG拒绝摆烂,实力正盛的Rookie和Theshy已加入IG战队

揭露:EDG拒绝摆烂,实力正盛的Rookie和Theshy已加入IG战队

青的消息也开始多了起来。首先是EDG战队拒绝摆烂,并且重新签下了Theshy和Rookie两位顶级AD选手。此外,IG战队也确认了中单和上单选手,但具体名单还需等待官方发布。最后,有网友爆料称Doinb可能想要组建自己的LPL战队,但是需要大几千万的保证金和其他费用。这些转会信息引起了广泛的关注和讨论。

热点资讯 11.10
长春绿园区一居民楼发生爆燃:居民5人受伤,已被紧急送往医院进行治疗

长春绿园区一居民楼发生爆燃:居民5人受伤,已被紧急送往医院进行治疗

"绿园区皓月大路庆阳街交会附近星宇花园一居民楼发生爆燃,造成2人重伤3人轻伤。事故原因正在进一步调查中。" 简述为:绿园区皓月大路庆阳街交会附近星宇花园一居民楼发生爆燃,造成2人重伤3人轻伤,目前事故原因正在调查中。 重点关注爆点:居民楼爆燃和多人受伤。

热点资讯 11.10
购车决策:吉利银河星舰的价位、特点与雷神EM-i混动的综合对比

购车决策:吉利银河星舰的价位、特点与雷神EM-i混动的综合对比

吉利银河星舰7是一款具备尺寸优势、内饰精良且性能强劲的城市SUV,预售阶段预售价为10.98万,并有可能更低。此款车将通过电动化平台应对10万级别传统燃油SUV的竞争,拥有较长的轴距和宽敞的后排空间,而外观设计与吉利银河E5纯电动SUV相似,搭载吉利雷神EM-i超级混动系统,大幅提升动力表现。

热点资讯 11.10
热门美妆博主回应「整容手术风险」,自己有多重标准衡量一切

热门美妆博主回应「整容手术风险」,自己有多重标准衡量一切

湖南怀化理发师晓华因“听得懂人话”在抖音火出圈,她拒绝被捧高,希望回归朴实本色。目前已有300万粉丝,怀化当地举措助其成功。该理发师不认为自己的技艺超过他人,呼吁网友别再称她为“人民理发师”。

热点资讯 11.10
华为牵手长安,‘长安嫡子’阿维塔年内上市筹备

华为牵手长安,‘长安嫡子’阿维塔年内上市筹备

阿维塔汽车董事长兼首席执行官,于2018年创立了该品牌,主打新能源汽车。然而,阿维塔在华为子公司深圳引望智能技术有限公司的投资后,其负债率高达94.46%,经营陷入困境。阿维塔在华为子公司深圳引望智能技术有限公司的投资后,仍未摆脱亏损泥潭。目前,其已完成总计71.03亿元的债务融资,但未来能否通过IPO实现盈利尚不得而知。 以上信息来源于《腾讯混元大模型》。 请注意,由于涉及的财务数据较复杂,这里仅给出一些关键要点,具体细节可能还需要进一步研究和分析。

热点资讯 11.10
小鹏:官宣增程计划,纯电续航400公里,你会为它的表现感到惊讶吗?

小鹏:官宣增程计划,纯电续航400公里,你会为它的表现感到惊讶吗?

特斯拉Model S Plaid在马斯克逝世后的首次全球发布会中,公布了其全新的第四代电动架构,Model S Plaid的最大亮点就是电池续航里程达到了617英里(约997公里)。特斯拉Model S Plaid拥有四个座位,并且性能表现优秀,可在1.6秒内将车辆加速到60英里/小时(97公里/小时),而且它的最高时速可达210英里(340公里)。另外,这款新车还配备了全自动驾驶辅助系统,以及内置的全语音助手。

热点资讯 11.10
2025款奥迪A4L全面升级:全新内饰曝光,S-LINE套件等您体验!

2025款奥迪A4L全面升级:全新内饰曝光,S-LINE套件等您体验!

奥迪最新一代A5L将在广州车展期间推出,这款车型被称为"终极版",采用全新的S-line运动套件,外观更加魁梧和运动,内饰沿用多年套娃式的布局,但在配置上有所升级,包括增加了新的配色方案,提高了舒适性和安全性。

热点资讯 11.10
光学光电子公司三季报业绩喜讯:光学面板市场份额领先,京东方A、TCL科技营收破纪录

或者

光学光电子公司全年成绩单发布:三季报显示其核心业务稳健增长,京东方A和TCL科技营收超1000亿

光学光电子公司三季报业绩喜讯:光学面板市场份额领先,京东方A、TCL科技营收破纪录 或者 光学光电子公司全年成绩单发布:三季报显示其核心业务稳健增长,京东方A和TCL科技营收超1000亿

94家A股光学光电子上市公司整体业绩上涨,归母净利润实现扭亏为盈,同比增长92.96%。面板行业复苏,三季报显示公司明显受益。

热点资讯 11.10
关注贫富差距,调整社平工资:为何低收入者的缴费负担较重?

关注贫富差距,调整社平工资:为何低收入者的缴费负担较重?

01年实施的第六次全国社保普查时的77.9%,下降至2019年的67.8%。这表明我国在扩大社会保险覆盖面方面还有很长的路要走。 此则新闻可以概括为:全国社保执法检查报告出炉,指出当前社保制度中存在的问题,如缴费负担过重导致“断保”现象频发等,并提出针对这些问题的研究解决方案。这些焦点集中在低收入人群和社会小微企业。

热点资讯 11.10