TrendForce:预估2023年市场上AI加速芯片搭载HBM总容量将达2.9亿GB 同比增长近6成


(资料图)

智通财经APP获悉,6月21日,TrendForce集邦咨询研究表示,2023年ChatBOT等生成式AI应用带动AI服务器成长热潮,又以大型云端业者最积极投入,包含Microsoft、Google、AWS或其他中系业者如Baidu、ByteDance等陆续采购高端AI服务器,以持续训练及优化其AI分析模型。高端AI服务器需采用的高端AI芯片,将推升2023-2024年高带宽存储器(HBM)的需求,并将驱动先进封装产能2024年成长3-4成。TrendForce集邦咨询预估,2023年市场上主要搭载HBM的AI加速芯片(如NVIDIA的H100及A100、AMD的MI200及MI300及Google的TPU等),搭载HBM总容量将达2.9亿GB,成长率近6成,2024年将持续成长3成以上。

TrendForce集邦咨询指出,为提升整体AI服务器的系统运算效能,以及存储器传输带宽等,NVIDIA、AMD、Intel等高端AI芯片中大多选择搭载HBM。目前NVIDIA的A100及H100,各搭载达80GB的HBM2e及HBM3,在其最新整合CPU及GPU的Grace Hopper芯片中,单颗芯片HBM搭载容量再提升20%,达96GB。另外,AMD的MI300也搭配HBM3,其中,MI300A容量与前一代相同为128GB,更高端MI300X则达192GB,提升了50%。同时预期Google将于2023年下半年积极扩大与Broadcom合作开发AISC AI加速芯片TPU亦采搭载HBM存储器,以扩建AI基础设施。

此外,AI及HPC等芯片对先进封装技术的需求日益提升,其中,以TSMC的CoWoS为目前AI 服务器芯片主力采用者。CoWoS封装技术主要分为CoW和oS两段,其中,CoW主要整合各种Logic IC(如CPU、GPU、AISC等)及HBM存储器等,另外,oS部分则将上述CoW以凸块(Solder Bump)等接合,封装在基板上,最后再整合到PCBA,成为服务器主机板的主要运算单元,与其他零部件如网络、储存、电源供应单元(PSU)及其他I/O等组成完整的AI 服务器系统。

TrendForce集邦咨询观察,估计在高端AI芯片及HBM强烈需求下,TSMC于2023年底CoWoS月产能有望达12K,其中,NVIDIA在A100及H100等相关AI Server需求带动下,对CoWoS产能较年初需求量,估提升近5成,加上AMD、Google等高端AI芯片需求成长下,将使下半年CoWoS产能较为紧迫,而此强劲需求将延续至2024年,预估若在相关设备齐备下,先进封装产能将再成长3-4成。

TrendForce集邦咨询指出,值得注意的是,在AI较急促需求下,无论是HBM或CoWoS生产过程中,得后续观察周边配套措施,例如硅通孔封装技术(TSV)、中介层电路板(Interposer)以及相关设备(如湿制程设备)等是否能到位,如前置时间(Lead Time)等考量。而在AI强劲需求持续下,估NVIDIA针对CoWoS相关制程,亦不排除将评估其他类似先进封装外援,例如Amkor或Samsung等,以应对可能供不应求的情形。

标签:

x 广告
读书 | 徐光启:400年前的全能科学家,会通中西第一人 每日资讯

《中华翻译家代表译文库·徐光启卷》黎难秋著浙江大学出版社出版徐光启

天天快播:第二届 “可持续设计峰会”正式启动,全新视角解构可持续设计

本届峰会将于2023年9月21-23日在北京展览馆与公众见面,汇聚全球领先的

赏非遗赛龙舟品美食 广西玉林端午文化盛宴引客来-今日视点

图为舞狮表演。黄艳梅摄中新网玉林6月21日电(记者杨志雄黄艳梅)龙舟邀

车技不行但是头够硬 动图 你可知那种瘙痒难耐的感觉?

一边玩去,别来打扰我你可知道那种瘙痒难耐的感觉?热闹是他们的,我只

在《猎人:荒野的召唤》全新的澳大利亚地图中寻找鳄鱼和袋鼠吧!|播报

ExpansiveWorlds为《猎人:荒野的召唤》打造的备受期待的新地图——《

东安动力: 东安动力八届二十次董事会会议决议公告

东安动力:东安动力八届二十次董事会会议决议公告

【环球报资讯】洛阳钼业(03993)拟通过CMOC Beta向CBC投资增资3399.66万美元

洛阳钼业(03993)发布公告,该公司于2023年6月9日召开第六届董事会第十一次

理财公司混合类产品近3月净值平均涨幅仅为-0.56%,中邮理财多只产品浮动管理费率下调至0丨机警理财日报

南财理财通数据显示,截至2023年6月16日,理财公司混合类产品近3月净值

青春不散场 合肥共达职业技术学院举行2023届毕业生毕业典礼

6月20日上午,合肥共达职业技术学院2023届毕业生毕业典礼隆重举行。学

华晨汽车重整方案最终敲定,交易对价最高不超过164亿元 今日快讯

华晨汽车重整方案最终敲定,交易对价最高不超过164亿元,华晨集团,华晨

x 广告

Copyright ©  2015-2023 亚洲都市网版权所有  备案号:京ICP备2021034106号-51   联系邮箱:5 516 538 @qq.com