Instinct MI325X:八卡2TB HBM3E,FP8性能超每秒2亿亿次

Rain科技10月11日美国旧金山现场报道:

在Advancing AI 2024大会上,AMD正式发布了新款GPU加速卡Instinct MI325X。

这款产品基于广受好评的MI300X进行升级,主要改进在于提升了HBM内存部分。

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

【硬件规格与性能详解】

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

MI325X配备了256GB HBM3E内存,较MI300X增加了64GB,依然采用八颗32GB HBM3E内存芯片。内存带宽也从5.3TB/s提升至6TB/s,增幅约为13%。Infinity Fabric总线带宽保持在896GB/s。

计算性能方面,FP16性能维持在1.3 PFlops,FP8性能维持在2.6 PFlops。核心规格同样未变:采用5nm XCD模块搭配6nm IOD模块,3.5D封装技术,拥有1530亿个晶体管和304个计算单元。

值得注意的是,AMD提到MI325X的功耗达到了1000W,相比MI300X显著提升。这可能是由于HBM3E内存容量和带宽的提升所导致的功耗增加。

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

支持八卡并行,形成一个拥有2TB HBM3E内存、48TB/s带宽的平台,总性能可达FP16 10.4 PFlops和FP8 20.8 PFlops。与NVIDIA H200 HGX相比,在某些方面具有显著优势。

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

与NVIDIA H200相比,无论是单卡还是八卡平台,MI325X在不同大型模型推理任务中的性能都领先20%到40%。在训练性能方面,单卡领先H200约10%,而八卡平台则与H200持平。

AMD发布新GPU加速卡Instinct MI325X:八卡2TB HBM3E、FP8性能超每秒2亿亿次

AMD计划在今年第四季度开始量产MI325X加速卡和平台,而合作伙伴的整机系统和基础架构解决方案预计将于明年第一季度陆续推出。 MI325X的发布,无疑将进一步加剧GPU市场竞争,为人工智能发展提供更强大的算力支持。 高功耗是其一个显著的特性,这需要在实际应用中进行权衡考虑,例如需要配备更强大的电源系统和散热方案。

免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,可联系本站进行审核删除。
(0)
Rain科技Rain科技
上一篇 2024年 10月 11日 上午3:39
下一篇 2024年 10月 11日 上午8:31

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

欢迎来到AI快讯网,开启AI资讯新时代!