资讯
2024-12-13 11:23 来源:快科技 作者:快科技
用手机看
12月13日消息,早在四年前,AMD就曾设定目标,到2025年EPYC系列服务器处理器和Instinct系列AI芯片的能效,较2020年提高30倍。如今,MI300X AI芯片基本上实现目标,时间提了早一年。
据THW报道,AMD两个64核心EPYC 9575F CPU、八个Instinct MI300X AI芯片及2304GB DDR5内存的服务器,Llama3.1-70B(vLLM 0.6.1.post2、TP8)测试推理性能,用一组复杂计算确定系统能源效率,并与2020年的旧机器比较,
结果显示,新机能源效率是旧机的28.3倍。

不过,AMD并未透露2020年的旧机是何规格。但大概率是EPYC 7002系列,Zen 2架构,每个CPU最多64个核心,以及CDNA 1架构Instinct MI100 AI芯片。
AMD表示,除了强力硬件改进,更高性能效率是架构进步,加上软件优化结合,是跳跃式进展。

今年10月份的Advancing AI 2024大会上,AMD正式发布了新款AI芯片——GPU加速卡“Instinct MI325X”。它在大获成功的MI300X基础上再进一步,主要是增强了HBM内存部分。
MI325X配备了多达256GB HBM3E内存,相比于MI300X又增加了64GB。
MI325X也支持八块并行组成一个平台,这就有多达2TB HBM3E、48TB/s带宽,总的性能高达FP16 10.4 PFlops(每秒1.04亿亿次)、FP8 20.8 PFlops(每秒2.08亿亿次)。
对比NVIDIA H200,无论单卡还是八卡平台,不同大模型推理的性能都可以领先20-40%。
训练性能方面,单卡可领先H200 10%,八卡平台则是持平。
MI325X加速卡和平台将在四季度内投产,而合作伙伴的整机系统、基础架构解决方案,将从明年第一季度起连续推出。

2024-12-13 未保报告:每周游戏时长3小时内未成年占比提升37.2个百分点
2024-12-13 《宇宙机器人》获TGA年度游戏 网友吐槽:4399小游戏
2024-12-13 极越产品负责人提醒车主:车机若没网 ASD智驾、蓝牙钥匙就无法使用了
2024-12-13 微星新款49寸带鱼屏上市:240Hz QD-OLED屏首发6499元
2024-12-13 首次!我国粮食产量突破1.4万亿斤
2024-12-13 坐稳全球新能源销冠:预计比亚迪全年销售425万台
2024-12-13 微软放开Win11升级限制:假的!相关页面3年前就有了
2024-12-13 奇瑞首款高端豪华 MPV!星途星纪元E08测试车下线
2024-12-13 美国顶级《科学》杂志年度十大突破揭晓:中国研究成果上榜!
2024-12-13 马斯克将面临巨额罚款:因捐赠金额不达标 缺口达30亿
2024-12-13 中国智驾大洗牌 关海涛发文:极氪明年大动作、有关L3自动驾驶
2024-12-13 REDMI Turbo 4本月不发!王腾:计划有变
2024-12-13 极越CEO夏一平飞书名字被员工改成“欠债还钱”
2024-12-13 曾抢崩多家银行官网 中国“龙钞”荣获亚洲最佳纪念钞奖
2024-12-13 小米手机中国市场激活量份额同比大涨:拿下11月冠军
2024-12-13 华为Mate 70 RS最强对手!荣耀Magic7 RSR 保时捷设计上架预订
2024-12-13 一个时代的终结!蓝光播放器再见:曾风靡一时 清晰度是DVD五倍
2024-12-13 来自乐园宇宙邀请函,《蛋仔派对》即将开启2024乐园嘉年华
2024-12-13 不计成本打造!荣耀GT超详细规格出炉
2024-12-13 理想汽车自研了高压油箱不锈钢
2024-12-13 生产力、游戏双重完全体!锐龙9 9950X新主板新系统重测:全面超越对手最强
2024-12-13 新证据:中国酒桌文化始于1万年前!专家直言年轻人不喝因为还没融入主流社会
2024-12-13 极越汽车“闪崩” 车主恐慌出手:新提的车二手价格几近腰斩
2024-12-13 不挂大众标的速腾 新款捷达VA7预售:11.8777万
2024-12-13 AMD实现处理器效能提升30倍!比原定时间提早一年
手游巴士
手游巴士