英特尔最强服务器CPU来了!AI性能直接翻倍
英特尔最强服务器CPU来了!AI性能直接翻倍
服务器CPU领域持续多年的核心数量大战,被一举终结了!
英特尔最新发布的至强® 6 性能核处理器(P-core系列),超越了过去单一维度的竞争,通过“升维”定义了新的游戏规则:
在过去,CPU升级换代往往要在单个芯片上集成更多的核心,但这难免会受到工艺和芯片尺寸的限制,更别提与IO和内存的匹配难题。
这一次,至强® 6 性能核处理器采用了计算芯片单元与I/O芯片单元解耦的分离式模块化设计,可以灵活组合不同数量的计算单元,实现核心数量的扩展及内存和IO的同步强化,保证更优的整体性能和能效。
用最直观的方式感受一下:
2023年12月15日,英特尔数据中心与人工智能集团副总裁陈葆立从裤兜里掏出第五代至强® 可扩展处理器,还只有64个核心。
2024年9月26日,还是陈葆立,同样从裤兜里掏出至强® 6 性能核处理器,却直接翻倍到128核心。
两款处理器外形大小相似,都能轻松放入口袋,但性能却发生了质的飞跃。
具体来说,刚刚登场的是至强® 6性能核处理器大家族中的先锋+顶级战力——英特尔® 至强® 6900P系列。
拥有多达128个性能核和504MB的超大L3缓存,更大、更宽的内存支持,更多、更快的IO能力。非常适用于各种数据和计算密集型应用任务,比如科学计算、海量数据处理,还有AI。
看到这里,可能很多人会有疑问:你们又要说用CPU跑AI?是GPU它不香了么?
NoNoNo,我们是想说:有了这款CPU,你的GPU或其他的AI加速器,会更香!
谈到这个话题,就要先说说AI服务器。
在生成式AI应用百花齐放的当下,AI服务器的重要性可谓是不言而喻,无论是对于大规模的训练、推理,亦或是RAG等任务,都对其提出了更高的要求。
也正如综合市场预测数据从侧面反应出来的那般:
我们都知道AI服务器里GPU或AI加速器很重要,却很容易忽视其中CPU的作用。一个真正为AI服务器或AI数据中心基础设施设计的出色的CPU,应该是什么样的?
英特尔® 至强® 6 性能核处理器,可以说是给出了一个正解。
外媒甚至评测过后,对英特尔这次的新CPU给予了极高的评价:
嗯,用中文来说的话,就是英特尔至强,这次是真的至强(达到最强)了。
那么英特尔® 至强® 6 性能核处理器是如何解锁这种认同的呢?
至强,何以至强
首先要说的是算力。
英特尔® 至强® 6900P系列产品此次最亮眼的128核(三个计算芯片单元),这就是它看似符合此前游戏规则的一大技术亮点。
通过核心数量的不同排列组合方式,至强® 6 性能核处理器可以应对不同的场景来提供不同核心的型号,除了最高128核的产品系列(6900P)外,还有最高86核(2个计算芯片单元),最高48核(1个计算芯片单元)和16核(1个计算芯片单元)的产品系列。
用来做这种排列组合的模块中,计算芯片单元采用的是Intel 3制程,包含一体式网格、核心、缓存、内存控制器等,可以保证数据传输的一致性。
I/O芯片单元则是采用Intel 7制程,包含UPI、PCIe、CXL和加速器引擎等。
不同于第五代英特尔® 至强® 产品,至强® 6是将I/O和计算两个单元进行了解耦,不仅易于做核数的扩展,还有利于验证、重复和灵活使用。
除此之外,英特尔® 至强® 6 性能核处理器的亮点还包括:
6400 MT/s DDR5
8800 MT/s MRDIMM内存
6条UPI 2.0链路;速率高达24 GT/s
96条PCIe 5.0/ 64条 CXL 2.0通道
L3缓存高达504MB
支持FP16数据格式的英特尔® AMX
接下来要说的是存力。
至强® 6 性能核处理器超脱此前游戏规则的亮点就藏在其中。
它同时支持了更快的DDR5内存(6400MT/s)和更“宽”的MRDIMM内存(8800MT/s)。
仅把前者替换成后者,就已经能让科学计算和AI场景的多项任务提升7%-33%不等了。而且相比此前至强® CPU Max采用的HBM,MRDIMM内存的引入,不仅带宽和速度优势更明显,它与CPU解耦的型态,也更利于用户的灵活采购、配置与升级。
存力除了内存本身的性能,还包含CPU与内存之间的互连技术,至强® 6导入了最新的Compute Express Link 2.0 (CXL 2.0) 。
CXL 2.0支持多种设备类型,且可向后兼容,实现对内存和存储设备的灵活扩展。
支持链路分叉、更强的CXL内存分层支持,以及以受控热插拔的方式添加/移除设备,为未来的数据中心架构带来了更多可能性。
更值得一提的是至强® 6独占的“Flat”内存模式,CXL内存和DRAM内存被视为单一的内存层,让操作系统可以直接访问这一统一的内存地址空间。
这样的分层管理可以确保最大限度地提升内存使用效率,并且实现利用好CXL内存扩展而无需修改软件。
如此这般能对内存速度、带宽、容量和可扩展性全面兼顾,已经形成了至强® 6 性能核处理器独树一帜的竞争力。
具体到服务器设计上,CLX2.0可以支持每机提供8TB内存容量扩展,同时提供384GB/s的内存带宽扩展。
当然,作为CPU的至强® 6 性能核处理器并没有忘记自己的本份,把存力与算力的硬指标优势结合起来,转化成真正的优势,才是它被看好的底气。
在算力方面,除了更多内核,它还有内置加速器与指令集更新带来的加成。
主攻AI加速的英特尔® 高级矩阵扩展(Intel® AMX)新增对FP16数据类型的支持,现已全面覆盖 int8、BF16和FP16数据类型。
其在每个内核中的矩阵乘加(MAC)运算速度可达 2048 FLOPS(int8)和1024 FLOPS(BF16/FP16),能大幅提升 AI 推理和训练性能。
英特尔® 高级矢量扩展 512(AVX-512)虽然是员老将了,但在得到如此丰沛的内核资源支持后,也依然是科学计算、数据库和 AI 任务中的矢量计算担当。
这些加速器的升级与焕新带来的成果就是下图这种多负载性能表现普遍倍增的现象,在AI领域,尤其是在Llama2-7B上的提升直接达到了前一代产品的3.08倍。
最后在硬件增强的安全特性方面,英特尔早期的方案为SGX,但从第五代至强® 开始新增了TDX方案。这些看似难以通过Benchmark数值来证明自身价值的技术,实则不可或缺,是确保关键数据和应用更为安全可靠的压舱石。
而安全,恰恰是目前AI数据中心或智算中心这种涉及海量数据、关系万千机密和隐私的环境中较少提及,却最应补足和巩固的一环。
说了这么多,如果要用一句话总结至强® 6 性能核处理器,尤其是6900P系列产品的定位,那就是“更强通用计算,兼顾AI加速”了。
那么新处理器具体都有哪些用法,表现又如何呢?
还请继续往下看。
全能型CPU:加速AI推理,统领异构计算
首先,至强® 6 性能核处理器可以做“独行侠”,直接加速AI推理,助力AI应用普及。
用CPU做AI推理加速,其意义并非在于与GPU或其他专用加速器竞争极致的速度或效率,而是要在一些成本、采购、环境等条件受限的情况下,借助CPU部署更广泛、人才储备更扎实和应用更便捷的优势,让AI能够更快、更有效地落地。
带着这样的整体目标,英特尔在软件生态和工作负载优化方面投入了大量精力,以确保用户能够充分发挥至强® 6 性能核处理器的潜力。
例如,英特尔与TensorFlow和PyTorch等主流深度学习框架进行深度合作,将针对英特尔CPU的优化集成到官方发行版中,从而使得在英特尔CPU上运行深度学习模型时,性能得到显著提升。上文提到的Llama2-7B成绩便是这些努力的成果之一。
另外,至强® 6 性能核处理器还可以做“指挥官”,强化AI系统整体实力。
这其实是很多用户更为熟悉,也是至强® 6性能核处理器更主打的应用方式,所谓“指挥官”,另一个名称就是机头(head-node)CPU或主控CPU。
如果将至强® 6 性能核处理器用作AI服务器的机头CPU,那么其在算力(更强的单线程性能)、存力(对MRDIMM内存和CXL内存扩展能力的支持)以及 I/O(更多的PCIe 5.0通道)等方面的优势和潜能就能更加充分地发挥和释放出来。
使其能够与GPU或专用的AI加速器高效协作,出色地处理数据预处理、数据传输分享和混合工作负载。
我们最初的设问,至此终于拼凑出了一个更为完整的答案,即为何至强® 6 性能核处理器能够被称作AI服务器或AI数据中心的“严选”,甚至是优选CPU ?
这正是由于它既能够单枪匹马地加速AI推理,又可以居中协调以提升异构系统的整体性能输出。
更不必说,它还能够兼顾众多传统但同样不可或缺的应用负载,例如前文提及的科学计算和数据库,以及高性能云基础设施构建等任务。
以Flatiron Institute的案例来说,作为一家科研机构,他们对科学计算有着强烈的需求。通过测试得知,至强® 6 性能核处理器在常见科学计算负载上表现优异。
他们还觉得对MRDIMM内存的支持将进一步突破传统DDR内存的性能瓶颈,推动数据密集型科学发现。
在本次至强® 6 性能核处理器的发布会上,英特尔也展示了本地数据库软件合作伙伴——科蓝软件的成果。
英特尔市场营销集团副总裁、中国区&行业解决方案和数据中心销售部总经理梁雅莉在介绍生态系统支持状况时表示:
值得一提的是,在她分享中出现的中国合作伙伴数量众多且都是各领域的核心力量,英特尔虽然在产品研发上有了更多创新,但在商业模式上仍然非常依赖开放架构平台之上的产业合力。
十数家OEM、ODM、OSV和ISV在至强® 6 性能核处理器发布时同步推出新产品,以及多家云服务提供商的支持,在英特尔看来,才是新品真正走近用户和价值放大的基础。
建好AI服务器,CPU不能是短板
从前面列举的众多数据和用例可以看出,在当前AI应用加速落地、新推理计算范式和合成数据等趋势的推动下,AI算力需求越来越注重推理和复合工作负载。
在这之中GPU或专用加速器固然重要,但CPU作为整个系统的“指挥官”,绝不能成为短板。
大家需要真正兼顾通用计算,以及AI服务器及AI数据中心场景的CPU产品。它不仅能支持广泛的第三方GPU及AI加速器,与它们组合形成强大的异构计算平台,还能在其中补足GPU或专用加速器覆盖不到或不足的地方,为更多样和复杂的场景提供灵活的算力选择,并增强整个AI平台的稳定性、安全性和扩展性。
英特尔® 至强® 6 性能核处理器的出现,就为AI计算带来了这样一个全新的支点。
(梦晨 金磊)
免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。
标签:
相关阅读
精彩推荐
阅读排行
相关词
- PGG眼部按摩仪礼物意大利前总理马泰奥·伦齐传递美好情谊
- 千万不要小瞧肌肤炎症,让杜莎之谜小黑瓶还你无暇肌肤
- 俞敏洪与李佳琦同道歉 直播行业不能卡在低价和IP滥用上
- 江苏扬州:独领风骚30年“扬稻6号家族”让“饭碗”端得更稳
- 高质量发展调研行丨小苹果创出产业大天地——陕西洛川苹果产业集群见闻
- 江苏徐州:专精特新“新变量” 产出高质量发展“新增量”
- 河北发现完整“热河生物群”恐龙化石
- 新语丨用好短视频,讲好中国故事
- 亚运会前看浙江|助燃运动热情,传递爱与希望——杭州亚运会火炬手谈“薪火”相传
- 导出来PDF损坏原因有哪些
- 弹窗提示zxpsignlib-minimal.dll丢失如何解决
- 如何解决电脑提示migisol.dll文件丢失的问题?
- 提示加载witnesswmiv2provider.dll错误解决方法
- 江苏淮安:办好民生实事项目 优化群众出行条件
- 促进房地产市场平稳健康发展 多个二线城市全域取消限购政策
- 江苏无锡:守住“生态本底”,让绿色成为高质量发展鲜明底色
- 小米私密文件误删找回方式是什么
- iphone15边框变窄了没有
- 2023国际青年设计师邀请赛周五开赛 居庸关长城“跨界” 变身时尚设计舞台
- “福运武清”乡村振兴主题文学创作采风活动举行
- 手提电脑开机蓝屏没反应解决方式有哪些
- 眉笔净含量1克价格或超黄金,李佳琦说的“不贵”到底贵不贵?
- 更多优质项目在柯桥步入快车道
- 8月社会融资规模和人民币贷款均实现同比多增
- ltool6.dll文件丢失如何修复?
- 青海40名订单定向医学生签订就业协议
- 1至8月铁路运输业三大指标稳步增长
- 促进文明交流互鉴 2023世界大河文明论坛将在郑州举行
- 2023中国民营企业500强发布:京东、阿里、恒力位居前三
- “盐”值出众,一见倾心,彰显“最盐城”文化的魅力
- 陕西洛川:一颗苹果背后的“产业链”发展
- iphone15pro和14pro的区别
- 重庆:七项任务提升基层能力
- 未来与李佳琦合作模式是否会有变化?花西子:不回复
- 天舟五号撤离空间站 完成多个空间应用项目实验
- ebueula.dll修复方法
- 天舟五号撤离空间站组合体
- 闪耀暖暖绚彩星梦活动介绍
- 电脑磁盘故障怎么恢复
- 出生“一件事”长三角跨省通办
- c盘文件恢复后打不开了怎么办
- 华为mate60pro芯片哪里生产
- 《上古纷争》英雄介绍 暗系诅咒虚弱「洛基」
- 数字里看发展 我国教师队伍结构不断优化、素质不断提升
- 潭牛文昌鸡:打造文昌鸡产业“海南样板”
- 内蒙古巴彦淖尔环境综合治理显成效 “塞外明珠”被“擦亮”
- 河北省兴隆县举办2023年“质量月”活动启动仪式
- 青岛—加德满都航线正式开航
- 土豆骑士好玩吗 土豆骑士玩法简介
- 三亚拟对35条街道进行精品化建设改造
- 四川省资阳市特检所开展工业管道安全隐患排查
- 如何修复遭损坏cserhelper.dll方法
- 重庆市北碚区市场监管局用好“三面镜子”保障群众“两节”食品安全
- 狂欢,以啤酒的名义!2023儋州青岛啤酒节即将火热开启
- 比亚迪海豹DM-i重磅上市
- 未来智能豪华轿跑阿维塔12全球首秀
- 湖北机场集团与杜福睿集团签订合资合作协议
- 海南航空无陪儿童服务升级,安心呵护服务“可视”
- 华为手机如何给财神爷上香
- 从“制造”走向“质造”!长沙启动“质量月”活动
- 提示wshqos.dll丢失报错如何解决
- 杭州新开迎亚运重点航线 直飞迪拜、阿拉木图
- 2023年“诚信兴商宣传月”启动仪式成功举办
- 文字玩出花美装天梯怎么过关 文字玩出花美装天梯通关攻略
- 山东:打造中医药传承创新“齐鲁路径”
- 嘉善赴上海专场路演科创项目
- 万联证券:化妆品行业个股业绩表现分化 静候需求端修复
- 命运方舟寂静岛岛之心怎么获取 命运方舟寂静岛岛之心获取方法
- 安信证券:原油有望高位震荡带动上游资本开支 油服行业景气向好
- 临高开展客车整治行动
- 美邦股份可转债募资必要性合理性存疑
- 二〇二三年国家网络安全宣传周开幕式举行
- 上海37家市级医院开启科普宣传周
- 重庆市巴南区“四个重点”开展电子计价秤专项整治行动
- 虚销“空气粮” 私卖“升溢粮” 假购“增数粮”
- 中信建投:8月社融超预期 三大拐点确立下银行股估值将明显修复
- 今年“月饼圈”斑兰成“新宠” 海南多家企业推出“斑兰月饼”
- 难忘师生情 华夏航空开展教师节空地活动
- 别走错!广州地铁这个站点出入口有调整
- 《宝可梦:大集结》火焰鸡新演示 9月14日上线
- 《动物派对》发布联动“白菜狗”预告视频 推出联动皮肤
- 山东 | 山水禅心,锦绣五莲
- 《漫威蜘蛛侠2》因为版权问题纽约没有克莱斯勒大厦
- AR手游《怪物猎人Now》真人发售预告 9月14日上线
- 山西证券:8月汽车产销超预期 行业景气度继续提升
- 2023年国家网络安全宣传周网络安全博览会举办
- 10个重点行业稳增长方案发布
- 科普园地|复杂的三体问题存在上万个解决方案?
- 回暖!央行公布关键数据,释放什么信号?
- 央行:8月末社会融资规模存量为368.61万亿元,同比增长9%
- 《鬼灭之刃》派对游戏新作正式公开 2024年发售!
- 民营企业借力资本市场持续做优做强
- 中国中小企业发展指数连续3个月上升
- 汽车市场“淡季不淡” 促消费政策效应渐显
- CIOE 2023丨深挖场景价值,共连数字化美好未来
- 《女神异闻录 异空之塔篇》9月14日登陆Switch PC版稍后推出
- 《心灵杀手2》发布新8分钟实机视频 第三人称女探员战斗
- 《暗黑破坏神4》1.14补丁说明 赛季经验加成提升!
- 网传《GTA6》售价定为150美元 玩家们有点慌了!
- 《诱拐事件》steam页面上线 写实风格恐怖新游
- 第十二届“郑仙非遗文化月”开幕 6场系列活动等你来
- “潘鹤与新中国雕塑研究展”开幕
- 安徽宁国:畲乡晒秋庆丰收
- 为全球跨境投资提供“中国样本”
- 《Crisol: Theater of Idols》上线Steam 第一人称恐怖新游
- 中国中小企业发展指数连续三个月上升
- 上海崇明港西渔光互补光伏发电项目全容量并网
- 海珠区建筑联盟成立
- 《卧龙:苍天陨落》DLC“称霸江东”短片 新怪物可怕
- 2023绿色低碳创新论坛举行 科技部:将建碳达峰碳中和科技创新监测评价机制
- 增城|派潭“村晚”走进上九陂村
- 育碧免费FPS游戏《不羁联盟》延期 因未通过主机验证测试
- 《极限竞速:Motorsport》发布18分钟实机预告视频
- 2023世界智能网联汽车大会将于9月20日至24日在京召开
- 《消逝的光芒2》出现大量差评:禁用MOD、微交易!
- 江苏实现换电重卡跨城际多主体互通互换
- 利德治疗仪:高新技术领军,打造健康产业
- LPL:周淑怡恋情败露,得罪大量铁粉,与劣迹艺人拍拖,下场悲惨
- 北京发布地质灾害气象风险黄色预警
- 如何解决iasacct.dll加载错误问题?
- 广东将防汛Ⅱ级应急响应调整至Ⅲ级
- 广深城际9日停运56趟列车
- 3dmax2012缺少dll文件处理有哪些方法
- 孕期吃的比平时多很多,为什么还会贫血?常见于3种原因!
- 崩坏学园2负重提高途径推荐 崩坏学园2怎么提高负重
- 今明两天,海南岛部分地区有大到暴雨、雷暴大风!儋州最新天气
- 北京石景山发布暴雨黄色预警和地质灾害蓝色预警
- 就爱做蛋糕好玩吗 就爱做蛋糕玩法简介
- jpeg2000.dll重新安装的解决方法
- 中央气象台9月9日10时继续发布暴雨黄色预警
- Win11宽带连接方法
- 汽车销售模拟器好玩吗 汽车销售模拟器玩法简介
- 原神灵矩关湖宝箱在哪里-灵矩关湖宝箱在哪里介绍
- 保卫萝卜4新春厨艺秀第8关怎么过
- 罗马诺:尤文计划与拉比奥特商谈续约,球员合同明夏到期
- 我国科学家第一次在高山上发现陨石坑
- 抖音简笔画小人(抖音简笔画)
- 车库被淹,物业未及时通知挪车,要担责吗?法院判了!
- 人人都离不开工具!PPT之父去世:塑造现代社会信息沟通方式
- 新疆博湖县南美白对虾喜获丰收
- 穿越时光的“慢火车”,大山深处最美的风景
- 当“非遗藤编”走向世界
- 天命奇御战斗模式及八卦修炼系统体验心得 游戏通关心得分享
- “追梦少年”来到中国青年报 探秘“一张纸的力量”
- 开学季高校校长花式宠新:有的凌晨还在接机,有的亲手制作非遗糕点,还有的送上生日蛋糕
- 周杰伦天津演唱会发生意外?经纪公司凌晨回应
- 兰州通报“网民反映污水排入黄河”调查情况
- 电脑蓝屏后键盘鼠标都不亮怎么办
- 工业题材电影创作研讨会在京举办
- 房企动态|金泰樾系三子,金地清峯上、招商雲蘭营销中心开放!