网站首页

产品中心

智能终端处理器 智能云服务器 软件开发环境

新闻中心

关于ob欧宝

公司概况 核心优势 核心团队 发展历程

联系ob

官方微信 官方微博
主页 > 产品中心 > 智能终端处理器

ob欧宝AI时代的至强 可扩展处理器如何为云服务保驾护航?

发布时间:2023-12-24 04:25浏览次数: 来源于:网络

  ob欧宝2023年,生成式AI研究和应用的爆发给云计算产业带来了全新的机遇和挑战:大模型需要庞大的算力支持,用户普遍需要向云计算厂商购买算力服务;且由于大量用户涌入云服务市场,云厂商需要尽快升级数据中心算力以应对AI需求,同时持续降低TCOob欧宝,为用户提供价格合理的算力资源;此外,AI应用开发还涉及大量隐私敏感数据的云端存储和使用,云厂商也要全力保障这些数据的安全可靠,打消用户后顾之忧。

  基于上述需求,云厂商迫切需要对已有硬件基础设施进行更新换代,要求新一代CPU能在保障基础设施平稳升级迭代的同时,具备更强的性能、更低的TCO,同时能够满足云端多样化工作负载需求的较强AI能力:

  1. 对于大型云服务基础设施而言,稳定性、可靠性依然是王道,因此云服务厂商升级硬件时决策更加谨慎,偏向于在有着长期延续性的主流平台上逐渐迭代,保护上层软件应用投资,减小对基础设施开发运维部门的冲击。

  2. 大模型在云端训练、推理的过程需要用户将大量数据传输至云端,云厂商需要采取更强的安全措施,如硬件级的安全引擎来更好地保障敏感数据的安全,确保云实例间的数据隔离,预防恶意入侵和泄漏。

  3. AI应用涉及密集的低精度矩阵运算,需要较大的内存空间。对于大模型推理应用和中小尺度(参数规模低于20B)模型的训练应用而言,其在搭载AI加速器的CPU上运行可以获得非常好的能耗比与性价比ob欧宝,还能够以极具优势的TCO满足云厂商大多数AI服务的需求。同时CPU的通用计算能力也可以为云厂商提供充足的灵活性,有效保护基础设施投资。

  面对上述需求,英特尔作为服务器CPU领域的技术领导者,继年初发布第四代至强® 可扩展处理器之后,加快了产品更新节奏,于上周发布了第五代至强® 可扩展处理器,其可与上一代处理器兼容,提供硬件级安全和可信服务,并通过丰富的AI产品组合驾驭整个AI管线,从而进一步壮大了应对人工智能时代的产品组合。

  相比上一代产品,第五代至强® 可扩展处理器的核心数量增加至64个,拥有更高的单核性能和内存带宽,三级缓存容量提升近3倍。其每个内核都具备AI加速功能,内置的英特尔® AVX-512及英特尔® AMX,能使机器学习、深度学习和大模型应用的性能大幅提升。第五代至强® 可扩展处理器还能通过英特尔® SGX/TDX为使用中的云端数据提供端到端硬件级防护能力。与上一代至强® 可扩展处理器相比,五代至强® 在相同功耗下的平均性能提升了21%,而AI推理和训练性能的提升更是高达42%和29%。

  一系列技术创新,使第五代至强® 可扩展处理器成为AI时代云厂商的基础设施关键角色。目前,已经有多家客户在实际业务中部署了第五代至强® 可扩展处理器,在实践中证明了它为用户带来的巨大收益提升。其优异的表现得到了客户的很高评价,也让更多准备升级云计算基础设施的企业对新一代至强® 有了更高的期待。

  2023 年京东云突破性地在数百个AI场景中应用了大模型,在数百个营销场景中升级了原有工作流,显著提升了商家与消费者的购物体验。

  基于自研的言犀AI与大模型,京东云通过AIGC管道生成了30%的大促物料,京小智数字人、领航者营销平台也在大模型支持下获得了高达87%的商品推荐采纳率,消费者应答准确率提升30%。

  京东大模型第一次亮相就收获完美成绩,很大程度上要归功于其部署的基于第五代英特尔® 至强® 可扩展处理器的新一代自研服务器,与上一代自研服务器相比整机性能提升23%,关键的AI CV推理性能与 Llama v2大模型推理性能更是分别提升38%与51%。

  取得如此显著的AI推理能力进步,秘诀在于第五代至强® 可扩展处理器搭载的英特尔® AMX加速引擎。其可以将INT8低精度矩阵运算速度提升一个数量级,再结合第五代至强® 可扩展处理器更高的内存带宽与更强的多核心互联能力,使AI推理性能相较上一代显著提升。在11.11大促中,第五代至强® 可扩展处理器和英特尔® AMX的组合在京东云承载的 AI 推理应用服务中大展身手,助力用户访问峰值同比提升170%,智能客服咨询服务量超14亿次,且并未增加能耗,也将京东云基础设施的运维成本维护在之前的水平内。

  对于云计算厂商而言,要让更多行业和组织信任云服务,就必须提供有足够说服力的安全隐私保障,所以云厂商迫切需要更高水准的硬件级安全城墙。

  对于云环境中使用状态中的数据,机密计算是实现其有效保护的良策,其为客户敏感数据提供了基于硬件设备的可信执行环境(Trusted Execution Environment, TEE),通过隔离保护的方式来防止未经授权的入侵者访问或修改处理中的数据。作为机密计算技术的重要引领者,英特尔® 软件防护扩展(英特尔® SGX)技术提供了应用层面的隔离能力;而在和阿里云的合作中,则由英特尔® TDX技术与阿里云新实例搭载的可信平台模块(TPM)相配合,结合阿里云自研的加密计算隔离环境enclave,为阿里云第八代企业级ECS实例g8i构建了一个基于虚拟化的硬件可信环境,即为整个虚拟化实例(包括虚拟机、容器)都构建出可信的边界,由此为客户提供了可信边界更大、更易部署的安全云环境ob欧宝。

  英特尔® TDX使TEE环境的可信边界获得了有效扩展,从而让IaaS、PaaS等环境中的云工作负载都能整体纳入机密计算的数据保护之下,能够有效抵御恶意威胁,加强云端数据隔离。

  阿里云自研的千问大模型就得到了英特尔® TDX的充分保护,实现模型数据端到端加密保护。英特尔® TDX技术为AI大模型这样需要向云端传输大量数据的应用场景铸就了足够牢固的安全保障,也为生成式AI应用广泛普及铺平了信任道路。此外,在引入第五代至强® 可扩展处理器之后,第八代企业级ECS实例在计算、网络、存储、安全等工作负载中的都得到了显著提升,在数据库、硬件加解密、AI应用、音视频等场景性能提升15%~25%不等。更重要的是,八代实例保持价格不变,使阿里云g8i实例可以用更小的性能开销保障用户的数据高度安全性。

  火山引擎的大规模云原生基础设施包含超过一百万台服务器、上千万容器实例,管理数十EB级别存储资源,需要应对10 亿+级QPS缓存峰值、10+TB/s的读写峰值带宽,支持数亿日活的应用访问。

  为了应对如此复杂的需求,火山引擎一直都选择和信赖英特尔® 至强® 解决方案,并率先引入第五代至强® 可扩展处理器,助其第三代弹性计算实例加码全新升级。

  与基于第四代至强® 的弹性计算实例相比,第五代至强® 可扩展处理器助力火山引擎释放了巨大算力和性能红利,其弹性计算实例整机算力提升39%,内存带宽提升17%,并在AI、视频处理性能、Java应用性能等方面均有40%左右的性能提升。火山引擎计划推出使用英特尔原生硬件加速技术的能力升级,以Nginx为例,使用英特尔® QAT进行数据压缩和证书验证操作的吞吐量最高可提升5倍;在RocksDB中,使用英特尔® IAA进行数据压缩读写的吞吐量最高可提升1.9倍。提升如此巨大的算力进化幅度,使火山引擎能够使用相同的实例数量应对更多业务需求。

  如今,火山引擎正在构建百万核心级别弹性资源池,为业务的流量增长、体验创新与安全性增强提供海量算力保障。

  第五代至强® 可扩展处理器提供澎湃的算力的同时,还与上一代处理器兼容,共享架构与平台,大大减少测试和验证工作,其更高的性能、更好的安全性、更高的成本效益,已经在头部云服务提供商中得到全面验证。

  除硬件方面的诸多创新,第五代至强® 可扩展处理器在软件层面也搭建了良好的生态环境。例如,英特尔已经在Pytorch、Tensorflow和OpenVINO 工具套件等行业标准框架中提供了针对第五代至强® 可扩展处理器的优化,使得云厂商和用户能够以较低的门槛,快速利用如英特尔® AMX等处理器功能,打通AI应用的算力瓶颈。英特尔® Trust Authority鉴证服务则能充分验证TEE的有效性,发挥英特尔® SGX/TDX技术的优势。

  如果说数据中心是一台巨型计算机,那么CPU就是它的超级大脑,第五代英特尔® 至强® 可扩展处理器将一如既往地扮演核心角色。它与网络、GPU、软件技术栈等其他英特尔创新技术一起共同构筑了上层AI应用的根基。而这样的根基虽然能力强大,但并不需要用户为此投入大量精力学习或增加运维投入。由此,企业就能将主要精力投入在业务创新中,并在 AI 浪潮中紧紧把握住市场机遇,开启新的增长路径。

  原标题:AI时代的至强 可扩展处理器如何为云服务保驾护航?2023年,生成式AI研究和应用的爆发给云计算...

  12月18日,一项租房领域的吉尼斯世界纪录诞生。凭借1小时内用户点赞数量,自如成功创造了中国长租机构首...

  在12月23日举办的2023华为云AI院长峰会上,中国科学院院士、清华大学人工智能研究院名誉院长张钹发表视...

  12月23日,2023华为云AI院长峰会在云南丽江成功举办。峰会汇聚了来自国内顶尖高校的60名院士、院长、专...

  作为一场引领时尚潮流的盛会,今天我有幸参加了宝珠汇的珠宝私域展厅珠宝启幕 圣诞璀璨的活动。这个充...

  2023年12月21日,XbotPark机器人基地的总部新基地在东莞松山湖举办了盛大的开园仪式,并以时更迭启新...

  质量建设,品牌为楫。12月22日,由中国非处方药物协会主办的2023中国OTC品牌大会在北京盛大启幕,2023中...

  近日TV莱茵宣布:九识Z5智能车成为全球首个顺利通过ISO22737白天和黑夜场景测试的自动驾驶产品、...

  近日,2023第16届全国三维数字化创新设计大赛年度总决赛龙鼎奖颁奖盛典暨首届全国高校数智化发展院 校...

  原标题:AI时代的至强 可扩展处理器如何为云服务保驾护航?2023年,生成式AI研究和应用的爆发给云计算...

  热玛吉(Thermage)是一种非侵入性的肌肤紧致和眼部抗衰老技术,能够帮助年轻女性实现眼部肌肤的保养和改善...

  南宁-长春K2387次列车晚点将近四个小时,西安-长春K126次列车晚点三个多小时,北京-长春Z61次列车、广州...

  在音乐的世界中,新声总是令人期待。近日,一首由潘进勇全新演绎的歌曲《得亿》正式上线,以其独特的音...

  在快节奏的现代生活中,相亲成为许多单身人士寻找另一半的重要途径。其中,也在网作为知名的相亲平台,...

  艺术距离生活有多远?其实,生活的艺术就在身边。12月23日,德基卡萨帝艺术中心在南京德基广场正式开业...

  以往,艺术常被认为是少数精英人士的专属喜好。但随着经济发展和消费观的转变,更多人希望能在日常生活...

  2023年12月23日下午,共线年度湖南省商业联合会会员代表大会在万家丽国际大酒店...

  12月23日,备受期待的讲真杯最强记忆挑战赛第三季迎来激烈的决赛时刻,火热的竞技比拼点燃了这个寒冬。...

  3岁的楠楠(化名)从小是被爷爷奶奶带大的,因为爸妈工作忙,没有时间照照顾孩子,但是家人慢慢发现,楠楠已经...

  老师总跟我反应孩子上课注意力不集中,不是做小动作就是跟跟别的同学说话,经常扰乱课堂纪律,写作业拖拉磨...

  12月23日,全球首个超万吨双压射工艺发布暨技术签约仪式于安徽芜湖举行,这也代表着双压射工艺正式迈入...

  12月18日,一项租房领域的吉尼斯世界纪录诞生。凭借1小时内用户点赞数量,自如成功创造了中国长租机构首...

  冰雪季开幕式现场本次活动由武隆区文化和旅游发展委员会、重庆武隆旅游产业(集团)有限公司主办。区级...

  在12月23日举办的2023华为云AI院长峰会上,中国科学院院士、清华大学人工智能研究院名誉院长张钹发表视...

  飞梭点阵剥脱技术是一种通过激光电针刺激胶原蛋白再生的医学美容技术。胶原蛋白是皮肤中最丰富的蛋白质,...

  京南超级商业综合体王府井奥莱UP TOWN作为王府井奥莱回归北京的全新力作,从23年6月1日领取营业执照到开...

  今年以来,潞城镇深入学习借鉴千万工程经验,扎实开展农村人居环境整治五大攻坚专项行动,推动村容村貌...

  高净值人群最爱什么?有人说男士更爱腕表,女士则更关注服饰和时尚单品,而高端家居、跑车也是他们的心...

  立冬一过,年鱼飘香,三白潭进入一年中最热闹的冬捕时节。今天上午,位于仁和街道三白潭湿地的大潭,上...

  12月23日,2023华为云AI院长峰会在云南丽江成功举办。峰会汇聚了来自国内顶尖高校的60名院士、院长、专...

  作为一场引领时尚潮流的盛会,今天我有幸参加了宝珠汇的珠宝私域展厅珠宝启幕 圣诞璀璨的活动。这个充...

  12月22~24日,由中国非处方药物协会主办的首届OTC品牌大会(2023)在北京召开,众多医药行业的领军企业...

  随着户外活动的普及和人们对高品质生活的追求,户外电源的需求也越来越高。为了满足这一需求,正浩在睿...

  12月21日,工业设计赋能水城智造研讨会暨聊城市第二届水城杯工业设计大赛颁奖仪式在水城聊城举办,光明...

  12月21日晚10点,伴随观众席中热烈的欢呼声,为期一周比赛日的快手村BA广东站小组赛圆满落幕,石龙镇中...

  走进淮安九州通医药有限公司仓库,工人们正紧锣密鼓开展着一天的工作:每台装货的推车配备有4个周转箱和...

  著名好莱坞电影《地心历险记》讲述了地质学家特雷弗为了证明自己论点,经过艰难旅行,发现地球内部的确...

下一篇:ob欧宝智能芯片概念龙头股一览智能芯片概念股全部名单
上一篇:ob欧宝提升VR体验为何CPU更重要?

咨询我们

输入您的疑问及需求发送邮箱给我们