您的位置:首页 > 互联网

英特尔至强芯片「英特尔至强处理器助力Aible加速生成式AI工作负载」

发布时间:2024-07-01 20:37:41  来源:互联网     背景:

通信世界网消息(CWW) 近日,英特尔与端到端Serverless(无服务器)生成式AI和增强型分析方案提供商Aible合作,为企业客户提供了创新的解决方案,助力其在不同代际的英特尔®至强® CPU上运行生成式AI与检索增强生成(RAG)用例。此次合作包含了工程优化和基准测试项目,显著增强了Aible以低成本为企业客户提供生成式AI结果的能力,并帮助开发人员在应用中部署AI。在双方的通力合作下,该可扩展、高效的AI解决方案可通过高性能硬件帮助客户迎接AI挑战。

 英特尔至强处理器

英特尔数据中心与人工智能事业部高级首席工程师Mishali Naik表示:“现在,客户正在寻求高效的企业级解决方案以充分释放AI潜力。我们与Aible的合作,也表明了英特尔正与行业紧密协作,推动AI创新,降低客户使用英特尔至强处理器运行最新生成式AI工作负载的门槛。” 

至强处理器的生成式AI性能:Aible的解决方案展示了CPU如何显著提升从运行语言模型至RAG的一系列最新AI工作负载性能。基于针对英特尔处理器的优化,Aible技术采用高效、智能的“端到端无服务器”方法,仅在产生用户请求时才会进行资源消耗。例如,基于用户查询,向量数据库仅需几秒即可激活并检索相关信息,而语言模型同样只需简单启动即可处理并响应用户请求,这种按需操作的运行模式有助于企业降低总拥有成本(TCO)。

虽然在多数情况下,RAG功能需通过利用GPU和加速器的并行处理能力来实现,但Aible的无服务器技术与英特尔至强处理器相结合,可使RAG用例完全由CPU来驱动。性能数据显示,多款不同代际的英特尔至强处理器均可高效运行RAG工作负载。

配置详细信息如图,结果可能会有不同

 重要意义:Aible通过无服务器的方式使用CPU,可在多个客户之间更为安全地共享底层计算资源,从而帮助客户有效降低生成式AI项目的运营成本。这种降低成本的方式可以类比为用户仅需在使用时购买电力,而非直接租赁发电机。此外,随着生成式AI需求的增长,性能优化和节能降耗变得愈发重要。Aible所提供的基于CPU的服务,为客户提供了一种经济、高效的解决方案。

iqoo neo5活力版销量

根据Aible的基准测试分析,当客户采用基于CPU的无服务器解决方案运行RAG模型时,成本节省可高达55倍1。大幅降低的成本证明了Aible独家方法的有效性,同时这种无服务器的CPU采用方式也减少了通过共享服务或专用服务器构建更为昂贵的、基于GPU的基础设施需求。

此次英特尔及英特尔实验室与Aible的合作,共同优化了至强处理器上的AI工作负载。值得一提的是,通过优化Aible针对AVX-512的代码,Aible在至强处理器上实现了显著的性能及吞吐量提升,这也彰显了战略性的软件优化对于整体效率的影响。

郭明錤预测iphone13生产厂家

在Aible平台的支持下,RAG模型与英特尔至强处理器的结合可推动以下应用落地:

· 自然语言处理(NLP)

· 推荐系统

intel至强处理器性能排名

· 决策支持系统

intel至强处理器性能排名

· 内容生成

英特尔与Aible的合作始于第四代至强处理器的发布。此后,双方针对至强处理器的AI工作负载、代码和库进行了一系列优化,并大幅提升了Aible的产品性能。


返回网站首页

本文评论
oppo手机下面三个键怎么设置静音「OPPO Find N3真机谍照曝光:新增拨动式静音按键」
近日,网络上出现一组据称是一加Open真机的谍照,不出意外的话,该机对应的国内版机型正是OPPO Find N3。 从流出的谍照来看,该机将摒弃前代的“矮胖”设计,改用传统的直板机比...
日期:10-07
波导手机百度百科「波导手机」
是中国品牌手机的代表之一,是国有企业中努力打造自主品牌的代表。的发展可以追溯到上世纪90年代,当初是在向台湾学习生产手机,之后又经过多次改良、创新和发展,成功推出了一些经...
日期:05-31
高大强原型是谁「高启强原型是谁?导演揭秘 不是刘汉!」
2023年开年大剧《狂飙》口碑及评分一路飙升,目前豆瓣评分已经达到9.1分,超过60%的人给出了满意的五星好评,引发了各种话题,其中之一便是反派角色高启强的原型是谁。剧中,高启强从...
日期:02-02
三星为什么退出lcd「三星显示已开始为AR设备研发硅基LED微显示屏」
7月18日消息,据外媒报道,随着苹果首款头显产品Vision Pro在6月份正式推出,AR/VR/MR等头显产品也就将成为各大公司下一个重要的竞争领域,对显示屏这一关键部件的需求在未来几年也...
日期:07-18
百度营销推出“品牌 BOT” 对话式广告产品
8月31日 消息:百度营销推出了一款名为 “品牌 BOT” 的对话式广告新产品,旨在帮助企业与用户建立更深层次和贴心的双向交流通路,提升用户信任感和粘性。品牌 BOT 具有识别用户...
日期:08-31
战略咨询专家王志纲:当智能化汽车与年轻人结合,中国将成为全新的“车轮上的民族”
中国著名战略咨询专家、智纲智库创始人王志纲做主题演讲 (来源:网易科技频道) 作者:普子胥12月22日,第十届以“智能涌现·发现未来”为主题...
日期:12-22
超越奈飞,迪士尼只用了5年_奈飞和迪士尼的竞争
猫王收音机为什么叫猫王   作者/连冉   编辑/郑玄   从第一次推出流媒体视频服务开始,只用了短短五年时间,迪士尼就掀翻了Netflix流媒体视频霸主的宝座。   迪士尼8月...
日期:08-12
华为或推最便宜折叠屏:nova系列 定价不到5000元「华为最便宜的折叠屏」
快科技6月12日消息,随着各大厂商的频频发力,目前折叠屏手机的门槛已经一降再降,5000-6000元就能体验到折叠屏手机了。16g+1tb手机当然,这个价格已经足以入手任何品牌的高端旗舰,...
日期:06-13
美国it产业「生成式AI去年爆火,但美国IT行业就业岗位仅增长700个」
1月8日消息,2023年,尽管生成式人工智能在企业和投资者中引发了巨大的热潮,但随着企业纷纷裁员并寻求削减成本,信息技术(IT)领域的招聘依然出现了大幅下滑。根据咨询公司Janco Asso...
日期:01-08
国产助听器品牌强力突围,玖益助听即将亮相发布,全网热烈开售
高品质生活离不开“耳聪目明”四个字,生活在现代都市的我们,不仅要看到听到,更要看得丰富,听得清晰。品质生活的要求提升催生出广阔的消费市场,助听领域正是其中的典型代表之一。...
日期:04-24
苹果向开发者送出限量版手提袋、徽章等,WWDC23明天凌晨开幕_苹果开发者优惠
 6 月 5 日消息,苹果公司为 WWDC23 开发者准备了限量版的礼品包,包括手提袋、徽章等。特斯拉 方形方向盘mate50 pro5g手机壳化妆品带货话术WWDC23 将于明天正式开幕,苹果公司...
日期:09-25
淘里里是谁「虚拟偶像厘里担任淘麦VIP品牌代言人」
近日,阿里影业“淘麦VIP”正式宣布虚拟偶像厘里Leah为品牌代言人,并推出全新品牌MV《Just Like Dat》。据悉,淘麦VIP由淘票票与大麦于2021年7月联合发布,致力于打通电影和演出双...
日期:03-24
AMD B650 系列主板 10 月上市_b570主板 amd
IT之家 8 月 30 日消息,在今天的 AMD 发布会上,AMD 宣布旗舰的 X670 系列主板将随锐龙 7000 处理器在 9 月上市,10 月份,性价比更高的 B650 系列也将上市,而且还包括一款B650E “...
日期:09-22
没有数据 双11收官京东、天猫战报这样说「双11天猫京东手机战报」
11月12日消息,从10月下旬就开始的“双11”折扣季在11月12日零点收官。对于第14届天猫双11的表现,天猫官方表示:今年天猫双11稳中向好,交易规模与去年持平。天猫去年双11的交易额...
日期:11-14
谨慎升级!苹果关闭iOS 16.3.1验证通道,用户已无法降级
苹果公司在昨天发布了iOS 16.4.1的更新,此后关闭了iOS 16.3.1的验证通道,这意味着苹果iPhone用户将无法再降级到该版本的系统。目前,iOS 16.4、iOS 16.4.1和iOS 16.5测试版仍然...
日期:04-09
小红书正内测自研大模型“小地瓜”:已达国内主流水平_小红书各种薯有什么区别
快科技4月30日消息,据媒体报道,小红书已经开始在部分内部产品中,灰度测试自研通用大模型基座小地瓜”。报道表示,有知情者透露称,小红书对上线新AI产品的态度非常谨慎,原因是害怕...
日期:04-30
《敢达争锋对决》二周年庆典在即 八大活动礼物送不停_敢达争锋对决新年活动
  国内首款正版敢达3D动作对战手游《敢达争锋对决》即将迎来2周岁生日,从2019年12月21日至2020年1月19日,一场持续30天的超大型二周年庆典隆重开启。海量福利礼品嗨翻天,201...
日期:02-28
今年十五的月亮几点最圆「今年中秋十五的月亮终于十五圆了 下一次要等到2030年」
但愿人长久千里共婵娟”,明天9月29日就是我国传统节日中秋节”,此次中秋又赶上国庆,双节恰逢,除了为节日增加更多欢乐之外,也让假期增长到了八天。他们是科学家,是我国科学发达ip...
日期:09-28
模型大学「共赴智能新时代!大模型智能应用生态大会盛大开启」
声明:本文来自于微信公众号CSDN(ID:CSDNnews),作者:沭七,授权转载发布。亲爱的开发者朋友们,过去这一年,风起云涌,一路狂奔,由 ChatGPT 所带来的 AGI 巨变仍在进行中。百模大战之后,大...
日期:01-12
返回舱成功着陆!神舟十四号载人飞行任务取得圆满成功「神舟十二号载人飞船返回舱成功着陆意义」
(原标题:返回舱成功着陆!神舟十四号载人飞行任务取得圆满成功) 特斯拉机器人发文mixfold手机测评 神舟十...
日期:12-12