您的位置:首页 > 互联网

天玑9300支持内存硬件压缩技术,行业第一,让手机运行AI大模型更快速

发布时间:2023-11-09 22:55:50  来源:互联网     背景:

联发科最 新发布的一代旗舰级5G生成式AI移动芯片天玑9300,其创新的全大核架构设计与最 新的AI处理器APU等联发科特色技术的合并,为生成式AI应用提供了强大的动力,以实现引人入胜、丰富多样的生成式AI体验。同时,联发科也与大量的AI企业在业内进行深入合作,共同在移动平台上构造了一个充满活力的AI生态。

全新第七代AI处理器APU 790,为生成式AI而生

neo5 真我gt neo

仙剑奇侠传小说是姚壮宪写的

随着用户对生成式AI应用需求日益增长,端侧生成式AI便捷、安全性等优势便凸显出来。当然,部署端侧AI大语言模型需要强大的AI算力支撑。

天玑 9300 搭载联发科第七代AI处理器APU 790,为生成式AI而设计,拥有硬件级的生成式AI引擎,可以实现更加高速且安全的边缘AI计算,深度适配Transformer模型进行算子加速,速度是上一代的 8 倍。

同时APU790 的性能和能效得到显著提升,整数运算和浮点运算能力提升至前一代的 2 倍,苏黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分,AI性能成功霸榜,功耗更是降低了45%。在强大的AI性能支持下, 1 秒以内即可生成图片。天玑 9300 强悍的AI算力、创新的全大核CPU架构和Immortalis-G720 GPU都为端侧运行生成式AI打下坚实的性能基础。

同时,基于亿级参数大语言模型的特性,联发科开发了混合精度 INT4 量化技术,结合联发科特有的内存硬件压缩技术NeuroPilot Compression,可以更高效地利用内存带宽,大幅减少AI大模型占用终端内存,为端侧运行AI大语言模型突破手机内存限制,助力更大参数模型在端侧落地。

基于以上,天玑 9300首 次在vivo旗舰手机端侧落地 70 亿参数AI大语言模型,处理速度可达20 Tokens每秒。不仅如此,联发科突破了行业极限,已经与vivo成功在端侧运行了 130 亿参数的大语言模型。甚至,天玑 9300 已率先实现在移动芯片上成功运行 330 亿参数的AI大语言模型,领跑业界。

天玑 9300 还支持多模态生成式AI大模型,打造出“文生诗”“文生图”“文生趣图”等丰富有趣的端侧体验。

可见,天玑 9300 的AI算力和端侧生成式AI能力已领先行业,足以让用户随时随地AI创造力全飙。

生成式AI模型端侧技能扩充,带来全面、丰富的端侧生成式AI体验

与云侧生成式AI解决方案不同,由于硬件环境的差异,部署端侧生成式AI也需要考虑手机内存、存储容量、负载上限等因素。为此,联发科率先提出了先进的解决方案。

APU 790 支持生成式AI模型端侧技能扩充技术NeuroPilot Fusion,它可以基于基础大模型持续在端侧进行低秩自适应(LoRA,Low-Rank Adaptation)融合,在混合式AI的赋能下,可以基于 1 个基础大模型,通过云端训练,在端侧完成N个功能的融合,赋予基础大模型更全面、更丰富的生成式AI应用能力。

比如基于AI模型端侧技能扩充技术的“图生GIF动图”功能,用户可以根据一张照片更换不同的风格甚至表情,玩出个人专属风格的表情包,秒变表情包小达人。

AI开发平台NeuroPilot加速端侧生成式AI生态布局

基于强大的AI算力和先进的内存硬件压缩技术、AI模型端侧技能扩充等技术,天玑 9300 的APU790 将端侧生成式AI的速度和广度提升到了全新的水平。同时,为加速生成式AI在端侧部署和普及,联发科也凭借其AI开发平台NeuroPilot构建了丰富的AI生态,从底层硬件到工具链、模型中心以及开发生态,助力生态快速、高效地部署端侧生成式AI应用。

AI开发平台NeuroPilot支持Android、Meta LIama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型。

更为重要的是,NeuroPilot拥有一套完整且先进的工具链,除了NeuroPilot Compression低秩自适应融合,还有Speculative Decoding推测解码加速和模型优化与转化技术。

联发科的天玑开发者中心还可提供端侧生成式AI落地一站式开发者资源,分享端侧模型部署案例提升开发效率。目前已有 20 多个生成式AI合作伙伴加入生态共建。

联发科还携手业界合同伙伴打造精彩的生成式AI应用体验。虹软的生成式AI超 级分辨率技术基于天玑9300 APU 边缘计算能力,相比前代,性能可提升30%。在 25 倍放大的拍摄时,利用生成式AI超 级分辨率技术,可以拍出细节更真实的图像效果。

狗头logo设计

极感科技的生成式AI语意搜索技术也基于天玑9300 APU边缘计算能力,对比前代,性能可提升260%。比如在手机的相册中搜索照片,描述照片的内容即可在毫秒内精准搜到对应的照片。而且在断网状态下也能搜索,隐私也不会泄露。

Morpho的视频通话实时数字分身生成技术,同样基于天玑9300 APU边缘计算能力,对比前代,性能提升26%。一般的虚拟人像生成器需手动选取容貌样式花费时间。但基于视频通话实时数字分身生成技术,用户操作容易,仅需打开摄像头单帧图片即可瞬间生成数字分身。

基于天玑9300 APU边缘计算能力,慧鲤生成式AI防眩光技术性能可提升60%。在此技术加持下,无论是室外还是室内,在拍摄时如有眩光,只要轻松一暗即可消除眩光干扰。

可以看到,在AI端云融合的趋势下,天玑 9300 在AI算力、生成式AI用户体验和生态方面展现出全面的优势,为新一代旗舰级端侧生成式AI体验树立了新的标杆,强大生成式AI就要用天玑。

同时,联发科等生成式AI的领先者们正通过不断地技术革新和适当的生态布局,大力推动混合式AI计算,并为端侧生成式AI部署设计出了一套独自且高效的方法,全力以赴推进生成式AI在端侧的普及,旨在让更多的用户享受到端侧AI的个性化服务,带来全新的全方位智能体验,实现科技成果惠及全社会。


返回网站首页

本文评论
小黑盒发货慢_尖货慢做,天猫小黑盒的快与慢
  培根说:“我们判断一个事物的迅速,并非仅仅基于这件事情做得很快,而是观察其结果是否成功和有效。”   用通俗的话,来解释培根的说法,无疑是“疾驰的快马,往往只跑两个驿...
日期:09-26
科大讯飞刘聪:5月6日将发布“1+N认知智能大模型”_科大讯飞刘丹
4月7日消息,在近日召开的人工智能大模型发展论坛上,科大讯飞副总裁、研究院执行院长刘聪透露:科大讯飞“1+N认知智能大模型”将在5月6日正式发布。苹果严重安全警告漏洞其中,“1...
日期:04-07
快手升级职级体系,职级序列双轨变单轨,不涉及薪酬调整
8月17日消息,快手发布全员信,对推行4年多的职级体系进行升级。新职级体系中最大的变化,是将双职级序列并轨为单职级序列。据悉,快手此次职级体系升级不涉及薪酬调整。据了解,快手...
日期:08-17
传神州租车考虑从港股私有化 官方称不知情
  3月11日午间消息,有传闻称港股上市的神州租车正考虑私有化,神州租车方面回应称“不知情”。   据媒体报道,有匿名人士透露,神州租车正在进行私有化谈判,牵头的投资机构为...
日期:12-15
清华毕业求职「58岁清华毕业找不到超5000元工作 网上投简历半年无人问」
随着老年人就业等话题经常上热搜,外界也开始认识到低龄老年人求职的需求。据北京商报报道,大多数招聘平台基本没有专门针对老年人的招聘板块,他们在求职过程中主要依靠线下渠道...
日期:02-25
vivo X Fold2屏幕细节曝光:双2K E6屏、双120Hz高刷「fold2是什么屏幕」
此前,vivo X Fold2已经在2023博鳌亚洲论坛亮相采用了经典的华夏红”配色,手机背面采用素皮和玻璃两种材质拼接而成,玻璃的下方可以看到如红色丝绸一样的纹理。联想u310和u410阅...
日期:04-06
抖音商品规范「抖音电商新增《商家-材质成分不符细则》 12月生效」
11月25日 消息:日前,抖音电商发布了关于新增《【商家-材质成分不符】细则》的公示通知。公示期:2022年11月24日-2022年11月30日,规则预计于2022年12月1日生效。大疆 大众 自动...
日期:11-29
增程/纯电可选-新款长安深蓝SL03上市,14.59万元起_长安蓝色suv
【】8月25日消息,新款长安深蓝SL03在成都车展正式上市,共推出包括增程/纯电四款车型,售价区间为14.59万元-19.19万元。iphone13概念机最新爆料新车作为升级款车型,在外观方面并...
日期:09-16
iPhone 13翻车「iPhone 14再翻车!车祸检测屡次误报」
今年新发布的iPhone 14有一个亮眼功能是结合iOS 16系统增加的车祸监控的功能。此前的新闻中,有车主驾车撞树触发了车祸检测,iPhone 14也表现优秀,不过从新的消息来看,iPhone 14...
日期:10-11
双11:iPhone 14 Plus减1000 京东官方5999_iphone12pro max双十一能降价吗
iPhone14 Plus在今年的双11活动中非常诱人,现在立减1000元的活动力度非常大,目从6999元降到了5999元,早在本月初iPhone 14 P路上首销当日就立减500元,现在京东联通等一些官方的...
日期:11-11
英国将实行新法,要求新建筑安装电动汽车充电站
  11 月 22 日消息,据路透社报道,英国首相鲍里斯-约翰逊 (Boris Johnson) 在周日的一份声明中说,根据首相宣布的新立法,从明年开始,英国的新建筑将被要求安装电动汽车充电点。...
日期:07-17
金山云与创显科教签订合作协议 从“AI”探索智慧教育
  7月17日,金山云与广州创显科教股份有限公司(以下简称“创显科教”)正式签订智慧教育合作协议,双方将发挥各自优势,共同打造智慧教育平台,并积极探索AI+IoT在智慧教育市场的...
日期:07-14
京东副总裁辛利军「京东零售CEO辛利军:2023年是全行业投入力度最大的一次618」
凤凰网科技讯5月22日消息,今年京东618将于5月23日晚8点开启预售,5月31日晚8点全面开启。继3月初京东全面上线百亿补贴频道后,今年京东618,参与百亿补贴的商品数量将达到3月的10...
日期:05-22
揭开OpenAI创业秘史,ChatGPT的真正推手原来是他
本文系网易新闻•网易号特色内容激励计划签约账号【智东西】原创内容,未经账号授权,禁止随意转载。揭秘真正的ChatGPT之父:OpenAI的秘密武器,谷歌没有的天才。作者|李水青编辑|...
日期:04-09
英国现存最古老的图书馆_英国国家图书馆计划让iPad完整再现19世纪古书
  这个被称作“19 世纪历史合集“ 的应用与Kindle平台对书籍的处理不同。古书将保持他们的原始形式,提供完整的插图、字体、可抽出的地图,甚至包括偶尔出现的纸张破损。  ...
日期:07-30
上汽大通maxusg10试驾「彻底“玩转”车内空间,上汽大通MAXUS MIFA 9试驾体验」
当“电动、智能、舒适”成为MPV消费者选车关键词,全球多人出行领域,全尺寸纯电MPV的“风口”已经到来。需求决定市场,在国家开放二胎、鼓励三胎政策的刺激下,更大空间、高度舒适...
日期:09-16
英创力电子IPO被终止:年营收10亿 深创投与红土是股东_英创力股票
雷递网 雷建平 8月4日报道宁波电商协会会长四川英创力电子科技股份有限公司(简称:“英创力电子”)日前在深交所创业板的IPO被终止。iphonese一代的home键能按下去吗英创力电子...
日期:09-17
亚马逊肉搏京东 称所有商品价格低于对手
  6月15日,卓越亚马逊副总裁张建富在接受搜狐IT采访时表示,卓越亚马逊通过完善的手段来监控整个市场B2C商品的价格,以保证商品价格低于其他竞争对手。   同时,在谈及3C电子...
日期:07-30
信通院解读《算力基础设施高质量发展行动计划》之算力_算力基础设施是什么意思
近日,工业和信息化部等六部门联合印发《算力基础设施高质量发展行动计划》(以下简称《行动计划》),明确了未来三年算力基础设施发展的总体要求、重点任务和保障措施等内容。马斯...
日期:10-15
并视察特斯拉上海超级工厂,消息称马斯克本周将再次访华_特斯拉上海工厂 马斯克
5月30日消息,路透社援引三位知情人士的话透露,特斯拉 CEO 埃隆・马斯克预计本周将访问中国,这将是他时隔三年,自 2020 年初在特斯拉上海工厂跳舞引起热议以来再一次来到中国。据...
日期:09-26