您的位置:首页 > 移动互联

网易数帆发布全链路数据生产力平台2.0 全面提升数据能力

发布时间:2022-07-26 13:56:43  来源:互联网     背景:

  10月21日,网易数字+大会在杭州钱塘江畔召开,网易数帆旗下网易有数在会上发布了全链路数据生产力平台2.0,推出了DataOps、逻辑数据湖、实时数据湖引擎、机器学习平台、有数BI数据准备在内的最新技术实践,进一步完善数据治理能力,促进企业数智化转型升级。

  网易有数产品总经理余利华表示,迈入数据生产力平台2.0阶段,更应该夯实自身技术服务能力,从大数据底座、到数据中台、再到数据应用,每个链路都需要更好的打磨才能服务好客户,达成实际业务中“人人用数据、时时用数据”的目标,真正发挥数据生产力。

  过去一年,全链路数据生产力1.0的提出,以数据中台、数据应用为两大节点,让企业大数据决策水平提升实现正向闭环,将数据价值从业务系统中释放。在1.0的实践中,网易数帆发现,全链路数据生产力的闭环仍然存在一些阻滞,其中数据中台的节点,各个系统数据的物理聚合成本越来越高,数据开发的低效拖慢交付应用,同时中台对于实时数据的处理要求日趋增多;在数据应用的节点,非结构化数据的理解需要更多的手段支撑。

  作为今年的重要看点,网易数帆是如何解决上述问题,实现全链路数据生产力从1.0到2.0的跃迁?这其中又有哪些创新技术的推出?

支付宝查看2019年账单

提升数据开发效率,试试有数DataOps

  大会当天,网易数帆推出了今年数据中台的重磅升级——有数DataOps,旨在帮助企业解决数据开发过程中的效率和质量问题,可以说是将DevOps的理念应用于数据开发领域,以缩短洞察周期,推动项目持续集成(CI)和持续部署(CD)。

鸿卓网络科技有限公司

网易数帆发布全链路数据生产力平台2.0 全面提升数据能力

DataOps全流程

  大会现场,余利华还展示了网易云音乐使用DataOps成功实践。通过设置独立的开发环境、自动测试流程,云音乐可以有效排查上线前代码中存在的风险,实现自动运行测试。从效果上看,在使用有数DataOps产品后,因代码提交产生的数据质量问题下降了接近90%,平均需求交付周期从5天下降到2.5天,效率直接提升100%。

京东618手机狂欢城

逻辑数据湖:从“Collect”到“Connect”

  企业建设数据中台不应该是把所有的数据全部收集(Collect)到一个载体后再开始应用,随着数据的不断涌入,用一种连接(Connect)的方式重复利用数据,成为了当下技术领先厂商们思考的手段。

  余利华指出,数据中台建设之初,往往误以为只要把数据集中到一起,就能让数据充分被利用。但在这些年与客户交流后发现,企业想要构建一个物理上集中的数据中台非常困难。那么能否通过一种方式,在不要求数据迁移的前提下,将数据纳入数据中台管理?

  大会现场,网易数帆发布了首创的,基于逻辑数据湖的数据中台。作为一种物理分散,逻辑统一的数据中台,其核心价值就是统一源数据信息、数据标准和数据源,同时兼容遗留系统,支持Oracle/MySQL/Vertica等7类系统,实现数据的统一开发和统一治理。

网易数帆发布全链路数据生产力平台2.0 全面提升数据能力

基于逻辑数据湖的数据中台

迈入实时中台时代,Arctic引擎驱动力

  面对日益增长的数据规模以及越来越低时延的数据处理要求,流处理正在成为大数据厂商亟待精进的业务能力之一。企业对于实时数据的管理需求日益显著,特别是对于像广告、风控、促销、物流等业务场景,只有依赖强大的流计算引擎才能支持实时动态的数据结果。

  为了解决这些问题,网易数帆推出了有数实时数据湖引擎Arctic,不仅实现了流批一体存储,还支持无缝对接数据中台数据治理体系,可以说是极大地增强了数据摄取性能,特别是对于海量日志、事件等变更频繁、实时性高的数据加工等业务场景,有着十分广阔的技术实践空间。

  此外,搭载数据湖引擎Arctic,网易数帆“有数实时数据中台”更是成功入选多个国家级大数据标杆示范项目评选,包括像今年中国大数据产业博览会“十佳大数据案例”,工信部试点示范项目等等。

有数机器学习平台:AI深化数据应用

  随着物联网和移动设备的发展,产生的数据越来越多,种类也包括图片、文本、视频等非结构化数据,这使得机器学习模型可以获得越来越多的数据。在全链路的数据应用节点上,网易数帆也分享了自己多年的实战经验,推出了有数机器学习平台,去帮助企业理解及处理各类数据。

  本次推出的网易有数机器学习平台,经过网易多年内部业务验证,能够大幅提升机器学习迭代效率。在机器学习的各个阶段都能提供有效支持,通过无缝对接数据中台,使得数据访问变得非常简单。同时还提供Notebook和可视化建模两种方式,支持TensorFlow,PyTorch主流算法框架,一键部署等等。

谷歌眼镜能翻译吗

  除了以上技术亮点,大会还发布了有数BI数据准备,针对缺乏专业人员的小微企业来说,可以借助有数BI数据准备,建立自助式ETL实现轻量级湖仓。

  本次全链路数据生产力平台2.0的发布,标志着网易数帆数据能力的全面提升,最终目的还是通过技术手段去解决企业实际业务中暴露的难点,提升数据价值的有效利用。

三星GALAXY Note 9

360手机好用


返回网站首页

本文评论
天玑9000击破手机功耗拉胯困局,联发科一举成功晋级旗舰圈层_搭载联发科天玑1000+的手机
  众所周知,这两年5G的普及确实带来了不俗的体验,无论是网速还是体验都大幅升级。但是随之而来的却是重度场景下的发热和耗电,这个难题一直没有得到有效解决。  面对5G手机...
日期:07-25
快递100CEO雷中南:价格战呈退潮趋势 快递行业进入存量市场竞争
  近日国家邮政局公布数据显示,8月全国快递单票平均价格为9.34元,同比下降7%,但环比提升了0.92%。广州地区8月快递单价实现环比正增长,义乌地区单价环比降幅收窄。经过多年的...
日期:07-27
思岚科技100台机器人助力临港方舱,组建“无接触”机器人服务团队
  4月6日,临港方舱医院7号仓封仓完毕,思岚科技100+台机器人部署完成,正式交付上岗。智能机器人的加入,为临港方舱医院组建了一支“无接触”机器人服务团队。大华股份2021一季...
日期:07-28
感受更成熟的折叠屏体验 三里屯、蓝色港湾三星Galaxy折叠屏新品快闪体验店等你来
  随着三星第四代Galaxy折叠屏新品在国内正式发布,折叠屏手机又掀起了新一波的关注热潮,成为被越来越多消费者种草的热门机型。与此同时,三星全新打造的40家三星Galaxy折叠屏...
日期:09-02
元宇宙发布会_2022中国元宇宙生态发展大会圆满落幕
  2022年8月17日,由深圳市平板显示行业协会、广东省元宇宙生态发展联盟联合主办,以“元宇宙赋能数字经济”为主题的2022中国元宇宙生态发展大会在深圳会展中心2号馆成功举办...
日期:08-25
行业首播| 5月24日,一起来聊聊CIS测试那些事儿_disc测试
  在我国集成电路市场规模扩大、技术持续升级的大环境之下,发展拥有自主知识产权的半导体测试技术和设备势在必行。而作为国产数字测试设备的先行者,加速科技更希望以自身在...
日期:03-11
借抖音名义推广“趣抖音”,福州两公司被法院判赔30万元「趣步是合法吗」
  近来,一款名为“趣抖音”的App在线上、线下进行宣传推广活动。它与抖音没有任何关系,却利用抖音的知名度、市场影响力招揽生意。掌上3d打印机minione美国经济重组  今...
日期:07-28
三星s20拍照对比_计算影像革新拍照体验 三星Galaxy S22 Ultra获权威机构认可
  今年二月初,三星新一代高端旗舰Galaxy S22系列如期而至,三星一如既往地展现了其深厚的影像造诣和强大的创新能力,尤其是顶配机型三星Galaxy S22 Ultra,凭借尖端的硬件和全面...
日期:07-30
仪式感拉满!用“影像星火”告别2021!
2021岁末将至,又到了各大文艺展演层出不穷的季节。这个冬天,如果说魔都小资都在为安迪·沃霍尔笔下性感多面的“玛丽莲·梦露”所倾倒。那么,京圈各大平台上的博主和文化大V们...
日期:07-25
中国文化传媒新文创(IP)平台助推革命老区龙岩永定振兴发展_中国文化传媒新文创(IP)平台
  10月25日,中国文化传媒集团旗下中国文化传媒新文创(IP)平台与福建省龙岩市永定区人民政府共同建设的永定区数字文化产业园、中国文化传媒集团中传新文创(IP)平台华东知识...
日期:07-26
图书内容质量_图书质量、服务体验广受诟病,当当为何敢做不敢当当?
  “在当当最糟糕的一次,这书明显是盗版。”“盗版无疑,纸质奇差无比,当当也开始做盗版生意了。”“有一两本纸张很臭,一本还有印刷错误、重复印刷。”  点开当当APP上一本...
日期:07-25
更美APP为更多的求美者提供优质且高效的服务「更美app下载」
  如今互联网的快速发展为人们的生活带来了很多的便捷,特别是线上购物,已经成为了很多人主要的消费途径。只是这种线上购物的方式,在消费者付款之前是无法感知真实的产品和服...
日期:07-28
荣耀X30i再秀轻薄“身材”,线下门店“纸上轻功挑战”火爆进行中「x30i荣耀手机」
  作为荣耀重要的产品系列之一,荣耀X系列凭借严苛品质和技术实力,八年间全球销量突破9000万台,获得千万用户好评口碑。近日,荣耀发布了荣耀X系列全新子系列“XNi”(N为数字)的...
日期:07-26
易流科技发布“组件化应用”,开启“分布式”治理模式
  4月27日,易流科技2022“双塔+”云上产品发布会圆满结束。本次发布会在去年“供应链控制塔”以及“食安数智塔”两款平台级产品的基础上,深耕场景生态应用,推出“物流实时可...
日期:04-01
科大讯飞营收占比_跨越式增长,科大讯飞AI学习硬件双11销售额同比增长300%
  11月12日,科大讯飞公布了2021双十一购物节的终极战报。AI学习、AI办公双赛道成绩喜人,其中,AI智能硬件持续高速增长,整体销售额同比增长76%。其中,在学习领域方面,讯飞实现跨...
日期:07-26
国货显示技术天花板在哪里?TCL X12告诉你!
  70年代初期,液晶之父夏普研发出第一台液晶电视,日本开始引领全球电视行业的发展方向。本世纪初,随着三星和LG的在OLED技术上崛起,韩国成为了近十几年电视行业的领军者。我们...
日期:07-27
青年科普创新大赛:江苏 49 所学校比拼“未来太空车”_江苏省中小学生科技竞赛
刘成贺 / 摄  6 月 11 日,由江苏省科协、共青团江苏省委共同主办的第八届全国青年科普创新实验暨作品大赛江苏赛区的赛事活动,在南京科技馆落下帷幕。通过初赛选拔的 49 所...
日期:07-14
济南绿源电动车该怎么选?一起来这家店看看!_济南市绿源电动车专卖店
  春天已经来了,有谁不想在这个鸟语花香的季节里骑上电动车,沐浴着温柔的阳光和温暖的微风到大明湖畔来一次说走就走的春游呢?但是如果在出行途中电动车出现了故障,或是电量...
日期:07-29
科勒KOHLER五款产品荣膺2022 年德国 iF 设计大奖 以创新设计诠释优雅生活
  近日,2022 年德国 iF 设计奖 (iF DESIGN AWARD 2022) 获奖名单揭晓,全球厨卫经典品牌科勒KOHLER融汇领先的创新技术以及独特的设计美学,再次以科勒朗月独立系列浴缸、科勒...
日期:09-20
智能合约审计机构_2022年全球最具技术实力的的智能合约安全审计公司推荐
  背景介绍  2022年3月29日,区块链项目Ronin被黑,约超6亿美元的加密货币被盗;  2022年4月17日,算法稳定币项目Beanstalk Farms遭黑客攻击,黑客获利近8000万美元;  2022年...
日期:07-25