|  首页  |  资讯  |  评测  |  活动  |  学院  |  访谈  |  专题  |  杂志  |  产服  |  
您现在的位置:硅谷网> 资讯> 数码>

打造“融合、智能、合作 ”;数据基础设施,携手迈入智能时代

2019-11-19 14:24 作者:佚名 来源:硅谷网 HV: 编辑:吴丹 【搜索试试

11月19日,华为在深圳举办2019全球数据基础设施论坛,面向鲲鹏计算产业,宣布全面启动数据基础设施战略,并开源数据虚拟化引擎HetuEngine(河图引擎),希望让伙伴像使用“数据库”一样使用“大数据”,让数据治理、使用更简单 。这是继今年9月基于“鲲鹏+昇腾”双引擎全面启航计算战略后,华为从数据角度对计算战略的再度阐述。华为数据基础设施战略围绕数据“采-存-算-管-用”的全生命周期,诠释了华为通过提供融合、智能、开放 的数据基础设施,使能各行各业客户释放数据价值,让智能无所不及。

华为Cloud & AI产品与服务总裁侯金龙在大会上发表主题演讲

以下是侯金龙演讲全文

女士们、先生们、朋友们,大家上午好!欢迎大家来到深圳,参加首届全球数据基础设施论坛。

人类正迈入万物互联的智能时代,而数据将成为智能世界的关键生产资料。今天,我分享的主题是《打造“融合、智能、开放”数据基础设施,携手迈入智能时代》。

构建万物互联的智能世界

华为公司的愿景与使命是:“把数字世界带入每个人、每个家庭、每个组织,构建万物互联的智能世界”。在智能世界,算力成为新生产力,数据成为新生产资料,“5G、AI、云”成为新生产工具 ,将使能千行百业迈入智能时代。

两个月前,华为在全联接大会上发布了“一云两翼双引擎”的鲲鹏计算产业布局,基于“鲲鹏+昇腾”双引擎,全面启航计算战略,为世界提供最强算力。

“一云”是指华为云,是生态伙伴发展的黑土地。“两翼”是指智能计算和智能数据。数据作为鲲鹏产业中的关键一翼,华为将围绕数据构建端到端的能力,包括存、算、用的能力,通过5G+云+AI能力,打造“融合、智能、开放”的数据基础设施,释放数据价值,让智能无所不及!

智能世界,从数据管理走向数据运营

首先,数据将驱动客户体验。当你打开一个App,就会收到你感兴趣的内容推送。精准推送的背后,其实就是数据在驱动。比如快手,每天产生1.2亿个内容标签与用户画像实时匹配,数据运营实现内容精准推送。

其次,在企业经营活动中,数据驱动企业生产决策。以大港油田为例,在经历了50年持续开采后,面临资源枯竭、产量下降的挑战。2019年以来,大港油田采用华为大数据和AI技术,利用测井曲线,结合经验模型生成了每口井的孔隙度、渗透率,找到了更多的新的油气层。通过数据运营,为长期稳产500万吨提供了决策支撑。

最后,我介绍下数据驱动企业流程简化。华为每年有近300万人次出差,以前出差涉及考勤、机票、酒店,包括报销等十几个申请流程,现在只需要一个流程就可以真正实现“说走就走”。这是每天45万次后台数据关联碰撞的结果。数据运营,实现“让数据多跑路,员工少跑腿”。

智能世界,需求与资源存在巨大落差

随着5G、AI和云的普及,数据量正以惊人的速度增长:从1080P到4K、8K,视频数据量将提升40倍,从4K到4K VR要增加6倍以上;未来每辆自动驾驶汽车每天就会产生高达64 TB数据;深圳一个城市有超过200万摄像头,每天将产生80 PB数据,平均保存30天,大家希望保存更长时间;大量的数据过去只需存几天,现在需要保存几个月甚至永久保存。

根据预测,全球数据量将从2018年的33 ZB快速增长到2025年的180 ZB。但是,产生的数据中仅有不到2%被保存,而被保存的数据中仅有不到10%被应用。

这些海量数据的增长背后是需要海量存储和计算的资源,数据增长是无限的,而存储资源却是有限的。

数据全生命周期每比特价值最大,每比特成本最优

我们希望对数据的采、存、算、管、用实施端到端的整合和优化,让数据在全生命周期内更好用,数据的每比特发挥价值最大,数据的每比特成本最优 !

打造“融合、智能、开放”数据基础设施

为实现这个追求,华为打造融合、智能、开放的数据基础设施,让数据系统从孤立走向融合,从复杂走向智能,从封闭走向开放:

通过“打破数据处理与数据存储的边界”,实现数据高效共享和分析,降本增效。

通过“AI+存储+云”,实现数据全生命周期内智能管理和智能运营,让存储越用越快,价值越来越大。

通过“数据虚拟化引擎”,统一SQL语法,像使用数据库一样使用大数据。

融合:使用极简

数据应用的核心包括存储和分析。烟囱式IT业务系统带来两个问题:存的时候会产生多个冗余副本,且数据无法流动,存储成本高;分析的时候会导致大量数据搬迁,分析效率低。

通过10余年技术积累和创新,华为在存储、数据库和大数据技术上实现了一系列突破,通过打破4堵墙,让数据的每比特发挥价值最大,数据的每比特成本最优。

打破存储内部系统墙 :通过一套架构实现生产、分析、备份、归档的统一管理,一份数据在各个系统中平滑流动,减少拷贝,TCO降低30%以上

打破数据库与存储链路墙 :通过算子下推实现近数据计算,减少存储层与计算层之间的数据交换,数据访问和处理性能提升2倍

打破大数据与存储配置墙 :通过存算分离实现资源灵活配置,计算不足扩计算,存储不足扩存储。并通过弹性EC、数据缩减技术减少冗余,整体TCO降低30%以上

打破数据库与大数据协同墙 :通过协同分析实现数据零搬迁,数据库和大数据共享一份数据,分析效率提升100%

智能:体验极致

过去,主要依靠人来完成设备配置和运维,运维人员经验和能力的高低决定了管理效率的优劣。华为基于AI芯片、存储和华为云的三层架构,通过云上训练和云下推理,让系统越用越快、越用越省。

依托昇腾处理器的AI能力,自动学习和识别IO流,提升Cache预取命中率,系统整体性能提升20%

依托鲲鹏处理器的多核算力,根据不同的数据类型,实时优化数据缩减算法,TCO降低25%

结合华为云自身大规模运维运营经验,当前可以实现提前14天预测硬盘故障,提前60天预测性能瓶颈,提前365天预测容量不足,其中30%的故障可以自我修复

开放:开发极简

随着业务类型日益增多,大量业务需要跨平台、跨数据源协同分析。这种场景下,最突出的3个问题是:找数难、取数难、用数难。

找数难 :传统企业数据类型越来越多,结构化、半结构化、非结构化数据并存,缺少统一数据目录和全局数据视图,要在众多异构数据源中找到特定数据,好比大海捞针。

取数难 :一个典型的分析业务通常依赖跨地域跨平台数据协同,需要从多个业务系统获取数据,这要经过多部门间协调、核实才能获取。

用数难 :多业务分析需要多引擎协同,这将依赖多种数据访问技术,就需要开发人员掌握多种开发工具和语言,从而导致开发门槛变高,开发周期变长。

为了屏蔽数据类型差异、地域差异、语法差异,让数据治理简单,使用简单,华为推出了“河图引擎”。

HetuEngine,从“大数据”走向“大数据库”

我们将数据虚拟化引擎命名为河图,就是屏蔽数据基础设施的复杂度,让开发者像使用数据库一样使用大数据,复用现有的生态、工具和技能,提升开发效率2到10倍 。“大禹得河图后始见清明”,传说中,大禹通过河图掌握河流山川复杂的地形地貌,顺利完成治水大业。

河图引擎,就是要让数据治理简单,使用简单,更方便的挖掘数据价值。它具备4个核心能力

一个目录 :通过元数据在线感知,构建1000+异地异构数据源全局虚拟数据视图,打破数据孤岛,数据全局可视,解决企业找数难问题。

一个入口 :通过开放的连接框架、5000节点SQL引擎,实现30种异地异构数据源统一SQL访问,秒级获取,数据全局可得,解决企业取数难问题。

一份数据 :通过CarbonData技术,实现一份数据多场景分析,多应用共享,数据零搬迁,数据全局可用,解决企业用数难问题。

统一安全 :通过细粒度动态授权、敏感数据自动感知技术,实现异地异构数据源集中式安全配置与管控,数据全局可控,数据授权时间从天到秒,解决企业数据安全与合规问题。

开源河图引擎Hetu E n gine

为了更好地发展数据产业,今天我宣布开源河图引擎,开源版本的河图引擎叫openHetu,将于2020年6月上线。我们将开源内核,开发者可以基于开源代码进行定制,包括数据源扩展、SQL执行策略等,实现应用快速对接,提升开发效率。

华为Cloud & AI产品与服务总裁侯金龙宣布开源数据虚拟化引擎HetuEngine

平台+生态,携手迈入智能时代

华为始终践行“平台+生态 ”策略,通过硬件开放,软件开源,使能伙伴,共建开放、繁荣的鲲鹏计算产业生态,共同迈入智能时代。

谢谢大家!

【对“打造“融合、智能、合作 ”;数据基础设施,携手迈入智能时代”发布评论】

版权及免责声明:
① 本网站部分投稿来源于“网友”,涉及投资、理财、消费等内容,请亲们反复甄别,切勿轻信。本网站部分由赞助商提供的内容属于【广告】性质,仅供阅读,不构成具体实施建议,请谨慎对待。据此操作,风险自担。
② 内容来源注明“硅谷网”及其相关称谓的文字、图片和音视频,版权均属本网站所有,任何媒体、网站或个人需经本网站许可方可复制或转载,并在使用时必须注明来源【硅谷网】或对应来源,违者本网站将依法追究责任。
③ 注明来源为各大报纸、杂志、网站及其他媒体的文章,文章原作者享有著作权,本网站转载其他媒体稿件是为传播更多的信息,并不代表赞同其观点和对其真实性负责,本网站不承担此类稿件侵权行为的连带责任。
④ 本网站不对非自身发布内容的真实性、合法性、准确性作担保。若硅谷网因为自身和转载内容,涉及到侵权、违法等问题,请有关单位或个人速与本网站取得联系(联系电话:01057255600),我们将第一时间核实处理。
广告
相关
·华为宣布启动数据基础设施战略并开源数据虚拟化
·鲲鹏聚数,重定义数据基础设施,带来更大的价值
头条
频频“翻车”的搜狗AI录音笔,真的是业内领先吗? 频频“翻车”的搜狗AI录音笔,真的是业内领先
未来在线办公的形态到底会发展到什么样的程度?这是这段时间以来很多企业都在认真思考……
·频频“翻车”的搜狗AI录音笔,真的是业内领先
·苹果4500万套AirPods订单因新冠肺炎面临缺货
·2020CES奇葩产品来了:电脉冲治焦虑,AI灭蚊
·截止2019年底最失败科技产品:大多是巨头的手
·透过iOS 13.1看看苹果的AR眼镜究竟是什么样
图文
2020年度最佳唯一上榜平板 外媒Stuff为何独爱华为MatePad Pro5G
2020年度最佳唯一上榜平板 外媒Stuff为何独
配置千千万,机箱怎么选?先马鲁班3告诉你!
配置千千万,机箱怎么选?先马鲁班3告诉你
运营商共建5G基站,在下一盘万亿投资的大棋
运营商共建5G基站,在下一盘万亿投资的大棋
史上最难!今年2月14号情人节礼物应该怎么选?
史上最难!今年2月14号情人节礼物应该怎么
最新
·2020年度最佳唯一上榜平板 外媒Stuff为何独爱华为
·配置千千万,机箱怎么选?先马鲁班3告诉你!
·新春季制霸全领域 DELL&迅游联手释放游戏能量
·RTX 2060 SUPER大战5700XT,哪款显卡会更香?
·外媒力荐!看华为平板MatePad Pro 5G如何引领智慧
热点
·小米AirDots青春版竟不是性价比最好的真无线
·限时特惠 华硕Z390F电竞主板畅玩古墓丽影:暗
·盟达(MENDA)27英寸超薄4K显示器深度评测
·一块固态硬盘到底能用多久?会比机械硬盘更耐
·运营商共建5G基站,在下一盘万亿投资的大棋
旧闻
·魅族16th获评2018明星机型,以后线下渠道有优
·双11已经来了,飞利浦手机爆品秒杀5折起
·大疆创新或遇强劲对手 华为海思联合推出AI相
·华硕显示器12.12暖暖开门红,年末盛典豪礼相
·畅享贴心购物体验,华为授权体验店Plus(北京
广告
硅谷影像
2020年度最佳唯一上榜平板 外媒Stuff为何独爱华为MatePad Pro5G
2020年度最佳唯一上榜平板 外媒Stuff为何独爱华为
配置千千万,机箱怎么选?先马鲁班3告诉你!
配置千千万,机箱怎么选?先马鲁班3告诉你!
新春季制霸全领域 DELL&迅游联手释放游戏能量
新春季制霸全领域 DELL&迅游联手释放游戏能量
RTX 2060 SUPER大战5700XT,哪款显卡会更香?
RTX 2060 SUPER大战5700XT,哪款显卡会更香?
外媒力荐!看华为平板MatePad Pro 5G如何引领智慧体验新高度?
外媒力荐!看华为平板MatePad Pro 5G如何引领智慧
用静音坊MR2告别“灯红酒绿,”安静稳定才是主流
用静音坊MR2告别“灯红酒绿,”安静稳定才是主流
关于我们·About | 联系我们·contact | 加入我们·Join | 关注我们·Invest | Site Map | Tags | RSS Map
电脑版·PC版 移动版·MD版 网站热线:(+86)010-57255600
Copyright © 2007-2020 硅谷网. 版权所有. All Rights Reserved. <京ICP备12003855号-2>