温馨提示
恭喜您,订阅成功!
温馨提示
抱歉,订阅失败,请稍后再试!
温馨提示
您还未绑定邮箱,需要绑定邮箱才能订阅哦!订阅成功后,订阅信息会发送到您绑定的邮箱。
温馨提示
请您在新打开的页面绑定邮箱!
注意:绑定邮箱完成前,请不要关闭此窗口!
新基建
释放数据价值 加速政企数字化转型和智能化升级

摘要:FusionInsight智能数据湖聚势升级,基于华为云实现大数据集约建设、资源弹性发放、集中运维,为政企客户提供存得下、流得动、用得好的智能数据湖。

随着5G、AI、IoT等技术的发展,社会每天产生的数据量都在极速增长。据预测,2025年移动终端设备将达到400亿部,IoT设备将达到25万亿个。全球每天产生的数据量更将从2018年的33ZB快速增长到2025年的180ZB。但是,产生的数据中仅有不到2%被保存,而被保存的数据中仅有不到10%被利用,如何有效释放数据价值,使政企数据助力业务增长,已经成为了当前数据领域的重要课题。

当前,在政企数字化转型进程中,经常会有已下几大痛点:

痛点1:如何解决海量数据的取数难、找数难、用数难问题?

大型政企客户每天都会产生海量数据,在数据使用过程中却避不开以下几点:

取数难:跨源分析需要数据搬迁,效率不佳。

找数难:数据分散,管理复杂,流动性差。

用数难:组件多,语言多,投入大,门槛高。

针对以上问题,华为云EI智能数据湖FusionInsight通过CarbonData有效进行数据组织,结合数据虚拟化技术,实现多引擎、多数据源、多集群间的数据协同计算,在数据湖中实现统一入口使用,客户轻松用数;统一目录查询,全局数据可视;全局一份数据,减少数据搬迁冗余,分析效率提升10倍+。在政企客户数据服务中更好的释放数据价值,解决数据协同分析问题。

例如在某银行,其使用华为云EI智能数据湖FusionInsight 提供的MRS+DWS云服务,建立2000+节点的金融数据湖,汇集总行+各分行近30PB的数据量,实现了行内的“一湖两库”。承载了行内数据仓库、信息库的集约化建设,支撑日常行内BI、AI、数据挖掘分析等业务。通过FusionInsight的MRS大数据服务和DWS数据仓库服务,为数据湖提供主流的数据处理引擎;再将这些数据服务以租户渠道的方式,作为接口开放,如“数据集市”;最后用户通过自助或者固定的应用服务渠道来获得大数据服务,如“分析师工作台”。最终让数据应用更简单,让业务更敏捷。

痛点2:业务急速增长,数据成倍增加,如何解决存数的性价比问题?

5G应用快速落地,促使数据增长更为迅猛。政企客户若使用Hadoop原生架构存储数据,其计算和存储资源是耦合关系,需同步一体化扩容,存在存储利用率或CPU利用率不高现象,使得存数成本居高不下。

华为云EI智能数据湖FusionInsight采用华为自研存算分离方案,替代Hadoop的本地HDFS,软硬解耦扩容,让数据每bit成本更优。具体优势如下:

1.计算和存储资源按需独立扩展,计算不足扩计算,存储不足扩存储,避免一体化扩展带来的资源浪费,资源利用率提高100%。

2.通过华为独有的弹性EC替代传统HDFS的三副本,数据存储周期提高2倍。

3.各系统统一存储资源池存储,避免重复建设,消除数据孤岛,降低数据共享难度,减少数据冗余。

例如在某政府单位,数据量每年增长40%,传统大数据方案采用一体化扩容,三副本存储,成本高,往往100PB的存储,有效容量仅仅30PB;同时,整个数据湖中的存储、计算资源使用不均衡,往往存储利用率达到80%,但CPU利用率仅30%,资源严重浪费。为应对新数据的存储需求,如果使用传统的扩容方案,会导致CPU利用率进一步降低。采用存算分离方案后,新增的存储节点,能够使总体CPU利用率提高到40%,存储使用率降至51%,提高整体集群资源利用率;原先只能存储1年的历史数据,现在通过企业级EC技术,成功将数据湖有效容量扩大两倍。

痛点3:大数据上云已是业界趋势,如何解决资源成本问题

近几年来,大数据、云计算、AI、5G、物联网等技术飞速发展,在企业数据中心基础设施上已屡见不鲜。业界主流云厂家利用大数据提高客户粘性,而大数据厂家也在积极使用云技术打造云化大数据、数据湖。但在数据量激增的当下,资源利用率低、大数据交付周期长、本地运维排障慢、版本升级不及时等问题依然未能有效解决,造成运维成本的居高不下。而云能提供源源不断的新动能,为大数据高效运转提供基础设施。

针对以上问题和趋势,华为云EI智能数据湖FusionInsight提供企业数据集约云化建设,提供全面云化的数据服务,支持大数据所需资源的弹性伸缩,集约共建,降低运维成本,帮助企业节约宝贵的资源和人力成本,同时带来以下好处:

1.资源共享,弹性发放。资源池化,弹性伸缩,资源申请周期从30天->1小时。

2.集约建设,性价比更优。传统孤岛式建设系统,数据冗余,成本居高不下;集约建设,全局可共享。

3.提升运维效率。传统部署更新不及时,被动运维,问题驱动;现在可以主动运维,5分钟内及时响应排障。

例如在交通系统,数据湖数据分析的任务量随着人的活动而变化,在平时行人及车辆相对较少,分析任务的资源利用率为90%,而早晚高峰期时刻,人流量及车流量极速增高,需额外配置发放资源来应对更大数据量的分析,资源弹性发放无需全天部署上线,可实现按需伸缩为数据分析计算提供CPU、内存等资源,有效节约资源,轻松应对业务高峰。

随着大数据和AI技术的深度融合使用,在人脸识别、智能问答、机器人、文字识别、天气预测等场景中,华为云EI智能数据湖FusionInsight提供一站式智能数据平台,可无缝对接ModelArts,为人工智能平台提供高质量的数据样本,加速政企智能化升级。

综上所述, 华为云EI智能数据湖FusionInsight聚势升级,立足解决政企客户用数痛点,融合分析、存算分离、全面云化等新改变助力释放数据价值,加速政企数字化转型和智能化升级。

十多年来FusionInsight 致力于让全球60+国家地区、3000+政企客户构建企业级智能数据湖,结合平台+生态战略,与800+商业合作伙伴 ,广泛应用于金融、运营商、政府、能源、医疗、制造、交通等多个行业,在政企数字化转型中,释放数据价值,助力政企客户业务高速增长!