洞悉数据价值华为云EI大数据服务亮相技术私享会杭州站

近日，华为云技术私享会第二站在杭州举行，来自金融、物流、教育、电子商务、物联网、医疗等行业的信息部门主管、架构师、软件开发人员、运维人员济济一堂，与华为云EI大数据产品的研发专家们，共同探讨华为云的大数据服务如何方便快捷的存储、处理和分析数据，帮助企业挖掘数据背后的价值，提升企业的运营能力。

华为云技术私享会是华为云面向企业CIO、技术骨干、开发者，分享云计算技术热点、解读华为云产品技术与实践的技术盛会。2017年，华为云技术私享会在北京、上海、重庆、深圳等地举办了十余场活动，获得了与会嘉宾的高度评价。2018年，华为云私享会将继续秉承技术分享的理念，将私享会的范围扩大到北京、上海、广州、杭州、福州、成都、济南、南京、西安、武汉、重庆、石家庄等城市。本次华为云技术私享会杭州站，是华为云EI大数据产品的一次整体亮相。多名华为专家为现场观众分享了华为云大数据服务的技术架构、服务能力、应用场景及成功实践。

华为云开放式大数据服务MRS，是“源于开源，高于开源”的开放式大数据一站式服务。华为云MRS服务，是国内大数据领域排名第一的FusionInsight大数据平台的云服务形态，涵盖Hadoop/Spark/Hive/Kafka等多种技术。并在可靠性、性能、安全等方面做了很多优化和增强，为企业的大数据应用保驾护航。

华为云专家分享华为云MRS服务技术与实践

华为云大数据存储技术创新代表产品—CarbonData，是全球最大开源社区Apache的顶级项目，其独创的索引加速技术填补了大数据开源存储技术的空白，有效推动了大数据生态发展。CarbonData提供了一种新的融合数据存储方案，以一份数据同时支持多种应用场景。CarbonData通过索引等加速技术让存储和计算物理上更接近，从而提升CPU和IO效率，实现万亿数据分析秒级响应。

华为云专家分享华为云CarbonData服务技术与实践

目前CarbonData已在全球实现规模应用，其中最大的单一集群数据规模达到PB级、10万亿条记录以上。同时，研发专家在现场演示了首列过滤查询场景，CarbonData性能比Parquet快近100倍，引起了现场开发者极大的轰动。

研发专家现场演示首列过滤查询场景代码截图

华为云实时流计算功能Cloud Stream Service服务(简称CS)是华为云上的实时流式大数据分析服务，它是一个serverless的全托管服务，用户无需感知具体的计算资源，只需编写sql便可快速构建实时分析任务。华为云CS服务提供flink和spark streaming两种引擎，支持共享和租户隔离独享集群两种。同时，华为在Flink原生SQL上扩展了多种领域专用特性，包括CEP、地理位置函数和随机森林算法函数。开发者基于这些扩展特性，通过简单的代码编写，就可以非常方便的实现电子围栏、车辆轨迹异常检测等业务。

另外，华为云一直对Apache Spark 的技术进行增强，并把这些增强回馈给社区，比如CBO增强，多数据源联邦分析，以及在元数据基础上做的相关企业级特性增强等。活动当天，华为云专家分享了基于Apache Spark + Apache CarbonData构建的云上Serverless数据湖探索服务(DLI)，面向客户提供Serverless SQL 和 Serverless Spark的分析能力，在免数据搬迁的前提下实现多种分析范式统一，给用户提供端到端数据分析、数据价值挖掘的能力。同时，专家还介绍了DLI在实际用户场景下的多个实践案例，重点剖析了DLI在BI分析场景和海量行为日志端到端分析场景的具体实践方法，帮助客户实现维护成本相比线下数据中心降低了70%，新业务上线周期相比线下缩短了50%。

华为云专家分享spark技术创新与实践