台状态监控和故障报警等功能。
  组件运维:组件运维是大数据分析平台颇复杂的部分,当进行版本升级时,由于组件之间存在着千丝万缕的关联,保障兼容是重中之重。组件运维还有一个很重要的点就是性能优化,云厂商会结合自身云计算优势对底层基础设施进行优化,对内核引擎进行优化,帮助开源组件提升性能。
  云托管之云生态
  云上有丰富的生态,避免后来者重复造轮子或从零开始,如下图。

  底层存储在云上可以提供OSS对象存储、HDFS存储,HDFS存储可以直接去访问OSS对象存储,与访问HDFS文件没有任何差别,这样一来,就可以灵活的进行数据归档和成本调优。
  在数据源方面, 支持OSS、SLS、RDS、消息队列等服务作为数据源;在计算引擎方面,云上EMR平台可与MaxCompute、Flink、Tensorflow引擎进行打通;在融合方面,云上提供DataWorks服务,通过DataWorks可以把Hadoop整个上层元数据的管理、数据质量管理进行统一。除此之外,云上还提供DataV、QuickBI等分析展示能力。
 
  除以上概述内容外,后续还有云服务和云原生等方面更多干货,请戳视频进行观看: http://aix.51cto.com/activity/10019.html

上一页
返回列表
返回首页
©2024 深度学习世界--关注深度学习应用,提供深度学习资料下载和技术交流 电脑版
Powered by iwms