HDP实现您的大数据技术栈

大数据框架

大数据处理包含各种组件,例如:hadoop、yarn、hive、hbase、spark、sqoop、storm、kafka等等。对于这些环境的单独部署是会遇到各种坑,导致没有学习进度。如果连一套大数据环境都部署不上,那又怎么学习大数据呢。

PS:个人认为有些公司的项目命名什么平台什么平台的。我想说压根就你自家使用的产品能是平台么,就是一个mis系统而已。做些名字高大上的,实则知识信息知识管理。这些公司还有很多路需要走哦。

继续PS:一个真正的平台应该是提供给多个客户开放使用的,且能提供OpenAPI供第三方调用的,称之为平台才是当之无愧。

神器Ambari

Ambari是HDP(Hortonworks data management platform)开源捐献给Apache基金会的项目。主要解决大数据环境部署,大数据环境监控,多机部署等问题。

来看看Ambari各个版本,一张图说明一切。

Ambari2.6 组件版本

Ambari界面

Ambari界面

来源: 雨林博客(www.yl-blog.com)