ambari搭建hadoop大数据平台系列1-概述-创新互联
最近要为第三方搭建一套大数据平台,中间先进行了虚拟机版本,测试通过后,进行了物理机版本的生产环境,网上关于ambari 的文章并不多,但好在ambari 官方文档质量略高,社区比较活跃,便整理该系列的文档,将埋掉的坑抛出来,帮助小伙伴们更加快速的搭建自己的hadoop 平台。
创新互联公司专注为客户提供全方位的互联网综合服务,包含不限于成都做网站、成都网站建设、东莞网络推广、小程序设计、东莞网络营销、东莞企业策划、东莞品牌公关、搜索引擎seo、人物专访、企业宣传片、企业代运营等,从售前售中售后,我们都将竭诚为您服务,您的肯定,是我们大的嘉奖;创新互联公司为所有大学生创业者提供东莞建站搭建服务,24小时服务热线:028-86922220,官方网址:www.cdcxhl.com分三个部分:
1. 为什么选择ambari 来搭建
说到ambari, 主要的对手cloudrea manager ,大家比较熟悉,至于各自长短,优势劣汰,大家自己斟酌选择啦。
Cloudera Manager is different. It's a web interface formanaging a Cloudera Cluster. It lets you install and update software on thecluster, monitor resource usage, restart services, deploy (copy to all servers)configuration files etc. Cloudera Manager is for admins.
The analog to Cloudera Manager, from the open sourcecommunity, would be Apache "Ambari," which provides similarfunctionality. The Hortonworks Data Platform (HDP) can be deployed and managedusing Ambari.
Both Cloudera Manager and Ambari run through a webinterface.
2.整个构建过程的总览步骤
##################################################################################################
第一步 客户机配置:
检查 centos 版本,selinux ,firewalld ,hosts 记录,jdk1.8
检查时区和时间是否统一
yum install ntp
cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
配置root ssh 免秘钥登陆
配置jdk1.8.025
配置hosts 文件
##################################################################################################
第二步:本地仓库搭建
localRepository-11-32
##################################################################################################
第三步:配置ambari-server ambari-11-10
生成ssh 秘钥
配置ssh 无秘钥登陆客户机
安装ambari-server
配置ambari-server
启动ambari-server
##################################################################################################
第四步:web 登陆 ambari并安装组件
配置ambari-server 选项
选择并启动相应组件
##################################################################################################
第五步: 检查并测试 服务
web 检查组件服务是否正常启动
shell 端检查服务是否健康
hdfs fsck / -files -blocks -locations
java api/ python 检查服务是否正常
##################################################################################################
第六步:文档编写
截图
配文字说明
总结
##################################################################################################
3.实例截图与测试
另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。
文章名称:ambari搭建hadoop大数据平台系列1-概述-创新互联
文章链接:http://scyanting.com/article/dejpsj.html