hdfs和yarn如何配置与启动

这篇文章主要介绍hdfs和yarn如何配置与启动,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

成都创新互联公司专注于琼结企业网站建设,自适应网站建设,商城建设。琼结网站建设公司,为琼结等地区提供建站服务。全流程定制网站,专业设计,全程项目跟踪,成都创新互联公司专业和态度为您提供的服务

配置文件修改

配置文件在$HADOOP_HOME/etc/hadoop/目录下面,hdfs和yarn一共需要配置五个文件:

第1个:hadoop-env.sh
	export JAVA_HOME=/usr/java/jdk1.7.0_65

第2个:core-site.xml:
	
		fs.defaultFS
		hdfs://master:9000
	
	
		hadoop.tmp.dir
		/home/hadoop/data/hadoop
	
		
第3个:hdfs-site.xml,hdfs-default.xml
	
			dfs.replication
			1
	
	
第4个:mapred-site.xml
	mv mapred-site.xml.template mapred-site.xml
	vim mapred-site.xml
	
	
		mapreduce.framework.name
		yarn
	
	
第5个:yarn-site.xml
	
		yarn.resourcemanager.hostname
		master
	
	
		yarn.nodemanager.aux-services
		mapreduce_shuffle
	
	
第六个:slaves文件,该文件用于指示在哪些机器上启动datanode进程
slave01
slave02
slave03

格式化namenode

hdfs namenode -format

启动hdfs

$HADOOP_HOME/sbin/start-dfs.sh

启动yarn

$HADOOP_HOME/sbin/start-yarn.sh

以上是“hdfs和yarn如何配置与启动”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注创新互联行业资讯频道!


网站标题:hdfs和yarn如何配置与启动
链接URL:http://scyanting.com/article/jdoepj.html