linux怎么查看本机内存大小
259
2022-11-23
hadoop1.2.1伪分布模式安装教程
安装其实很简单,把下载下来的Hadoop文件拷贝到相应的目录下,然后接压缩即可,关键是先要安装好JDK,前期的Linux要配置好。下面我把我的操作过程记录如下,供大家参考:登录到HadoopSrv01机器上,进行如下操作:1: su - grid2: tar -xvf hadoop-1.2.1-bin.tar.gz3: 解压缩后,会在/home/grid目录下 增加一个hadoop-1.2.1 目录4: cd hadoop-1.2.1 创建tmp目录 mkdir tmp5: cd conf目录,对hadoop-env.sh, core-site.xml, hdfs-site.xml,mapred-site.xml ,masters,slaves文件进行配置6:修改hadoop-env.sh 文件,只需要设置 export JAVA_HOME=/usr/java/jdk1.8.0 即可,其他不需要修改。7:修改core-site.xml 文件,增加以下内容fs.default.namehdfs://HadoopSrv01:9000hadoop.tmp.dir/home/grid/hadoop-1.2.1/tmp8:修改hdfs-site.xml,根据你自己的datanode节点数,设置复制因子。dfs.replication29:修改mapred-site.xml文件mapred.job.trackerHadoopSrv01:900110:修改masters,slaves 增加namenode,datanode节点配置。masters:HadoopSrv01slaves:HadoopSrv02HadoopSrv03以上操作完毕后,就可以对Hadoop集群进行格式化,格式化的命令如下:11: bin/hadoop namenode -format 记得要看清楚是否格式化成功12:启动集群 bin/start-all.sh13:检查各个节点 后台进程是否OK /usr/java/jdk1.8.0/bin/jps 正常应该包括以下后台进程:NameNode,JobTracker,DataNode,TaskTracker如果以上都能看到,就说明Hadoop分布式环境已经搭建OK。
岁月里,寒暑交替。人世间,北来南往。铭心的,云烟的。都付往事,不念,不问。
版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。
发表评论
暂时没有评论,来抢沙发吧~