博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hadoop伪分布式搭建
阅读量:3959 次
发布时间:2019-05-24

本文共 1102 字,大约阅读时间需要 3 分钟。

Hadoop伪分布式搭建

1、把hadoop-2.6.4.tar.gz移动到/usr/local目录下

2、使用命令tar -zxvf hadoop-2.6.4.tar.gz解压缩

3、编辑/etc/profile,添加环境变量。

4、source /etc/profile使配置生效

 

5、修改/usr/local/hadoop-2.6.4/etc/hadoop目录下的配置文件

5.1、hadoop-env.sh

5.2、core-site.xml

<property>

<name>fs.defaultFS</name>

        <value>hdfs://hadoop100:9000</value>

</property>

<property>

<name>hadoop.tmp.dir</name>

<value>/usr/local/hadoop-2.6.4/data/tmp</value>

</property>

5.3、hdfs-site.xml

<property>

<name>dfs.replication</name>

<value>1</value>

</property>

<property>

        <name>dfs.namenode.secondary.http-address</name>

        <value>hadoop100:50090</value>

    </property>

5.4、Yarn-env.sh

    5.5、Yarn-site.xml

<property>

 <name>yarn.nodemanager.aux-services</name>

 <value>mapreduce_shuffle</value>

</property>

 

<property>

<name>yarn.resourcemanager.hostname</name>

<value>hadoop100</value>

</property>

5.6、mapred-env.sh

5.7、Mapred-site.xml

<property>

<name>mapreduce.framework.name</name>

<value>yarn</value>

</property>

5.8、Slaves

6、免密登录

6.1、产生密钥

ssh-keygen -t rsa 一直回车

6.2、复制

ssh-copy-id hadoop100

6.3、验证

ssh  hadoop100

7、格式化文件系统

执行hadoop namenode -format

8、启动

start-dfs.sh

9、验证

 

转载地址:http://hiazi.baihongyu.com/

你可能感兴趣的文章