Hadoop伪分布式搭建流程

1.通过挂载上传软件至/home/hyxy/soft

$>cp jdk.1.8.x.tar.gz ~/soft

$>cp hadoop.2.7.3.tar.gz ~/soft

2.解压相关软件

$>tar -zxvf jdk.1.8.x.tar.gz

$>tar -zxvf hadoop.2.7.3.tar.gz

3.创建软连接

$>ln -s jdk.xx jdk

$>ln -s hadooop.xx hadoop

4.修改环境变量

$>cd ~

$>vim .bash_profile

在文件最后追加以下指令：

#-------------------------

#jdk

#-------------------------

JAVA_HOME=/home/hyxy/soft/jdk/jdk.soft

PATH=$JAVA_HOME/bin:$PATH

CLASSPATH=$JAVA_HOME/jre/lib/ext:$JAVA_HOME/lib/tools.jar

export PATH JAVA_HOME CLASSPATH

#------------------------

#hadoop

#--------------------------

HADOOP_HOME=/home/hyxy/soft/hadoop/hadoop

export PATH=$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$PATH

5.配置SSH

a.修改主机名

..

b.修改hosts文件

$>vim /etc/hosts

【在文件后追加：ip 主机名：192.168.26.129 hyxy】

c.reboot

d.生成密钥

$>ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa

【说明:-t设置生成密钥的算法，采用的rsa算法，-P设置密码，默认为空】

e.生成认证库

$>cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

f.修改认证库的权限为600

$>chmod 600 ~/.ssh/authorized_keys

g.ssh localhost

//无密码登陆成功

6.配置hadoop

a.找到hadoop的配置路径：cd $HADOOP_HOME

b.修改core-site.xml

<property>

<name>fs.defaultFS</name>

<value>hdfs://localhost:9000</value>

</property>

c.修改hdfs-site.xml

<property>

<name>dfs.replication</name>

<value>1</value>

</property>

d.修改hadoop-env.sh

export JAVA_HOME=/home/hyxy/soft/jdk/jdk.soft

e.格式化

$>hdfs namenode -format

f.开启

$>start-dfs.sh