Hadoop伪分布式环境搭建

本文详细介绍了在虚拟机上配置CentOS 7,设置静态IP,配置SSH免密登录,安装并配置JDK和Hadoop,以及搭建Hadoop伪分布集群的过程。通过修改配置文件,执行初始化和启动命令,最后通过运行Wordcount Demo验证了集群的正确运行。

一.虚拟机系统配置

1.安装镜像文件CentOS 7 Minimal

2.默认硬盘分区格式化

选择虚拟机的位置,处理机配置使用默认的4核,磁盘大小默认为20G,根据自己需要选择大小。将虚拟磁盘储存为单个文件。

3.设置root密码

二.网络环境配置

1.静态IP配置

使用ip addr确认网卡名称ens33

编辑系统中关于网卡的配置文件 /etc/sysconfig/network-scripts/ifcfg-ens32 修改IP地址

设置IP地址以及子网掩码

 配置完成之后重启系统可以看见配置的IP地址

从外部Xshell进行登录

输入root密码成功连接

2. 配置ssh免密码登录,使用ssh可以免密码登录本机

安装openssh-clients,使用命令生成密钥对

#ssh-keygen -t rsa

 #ssh-copy-id -i root@localhost   复制一下

使用ssh免密码登录localhost进行测试

#ssh root@localhost  成功免密登录

 

三.运行环境配置

下载jdk和Hadoop,解压安装包

opt文件夹下新建soft文件夹,两个压缩包放soft下,解压

把文件移动到opt/jdk和opt/hadoop文件夹

#mv Hadoop-2.7.7 /opt/Hadoop

#mv jdk1.8.0_333 /opt/jdk

删除安装包

#rm -rf *

 

编辑/e

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值