hadoop+hbase+zookeeper安装指南

本文为博客 VIP 文章,开通 VIP 后可阅读全文

开通 VIP

hadoop、hbase、zookeeper是大数据里面三个重要的产品,关于这三个产品的介绍,各种书籍和网站介绍得很多,在这里不再赘述,仅介绍在ubunt下如何安装和配置这三种产品。

第一步:配置虚拟机为桥接模式

第二步:安装openssh-server,并且登录不需要

/home/jerry/>apt-get install openssh-server #安装openssh-server

/home/jerry/>ssh localhost #登录本机,需要密码

/home/jerry/>exit# 退出刚才的 ssh localhost

/home/jerry/>cd ~/.ssh/# 若没有该目录,请先执行一次ssh localhost

/home/jerry/>ssh-keygen -t rsa# 会有提示,都按回车就可以

/home/jerry/>cat ./id_rsa.pub >> ./authorized_keys # 加入授权

/home/jerry/>ssh localhost#不需要密码

第三步:安装JDK 1.7以上

/home/jerry/>tar -xzf jdk-8u161-linux-x64.tar.gz -C /usr/local

/home/jerry/>cd /usr/local

/usr/local/>mv jdk1.8.0_161/ java

/usr/local/>gedit ~/.bashrc

export JAVA_HOME=/usr/local/java
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin

/usr/local/>source ~/.bashrc

/usr/local/>java -version

出现版本信息,说明配置正确。

第四步:安装hadoop

/home/jerry/>tar -xzf hadoop-2.6.4.tar.gz -C /usr/local

/home/jerry/>cd /usr/local

/usr/local/>mv hadoop-2.6.4/ hadoop

/usr/local/>chown -R root ./hadoop

/usr/local/>gedit ~/.bashrc

export HADOOP_HOME=/usr/local/hadoop
export PATH=$PATH:$HADOOP_HOME/bin
export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib/native"
export JAVA_LIBRAY_PATH=$HADOOP_HOME/lib/native
export LD_LIBR
汇编语言与接口技术(第4版)清华大学出版社 第2章 80*86微处理器 课后题答案 阅读详情

相关推荐

双轴按键摇杆模块原理与嵌入式驱动实战

双轴按键摇杆是一种融合模拟量(X/Y轴)与数字量(Z轴按键)的复合型人机交互传感器,其本质基于电位器分压原理与机械开关通断特性。通过ADC采集连续电压信号并结合数字IO检测按键状态,可实现高鲁棒性的二维运动感知与触发控制。该方案技术门槛低、成本可控、兼容性强,广泛应用于智能小车、DIY游戏手柄、工业HMI及教育开发板等嵌入式场景。文中深入解析电位器线性度、KEY引脚开漏特性、ADC参考电压稳定性及软件消抖状态机等关键工程要素,为基于Arduino、STM32或ESP32平台的快速集成提供可复用的技术路径。

weixin_30995917的博客 47

hadoopZooKeeperhbase集群安装史上最全流程(亲测有效)

配置hadoop集群、ZooKeeper集群、hbase数据库,master、s1、s2、

weixin_45970532的博客 3023

从0到1:HBase安装与操作指南

本文为HBase零基础入门指南,系统梳理分布式数据库HBase安装部署与基础操作流程。开篇介绍HBase作为列式存储数据库的核心特性及大数据场景下的应用价值,随后从环境准备入手,详解Java、HadoopZookeeper等依赖组件的配置要求,以及官方安装包的下载与版本选型建议。安装环节覆盖单机 / 集群模式的解压、环境变量配置、核心文件修改及集群分发步骤,并提供启动验证方法。操作部分通过HBase Shell演示表与数据的增删改查实战,最后汇总常见问题解决方案,帮助读者快速掌握从部署到应用基础技能。

邓邓子的博客 1263

分布式集群环境hadoophbasezookeeper搭建(全)

1、环境说明 集群环境至少需要3个节点(也就是3台服务器设备):1个Master,2个Slave,节点之间局域网连接,可以相互ping通,下面举例说明,配置节点IP分配如下: Hostname IP 新建用户 新建用户密码 Master 10.10.10.213 hadoop 123456 Slave1 10.10.10.214 hadoo...

weixin_30576859的博客 320

安装大数据组件hadoopzookeeperhbase、hive

手动安装大数据相关组件hadoophbase、hive、zookeeper

weixin_43316694的博客 610

ZookeeperHadoopHBase安装

基于:zookeeper-3.4.6.tar.gz 1.解压 tar -zxf zookeeper-3.4.6.tar.gz 2.zookeeper-3.4.6目录创建两个文件夹用来储存日志数据 cd /hous/zookeper/zookeeper-3.4.6 mkdir data mkdir logs 3.conf下创建zoo.cfg,打开文件添加如下 tick...

大小鱼鱼鱼鱼鱼 290

UbuntuHadoopHbase安装配置(包括jdkssh安装,ssh免密登录)

安装及配置HadoopHbase 文章末尾附示例配置文件的文章链接

aaaxo的博客 800

全面指南HadoopHBaseZookeeper安装与部署

Hadoop分布式文件系统(HDFS)是Hadoop的核心组件之一,它专为处理大数据而设计,能够在廉价的硬件上提供高吞吐量的数据访问。HDFS是高度容错的系统,非常适合在实际应用中运行。架构组件:HDFS主要有两种类型的节点:NameNodeDataNode。NameNode负责管理文件系统的命名空间,维护文件系统树及整个树内所有的文件目录。它记录每个文件中各个块所在的DataNode节点,并且不存储实际数据。DataNode则在本地文件系统上存储数据块,并处理数据的读写请求。工作原理。

weixin_42594419的博客 935

hadoopzookeeper,hbase,hive,kylin安装指南

点赞有益于世界平,蟹蟹。 链接:https://pan.baidu.com/s/1aE4CwIRG4hZPwlbKcdgv_w 提取码:5sxa 安装包,百度网盘。 其中hbase0.98版本太低,不建议使用。可以使用1.2.6版本。 **1.zookeeper安装:上传安装包:解压安装包,创建软连接:**创建软连接是为了方便。 配置zookeeper的conf目录下文件: 将zoo_sam...

秀发去无踪,代码更出众 452

Linux虚拟机上安装Hadoop集群(初学)

测试已成功完成安装的版本 hbase-1.2.6-bin.tar.gz hadoop-2.7.5.tar.gz ubuntu-16.04.3-server-amd64.ios jdk-8u161-linux-x64.tar.gz zookeeper-3.4.8.tar.gz ps:如有需要请留言 写在前面的话 关于这篇博客 本教程并不是自己总结而写的,都是网站上的大牛们,...

无知而狂妄 1万+

【大数据开发运维解决方案】Hadoop+Mysql+Hive+zookeeper+kafka+Hbase+Sqoop+Kylin单机伪分布式安装及官方案例详细文档

Hadoop2.7.6+Mysql5.7+Hive2.3.2+zookeeper3.4.6+kafka2.11+Hbase1.4.9+Sqoop1.4.7+Kylin2.4单机伪分布式安装及官方案例测试详细文档 #################################################################### 注意: 本篇文章是在本人写的Hadoop+Hive...

赵延东的一亩三分地 16万+

Hadoop+Hbase+ZooKeeper 安装配置及需要注意的事项

http://blog.csdn.net/franklysun/article/details/6443027 本文重点讲解Hbase安装、配置、问题解决 关于hadoopzookeeper安装配置及相关问题,可以参考: hadoop:http://blog.csdn.net/FranklySun/archive/2011/05/13/6417984.aspx

冷月宫主的专栏 821

HBase分布式集群搭建(zookeeper+hadoop+hbase)超详细!

环境准备 zookeeperzookeeper-3.4.14 hadoophadoop-2.8.5 hbasehbase-1.4.13 master:namenode、resourcemanager, slave1:secondarynamenode、datanode, slave2:datanode 一、Hadoop集群搭建 1、hadoop安装包解压 tar zxvf hadoop-2.8.5.tar.gz 2、hadoop-env.sh、mapred-env.sh、yarn

程序员进化者 1597

zookeeper+hadoop+hbase部署

HBase是 Google 的 Bigtable 开发的java版本。是一个建立在 HDFS 之上,面向列的针对结构化数据的可伸缩、高可靠、高性能、分布式面向列的动态模式(实时读写nosql)数据库。HBase是列式NoSql数据库。Hbase中仅支持的数据类型为byte[];它主要用来存储结构化半结构化的松散数据。HBase可以理解为一个非常大的分布式HashMap,在hadoop集群的各个节点中以行主键+列族(包含列)+时间戳为键,以储存的值为值。

weixin_42431069的博客 1009

Hadoop+HBase+ZooKeeper三者关系与安装配置

http://blog.sina.com.cn/s/blog_5c5d5cdf0101dvgq.html 这里有几个主要关系: 1.经过Map、Reduce运算后产生的结果看上去是被写入到HBase了,但是其实HBase中HLogStoreFile中的文件在进行flush to disk操作时,这两个文件存储到了HDFS的DataNode中,HDFS才是永久存储。

julyfire的专栏 2537

ZooKeeper原理及其在HadoopHBase中的应用

ZooKeeper是一个开源的分布式协调服务,由雅虎创建,是Google Chubby的开源实现。分布式应用程序可以基于ZooKeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁分布式队列等功能。 简介 ZooKeeper是一个开源的分布式协调服务,由雅虎创建,是Google Chubby的开源实现。分布式应用程序可以基于

好学若饥,谦卑若愚 5万+

Hadoopzookeeperhbase之间的关系

hbaseHbase是一个面向列族的存储器,即Hbase在存储的时候将所有的列族成员都一起放在HDFS中存储,存储图片的数据比较大,图片的元数据比较少,所以分成两个列族来储存。 上图为Hbase数据模型,键值都是序列化的二进制,并且行根据键的二进制排序。区域是hbase在集群上分布数据的最小单位(区域就是一个表的连续n行) HDFS类似,Hbase有一个mastern个regionserver,Hbase的master把区域分给regionserver,恢复regionserver的故障,regio

laice的博客 1214

大数据学习_分布式协调服务_Zookeeper

目录1. Zookeeper简介1.1 Zookeeper是什么?1.2 zookeeper的架构组成1.3 Zookeeper 特点2 Zookeeper环境搭建2.1 Zookeeper的搭建方式 1. Zookeeper简介 1.1 Zookeeper是什么? Zookeeper 是一个分布式协调服务的开源框架。 主要用来解决分布式集群中应用系统的一致性问题,例如怎样避免同时操作同一数据造成脏读的问题。分布式系统中数据存在一致性的问题!! ZooKeeper 本质上是一个分布式的小文件存储系统。 提

qq_41612830的博客 465

毕业设计-python的大学生就业信息管理系统(django)(完整源码).zip

Python 完整项目,Python 毕业设计,包含:项目源码、数据库脚本、软件工具等,前后端代码都在里面。可用于 Python 毕业设计,Python 课程设计,Python 期末大作业。该系统功能完善、界面美观、操作简单、功能齐全、管理便捷,具有很高的实际应用价值。项目都经过严格调试,确保可以运行!可以放心下载,1. 技术组成前端: html后台框架:Python开发环境:pycharm数据库可视化工具:使用 Navicat技术栈: django2 部署用 pycharm 打开,使用 pip 下载相关依赖,然后 run 就 ok 了,如果不会部署的话,可以联系我

上一篇: 逐步分解,一文教会你如何用 jenkins+docker 实现主从模式
下一篇: 还不会python 实现常用的数据编码和对称加密?看这篇文章就够啦~
软件测试小小白
博客等级 码龄5年 98粉丝 184原创
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值