文档下载 文档下载导航
设为首页 | 加入收藏
搜索 请输入内容:  
 导航当前位置: 文档下载 > 所有分类 > IT/计算机 > hadoop+zookeeper+hbase安装
侵权投诉

hadoop+zookeeper+hbase安装

一 机器
192.168.0.203 hd203: hadoop namenode & hbase HMaster
192.168.0.204 hd204: hadoop datanode & hbase HRegionServer & zookeeper
192.168.0.205 hd205: hadoop datanode & hbase HRegionServer & zookeeper
192.168.0.206 hd206: hadoop datanode & hbase HRegionServer & zookeeper
192.168.0.202 hd202: hadoop second namenode & hbase HMaster
共 5 台机器 (生产环境需要把zookeeper单独安装)

二 操作系统和软件版本
1 操作系统:CentOS release 5.6 (Final)x64,关闭防火墙
2 相关软件:
jdk-6u24-linux-x64.bin
hadoop-0.20.2-cdh3u0.tar.gz
hbase-0.90.1-cdh3u0.tar.gz
zookeeper-3.3.3-cdh3u0.tar.gz

三 安装

1 安装jdk (所有机器)
mkdir /usr/java
mv jdk-6u24-linux-x64.bin /usr/java
chmod 744 jdk-6u24-linux-x64.bin
./jdk-6u24-linux-x64.bin
ln -s jdk1.6.0_24 default

2 建立集群平台用户 (所有机器)
useradd cbcloud
passwd cbcloud 密码设为123456


3 编辑/etc/hosts (所有机器)
192.168.0.203 hd203
192.168.0.204 hd204
192.168.0.205 hd205
192.168.0.206 hd206
192.168.0.202 hd202

4 hd203登录集群所有机器免密码设置 (hd203)
su - cbcloud
ssh登录本机也要免密码 如下设置

$ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
$ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

将hd203上的id_dsa.pub 文件追加到所有机器的cbcloud用户的authorized_keys文件内
细节不在详述
ssh 所有机器 第一次需要确认一下

5 安装hadoop
5.1 建立目录 (所有机器)
mkdir /home/cbcloud/hdtmp
mkdir /home/cbcloud/hddata
mkdir /home/cbcloud/hdconf
chown -R cbcloud:cbcloud 以上目录
tar zxvf hadoop-0.20.2-cdh3u0.tar.gz -C /home/cbcloud
cd /home/cbcloud
mv hadoop-0.20.2-cdh3u0 hadoop
chown -R cbcloud:cbcloud hadoop/


5.2 配置环境变量 vi /etc/profile (所有机器)
export JAVA_HOME=/usr/java/default
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/bin:$JAVA_HOME/lib:$JAVA_HOME/jre/bin:$PATH:$HOME/bin
export HADOOP_HOME=/home/cbcloud/hadoop
export HADOOP_CONF_DIR=/home/cbcloud/hdconf
export PATH=$PATH:$HADOOP_HOME/bin

把hadoop的配置文件目录从源目录拿出来,方便以后升级hadoop
mv hadoop的conf目录内文件到/home/cbcloud/hdconf内

5.3 编辑 hadoop 配置文件 core-site.xml
加入
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://hd203:9000</value>
</property>
<property>
<name>fs.checkpoint.dir</name>
<value>/home/cbcloud/hdtmp/dfs/namesecondary</value>
<description>Determines where on the local filesystem the DFS secondary
name node should store the temporary images to merge.
If this is a comma-delimited list of directories then the image is
replicated in all of the directories for redundancy.
</description>
</property>
<property>
<name>fs.checkpoint.period</name>
<value>60</value>
<description>Determines where on the local filesystem the DFS secondary
name node should store

第1页

你可能喜欢

  • hadoop+
  • hbase+rowkey
  • websphere安装部署
  • websphere集群安装
  • spark+hadoop+mongodb

热门文档

相关文档

  • hadoop + zookeeper + hbase安装学习

    hadoop + zookeeper + hbase安装学习_计算机软件及应用_IT/计算机_专业资料。hadoop+zookeeper+hbase伪分布式安装伪分布式安装 Hadoop + zookeeper + hbase 安装配置...

  • Hadoop+Zookeeper+HBase部署指南

    Hadoop+Zookeeper+HBase 安装指南 RUC DB-IIR 卞昊穹 http://blog.csdn.net/bhq2010 bianhaoqiong@gmail.com 2012.07.28-Version1 集群情况: 4 个节点,IP ...

  • SUSE下安装配置java+hadoop+zookeeper+hbase

    hadoop+zookeeper+hbase... 3页 1下载券 hadoop + zookeeper + h... 22... SUSE 下安装 hadoop 笔记:一、 准备工作: 1.1 虚拟机网络连接模式选择:选择...

  • 全分布式Hadoop+Hbase安装实录

    全分布式Hadoop+Hbase安装实录_计算机软件及应用_IT/计算机_专业资料。全分布式... hadoop + zookeeper + h... 22页 2下载券 分布式文件存储(hadoop+... ...

  • hadoop+zookeeper+hbase for linux AS6.1_x64 install

    hadoop+zookeeper+hbase for linux AS6.1_x64 install_计算机软件及应用_IT/...安装 hbase 7.1 建立目录 (所有机器) mkdir /u01/hbconf chown -R cbcloud...

  • Hadoop+HBase+Zookeeper集群的配置

    安装 Zookeeper 在所有机器上安装 Zookeeper, 我的安装目录是个 hbase 及 hadoop 的根目录在同级 通过命令 tar zxvf zookeeper-3.3.3.tar.gz 然后修改 zookeeper...

  • hadoop+zookeeper+hbase

    hadoop second namenode & hbase HMaster 共 5 台机器 (生产环境需要把 zookeeper 单独安装) 二 操作系统和软件版本 1 操作系统:CentOS release 5.6 (Final)x...

  • hadoop+zookeeper+hbase集群

    Hadoop+zookeeper+hbase 集群配置 一.首先保证 hadoop 集群环境已经配置成功 我现在的 hadoop 环境介绍: 拥有三台 Centos6.2 32 位 linux 机器 安装的 hadoop ...

  • Hadoop1.1.2,ZooKeeper及HBase的安装配置过程(绝对可用)

    Hadoop1.1.2,ZooKeeper及HBase的安装配置过程(绝对可用)_计算机软件及应用_IT/计算机_专业资料。Hadoop1.1.2,ZooKeeper及HBase的安装配置过程(绝对可用),亲自试验...

站点地图 | 文档上传 | 侵权投诉 | 手机版
本站所有资源均来自互联网,本站只负责收集和整理,均不承担任何法律责任,如有侵权等其它行为请联系我们.
文档下载 Copyright 2013 doc.guandang.net All Rights Reserved.  -  email