hadoop安装单机模式

Published by xiaosixi on

1、下载 hadoop-2.6.4-src.tar.gz

http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.6.4/

2、解压并拷贝到/usr/local/hadoop下

sudo tar xzf hadoop-2.6.4-src.tar.gz

sudo mv hadoop-2.4.0 /usr/local/hadoop

3、赋予用户对该文件夹的读写权限

sudo chmod 774 /usr/local/hadoop

4、配置~/.bashrc

查看Java安装路径

update-alternatives --config java

配置.bashrc文件

sudo vi ~/.bashrc

#HADOOP VARIABLES START
export JAVA_HOME=/usr/lib/jvm/jre-1.6.0-openjdk.x86_64
export HADOOP_INSTALL=/usr/local/hadoop
export PATH=$PATH:$HADOOP_INSTALL/bin
export PATH=$PATH:$HADOOP_INSTALL/sbin
export HADOOP_MAPRED_HOME=$HADOOP_INSTALL
export HADOOP_COMMON_HOME=$HADOOP_INSTALL
export HADOOP_HDFS_HOME=$HADOOP_INSTALL
export YARN_HOME=$HADOOP_INSTALL
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_INSTALL/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_INSTALL/lib"
#HADOOP VARIABLES END

执行下面命,使添加的环境变量生效:

source ~/.bashrc

5、WordCount测试

在/usr/local/hadoop下新建一个input文件夹

mkdir input

拷贝一个文件到input中

 cp README.txt input

执行

bin/hadoop jar share/hadoop/mapreduce/sources/hadoop-mapreduce-examples-2.6.4-sources.jar org.apache.hadoop.examples.WordCount input output

执行结果:

执行 cat output/*,查看字符统计结果:

参考:http://www.cnblogs.com/kinglau/p/3794433.html

Categories: hadoop

xiaosixi

本人IT码农一枚,从事java企业级应用开发,目前就职于深圳某某公司,热衷于对技术的研究和热爱。本网站主要记录生活、工作上所发生所看的,可能大多来自互联网,如有版权问题,请联系,我会及时处理。

0 Comments

发表评论

电子邮件地址不会被公开。 必填项已用*标注