Hadoop入门基础课程2-1--编译环境
1、编译环境
1.1软硬件环境说明
所有节点均是CentOS系统，防火墙和SELinux禁用，所有节点上均创建了一个shiyanlou用户，并在系统根目录下创建/app目录，用于存放Hadoop等组件运行包。因为该目录用于安装hadoop等组件程序，用户对shiyanlou必须赋予rwx权限(一般做法是root用户在根目录下创建/app目录，并修改该目录拥有者为shiyanlou(chown –R shiyanlou:shiyanlou /app)。
Hadoop搭建环境：
l 虚拟机操作系统： CentOS6.6 64位，单核，1G内存
l JDK：1.7.0_55 64位
l Hadoop：1.1.2
1.2环境搭建
1.2.1JDK安装和Java环境变量配置
1.下载JDK1.7 64bit安装包
打开JDK1.7 64bit安装包下载链接为：
http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html
打开界面之后，先选中 Accept License Agreement ，然后下载 jdk-7u55-Linux-x64.tar.gz，如下图所示：
2.创建/app目录，把该目录的所有者修改为shiyanlou
sudo mkdir /app
sudo chown -R shiyanlou:shiyanlou /app
3.创建/app/lib目录，使用命令如下：
mkdir /app/lib
4. 把下载的安装包解压并迁移到/app/lib目录下
cd /home/shiyanlou/install-pack
tar -zxf jdk-7u55-Linux-x64.tar.gz
mv jdk1.7.0_55/ /app/lib
ll /app/lib
5.使用sudo vi /etc/profile命令打开配置文件，设置JDK路径
export JAVA_HOME=/app/lib/jdk1.7.0_55
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
6.编译并验证
source /etc/profile
java -version
1.2.2安装并设置maven
1.下载maven安装包(建议安装3.0以上版本)本次安装选择的是maven3.0.5的二进制包，下载地址http://mirror.bit.edu.cn/apache/maven/maven-3/ ，也可以在/home/shiyanlou/install-pack目录中找到该安装包
2. 解压缩apache-maven-3.0.5-bin.tar.gz包，并把apache-maven-3.0.5目录移到/app/lib目录下
cd /home/shiyanlou/install-pack
tar -zxf apache-maven-3.0.5-bin.tar.gz
mv apache-maven-3.0.5 /app/lib
3.使用sudo vi /etc/profile打开配置文件，并加入maven设置
export MAVEN_HOME=/app/lib/apache-maven-3.0.5
export PATH=$PATH:$MAVEN_HOME/bin
4.编译/etc/profile文件并验证配置是否成功:
source /etc/profile
mvn -version
1.2.3使用yum安装svn
sudo yum install svn
1.2.4使用yum安装autoconf automake libtool cmake
sudo yum install autoconf automake libtool cmake
1.2.5使用yum安装ncurses-devel
sudo yum install ncurses-devel
1.2.6使用yum安装openssl-devel
sudo yum install openssl-devel
1.2.7使用yum安装gcc*
sudo yum install gcc*
1.2.8安装并设置protobuf
注：该程序包需要在gcc安装完毕后才能安装，否则提示无法找到gcc编译器。
1.下载protobuf安装包
下载链接为 https://code.google.com/p/protobuf/downloads/list ，也可以在/home/shiyanlou/install-pack目录中找到该安装包
2.解压安装包并把protobuf-2.5.0目录转移到/app/lib目录下
cd /home/shiyanlou/install-pack
tar -zxf protobuf-2.5.0.tar.gz
mv protobuf-2.5.0 /app/lib
3.进行目录运行命令
进入目录运行如下命令：
cd /app/lib/protobuf-2.5.0/
sudo ./configure
sudo make
sudo make check
sudo make install
make过程时间较长，需要运行几分钟时间
check结果如下
运行install命令及结果如下
4.验证是否安装成功
运行成功之后，通过如下方式来验证是否安装成功，如果出现"Missing input file"表示成功安装protobuf
protoc
-
标签错误:<!-- #Label#
labelId=20160707140604
moduleId=1
classId=12231768634
orderby=2
fields=url,title,u_info
attribute=
datatypeId=22192428132
recordCount=3
pageSize=
<htmlTemplate><dt><img src="/images/index_26${index}.jpg" width="100" height="62" /><a href="$url" title="${title}">${title}</a><span>${api.left(u_info,60)}</span></dt></htmlTemplate>
-->
- 我要参加技术沙龙
