这是一篇工具类的文章,工欲善其事必先利其器,要分析调试hive源码,必须搭建一套hive的运行环境。还记得第一次搭建hive源码调试环境,用了一个月的时间,才完全跑通整个调试过程。中间遇到各种各样莫名奇妙的问题,也有好多次想放弃,幸好坚持了下来。
我在调试hive源码时,主要使用eclipse,所以最终要把hive源码编译成eclipse项目,方便导入eclipse进行调试。
后面会考虑录hive源码系列的同步视频
linux版本:centos 6.5
Java版本:jdk1.8
Hive版本:hive-2.1.1
Hadoop版本:hadoop-2.7.3
Maven版本:maven-3.5.4
1、Maven安装
Hive的编译需要用到Maven
下载 apache-maven-3.5.4-bin.tar.gz
http://maven.apache.org/download.cgi
- 上传maven安装包
- 解压安装包 tar -zxvf apache-maven-3.5.4-bin.tar.gz
- 建立软链节 ln -s apache-maven-3.5.4 maven
- 配置环境变量 vim /etc/profile
source /etc/profile 使生效
- 验证 mvn –version
2、编译Hive2.1.1源码
上传源码包apache-hive-2.1.1-src.tar.gz 至 /usr/local/workspace
解压 tar -zxvf apache-hive-2.1.1-src.tar.gz
cd /usr/local/workspace/apache-hive-2.1.1-src
mvn clean install -DskipTests
经过漫长的等待,当看到上面截图时,就说明编译成功了
3、编译Hive2.1.1 为eclipse项目
mvn eclipse:clean
mvn eclipse:eclipse -DdownloadSources-DdownloadJavadocs
编译成功后进入源码文件夹中可以看到每个项目中会有.classpath,.project文件
(完)