牛刀小试——Hive源码Debug全流程讲解

使用Hive执行HQL查询时遇到bug,解决办法无非几种,explain HQL、查看日志、远程Debug,本文就将详细讲解如何使用IDEA远程Debug。

1、Debug环境准备

1. 下载源码包

下载Hive源码包,自行编译一下,建议在Linux环境下编译,然后将整个编译好的包全部拷贝到IDEA工作目录中并使用IDEA打开。该文档是以Hive3.1.2版本作为讲解的。在资料包中提供了已经编译好的Hive源码包。

2. 打开项目配置项

java培训技术牛刀小试——Hive源码Debug全流程讲解

 

3. 添加远程连接配置组

java培训技术牛刀小试——Hive源码Debug全流程讲解

 

4. 添加配置信息

java培训技术牛刀小试——Hive源码Debug全流程讲解

 

2、测试

1. 在CliDriver;类的run方法中随意打上断点

java培训技术牛刀小试——Hive源码Debug全流程讲解

 

2. 开启Hive客户端的Debug模式

$HIVE_HOME/bin/hive–debug

3. 使用Debug模式启动本地项目

java培训技术牛刀小试——Hive源码Debug全流程讲解

 

4. 在Hive客户端中执行HQL,切换到IDEA中查看

(1)在IDEA中查看断点

java培训技术牛刀小试——Hive源码Debug全流程讲解

 

(2)在Hive Debug模式客户端查看

java培训技术牛刀小试——Hive源码Debug全流程讲解
想要了解跟多关于大数据培训课程内容欢迎关注尚硅谷大数据培训,尚硅谷除了这些技术文章外还有免费的高质量大数据培训课程视频供广大学员下载学习。