Lunch Hive Task By SpringBoot

Lunch Hive Task By SpringBoot 序言

本Demo是基于SpringBoot 创建Hive 任务并提交到 MapReduce On Yarn 上进行计算.

那SpringBoot连接Hive的整体思路其实很简单就是通过JDBC.针对Hive的任务并提交到Yarn上就是通过SQL(当然实际的任务是MapReduce,那我们只是通过SQL的形式交由程序去自动创建[email protected]) 前提是要启动Hive Server

如下所示: 

参考信息:

• Apache Hive TM

整合方案

正如官网所说的,我们直接以JDBC的形式进行整合就行了,就像你使用Mybatis整合MySql一样.

如此我们就可以了解到,在我们自己的工程中可以同时整合Mysql,Oracle,Hive进行多数据源的 *** 作.整合的要求参考不同JPA的技术实现,你可以把Hive看成就是Mysql.只是使用了不同的驱动.

使用过程中的一些问题