hive spark版本对应关系

查看hive source下面的pom.xml，可以找到官方默认发布的hive版本对应的spark版本，在实际部署的时候，最好按照这个版本关系来，这样出现兼容问题的概率相对较小。

下面面列出一部分对应关系，在实际部署中可以到github上去查询具体的版本对应关系，地址为https://github.com/apache/hive

apache-hive-1.2.2-src <spark.version>1.3.1</spark.version>
apache-hive-2.1.1-src <spark.version>1.6.0</spark.version>
apache-hive-2.3.3-src <spark.version>2.0.0</spark.version>

apache-hive-2.3.4-src <spark.version>2.0.0</spark.version>
apache-hive-3.0.0-src <spark.version>2.3.0</spark.version>

原文地址：https://www.cnblogs.com/lenmom/p/10354092.html

时间： 2024-07-31 14:06:34

hive spark版本对应关系的相关文章

Mapreduce+Hive+Spark+Scala平台搭建

Mapreduce+Hive+Spark+Scala平台搭建 说明 平台搭建成功后,使用Java语言进行算法设计和应用的开发.文末有使用java设计的逻辑回归(Logistics Regression)做小数据集的二分类问题. 一.搭建准备 VMWare Workstation Ubuntu 14.04 Server.iso Xshell--远程连接主机终端 Server 版安装配置 新建三台虚拟机,安装时选择OpenSHH Server预安装环境 一台作为master 另两台作为slave,命

ChromeDriver与Chrome版本对应关系

备注: 下载ChromeDriver的时候,可以在notes.txt文件中查看版本对应关系. ----------ChromeDriver v2.29 (2017-04-04)---------- Supports Chrome v56-58 Resolved issue 1521: Assignment to Object.prototype.$family causes a crash [['Pri-1']] Resolved issue 1482: Chromedriver cannot

搭建Data Mining环境（Spark版本）

前言:工欲善其事,必先利其器.倘若不懂得构建一套大数据挖掘环境,何来谈Data Mining!何来领悟“Data Mining Engineer”中的工程二字!也仅仅是在做数据分析相关的事罢了!此文来自于笔者在实践项目开发中的记录,真心希望日后成为所有进入大数据领域挖掘工程师们的良心参考资料.下面是它的一些说明: 它是部署在Windows环境,在项目的实践开发过程中,你将通过它去完成与集群的交互,测试和发布: 你可以部署成使用MapReduce框架,而本文主要优先采用Spark版本: 于你而言,

Office 开发版本号与版本对应关系

Office 开发版本号与版本对应关系: office97 : 8.0 office2000 : 9.0 officeXP(2002) : 10.0 office2003 : 11.0 office2007: 12.0 office2010 : 14.0 office2013: 15.0

Spark版本定制：通过案例对SparkStreaming透彻理解三板斧之一

本期内容: 1 Spark Streaming另类在线实验 2 瞬间理解Spark Streaming本质 问:为什么从Spark Streaming来切入spark源码版本订制? Spark最开始的时候并没有Spark Streaming.Spark Sql.Spark ML.Spark R.Spark Graphx等相关的内容,就是很原始的Spark Core,Spark Streaming本身是Spark Core上的一个框架,透过一个框架的彻底研究可以彻底精通spark的方方面面: Sp

CentOS（RHEL）内核版本与系统版本对应关系

通过本文你可以获取如下信息: CentOS/RHEL 内核源码包下载地址. CentOS/RHEL 内核版本和系统版本对应关系. CentOS/RHEL 各个系统版本发布时间. CenOS 各个版本源码包及RPM包下载地址. 以下信息全部来自官方:http://vault.centos.org/ Name Last modified Size Description 对应内核源码包 5.0/ 11-Apr-2007 18:53 - kernel-2.6.18-8.el5.src.rpm 5.1/

Spring Cloud常用组件及各组件版本对应关系图

Spring Cloud常用组件: 架构图: 版本对应关系: 原文地址:https://www.cnblogs.com/niwotaxuexiba/p/10853156.html

Solr与JDK对应版本关系，Tomcat与JDK版本对应关系

最新在部署solrCloud集群,由于自己机器上用的JDK都是JDK1.7的,然后我就从网上下载了最新下载了最先的solr6.6.0和最新的Tomcat9.0,部署了一下,开始报错,提示solr和JDK版本不兼容,Tomcat和JDK版本不兼容,所以在这里特意记录一下solr.JDK.Tomcat版本对应关系. 一.solr与JDK版本对应关系 1.solr下载 首先,说一下solr的下载,官网有很对下载源,我最常用的是http://archive.apache.org/dist/lucene/

Spring Boot与Spring Cloud技术选型版本对应关系

Spring Boot与Spring Cloud版本严格来将,Boot是以数字作为版本,Cloud是以英语大写字母开头作为版本,这些其实都是伦敦地铁站命名的版本. 一.如何选择Spring Boot版本? github源码地址:https://github.com/spring-projects/spring-boot/wiki springboot2.0新特性:https://github.com/spring-projects/spring-boot/wiki/Spring-Boot-2.0