博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
CDH版本java开发环境搭建
阅读量:4661 次
发布时间:2019-06-09

本文共 6510 字,大约阅读时间需要 21 分钟。

1. maven设置

 除了阿里云库,还需要引入 cdh, spring库。需要修改maven下面的配置文件setting.xml, 参考下面设置。

nexus-aliyun
*,!cloudera,!spring-releases
Nexus aliyun
http://maven.aliyun.com/nexus/content/groups/public

2. 在项目文件pom.xml中引入的是cdh对应版本的包

设置cdh库,spring库。

cloudera
https://repository.cloudera.com/artifactory/cloudera-repos/
true
false
spring-releases
https://repo.spring.io/libs-release

依赖包需要加入cdh版本的

eigenbase
eigenbase-properties
1.1.4
org.apache.hadoop
hadoop-common
2.6.0-cdh5.15.1
org.apache.hive
hive-jdbc
1.1.0-cdh5.15.1
org.apache.hive
hive-exec
1.1.0-cdh5.15.1
org.apache.hive
hive-metastore
1.1.0-cdh5.15.1
org.apache.hadoop
hadoop-mapreduce-client-core
2.6.0-cdh5.15.1

其他的依赖包正常添加即可。

附上1个完成的pom文件。

4.0.0
com.etl
suyandv
1.0.0
jar
UTF-8
cloudera
https://repository.cloudera.com/artifactory/cloudera-repos/
true
false
spring-releases
https://repo.spring.io/libs-release
eigenbase
eigenbase-properties
1.1.4
org.apache.hadoop
hadoop-common
2.6.0-cdh5.15.1
org.apache.hive
hive-jdbc
1.1.0-cdh5.15.1
org.apache.hive
hive-exec
1.1.0-cdh5.15.1
org.apache.hive
hive-metastore
1.1.0-cdh5.15.1
org.apache.hadoop
hadoop-mapreduce-client-core
2.6.0-cdh5.15.1
org.apache.commons
commons-lang3
3.3.2
com.squareup.okhttp3
okhttp
3.11.0
redis.clients
jedis
2.9.0
mysql
mysql-connector-java
5.1.46
log4j
log4j
1.2.17
com.alibaba
fastjson
1.2.51
com.fasterxml.jackson.core
jackson-core
2.6.7
com.fasterxml.jackson.core
jackson-databind
2.6.7
suyandv
maven-compiler-plugin
1.8
1.8
UTF-8
org.apache.maven.plugins
maven-dependency-plugin
copy-dependencies
prepare-package
copy-dependencies
${project.build.directory}/lib
false
false
true
org.apache.maven.plugins
maven-jar-plugin
2.4
true
lib/
View Code

 

转载于:https://www.cnblogs.com/30go/p/9892087.html

你可能感兴趣的文章
python----操作Memcache、redis、RabbitMQ、SQLAlchemy
查看>>
DISQLite3 - A self-contained, embeddable, zero-configuration SQL database engine for Delphi
查看>>
一、cryptsetup文件系统加密
查看>>
win7系统扩展双屏幕时,开启两个屏幕下都显示任务栏,第三方插件
查看>>
Android笔记——Android中数据的存储方式(二)
查看>>
POJ 3613 Cow Relays
查看>>
BZOJ3532 SDOI2014 LIS
查看>>
ospf v3 实验
查看>>
Linux经久不衰的应用程序
查看>>
举例说明如何实现一个泛型类
查看>>
第三章 经典算法
查看>>
ThreadLocal用法详解和原理(转)
查看>>
Qt调试中遇到中文注释导致的调试异常
查看>>
面试编程题拾遗(06) --- 打印n对括号的全部有效组合
查看>>
Java环境搭建指南
查看>>
POJ 3304 Segments(判断直线与线段是否相交)
查看>>
编程求一个后缀表达式的值
查看>>
c#程序框架-基于视图的数据列表查询
查看>>
转,AppDomain与Assembly的动态加载与卸载
查看>>
Lucene4.6 把时间信息写入倒排索引的Offset偏移量中,并实现按时间位置查询
查看>>