参考：http://jyd.me/nosql/oozie-classnotfoundexception-solution/

http://shiyanjun.cn/archives/684.html

如果出现以下错误：

怎么解决呢？当然是加入对应的包啦~~

运行Oozie的job，Oozie要怎么找到所需要的类呢？

有两种方式来添加jar包。

先看下Oozie workflow的目录。

其中workflow.xml和job.properties是必须要有的，id.pig则是跟job有关的pig脚本，这里可以无视。

关键是lib文件夹，这个文件夹可有可无，如果有，oozie则会自动把lib下面的jar包加到workflow的classpath里面去。

这样通过oozie运行的任务就能找到jar包啦~

以上这种方式是最简单的方式。

另外，我们也可以在job.properties文件里面使用oozie.libpath来指定其它的HDFS目录（可以指定多个目录，通过逗号分隔）。

通过oozie.libpath来指定jar包目录的好处就是，多个workflow可以共用jar包。

现在说第二种方式，通过ShareLib。

像 DistCp, Streaming, Pig, Sqoop, and Hive之类Action，需要额外的Jar包才能运行。

使用ShareLib的方式很像oozie.libpath，不一样的是，它是为上面说的那些特殊的action和他们对应的JARs而准备的。

CDH 4.1.2的ShareLib目录如下：

就如你所看到的，上面那些action各自依赖很多jar，每个action都有自己对应的文件夹，这样oozie就可以仅仅使用对应acion所需要的jar包，而不是把所有的jar包都包含进去。

其实，这么做是必须的。因为不是所有的action使用相同甚至是兼容的包。比如Hive action使用antlr-runtime-3.0.1.jar， 而用antlr-runtime-3.4.jar的时候将会运行失败，但是后者却是Pig action所需要的。

默认情况下，ShareLib必须放在HDFS上运行Oozie web server用户的目录下。不需要和提交oozie job的用户相同。对了，sharelib的压缩文件就在oozie的目录下~

在oozie-site.xml里面的oozie.service.WorkflowAppService.system.libpath可以指定ShareLib的位置，默认是/user/${user.name}/share/lib,其中${user.name}就是运行oozie服务的用户。详细的配置可以参考http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/4.2.0/CDH4-Installation-Guide/cdh4ig_topic_17_6.html

对了，因为cloudera的CDH4支持MRv1和YARN，所以必须用对应的sharelib包才行。

要让一个workflow使用ShareLib，只需要在job.properties里面加入oozie.use.system.libpath=true就行啦~。

Overriding the ShareLib

这个暂时没用到，就不翻译了。

In CDH 4.1.0 and later (or Oozie 3.3.0 and later), you can override the ShareLib location at the action, job, and server levels. This allows users or admins to support multiple versions or a patched version of an action at the same time. The property is calledoozie.action.sharelib.for.actiontype, where actiontype is the name of the action type (e.g. Pig, Sqoop); you would set its value to the name of a subfolder in the ShareLib. To set it at the action level you would put the property in that action’s<configuration>; to set it at the job level, you would put the property in that job’s job.properties; and to set it at the server level, you would put the property in oozie-site.xml.

For example, Oozie currently ships ready for Pig 0.10.x, but suppose you also want to be able to use Pig 0.9.x in the same workflow. The share/lib/pig folder is for Pig 0.10.x, but if you add a new folder with the Pig 0.9.x JARs, say share/lib/pig-9, you can put the following in the <configuration> element for the Pig 0.9.x action:

<property><name>oozie.action.sharelib.for.pig</name><value>pig-9<value></property>

Oozie will continue to use share/lib/pig for the Pig 0.10.x action but will use share/lib/pig-9 for the Pig 0.9.x action.

参考：http://blog.cloudera.com/blog/2012/12/how-to-use-the-sharelib-in-apache-oozie/

Oozie 出现 ClassNotFoundException 解决方法相关推荐

1. java.lang.classnotfoundexception解决方法

   java.lang.classnotfoundexception解决方法 参考文章: (1)java.lang.classnotfoundexception解决方法 (2)https://www.cn ...

2. Tomcat启动异常：A child container failed during start 与 ClassNotFoundException解决方法

   首先查看项目配置是否有错 项目右键->properties 1.检查Java Build Path 2.检查Java Compiler 3.检查Project Facets中的Java等级,与t ...

3. Java web应用引用外部jar包 运行时报ClassNotFoundException 解决方法

   最近做了个封装接口SDK的项目,在做模拟程序调用SDK的jar时,运行时出现了ClassNotFoundException. 由于是多个组件的项目,我只在运用调用jar包代码的组件中引用jar包,试过 ...

4. java.lang.ClassNotFoundException: com.mysql.jdbc.Driver 解决方法 java.lang.ClassNotFoundException: com.

   java.lang.ClassNotFoundException: com.mysql.jdbc.Driver 解决方法 java.lang.ClassNotFoundException: com.m ...

5. Idea运行web项目时,提示java.lang.ClassNotFoundException: com.mysql.jdbc.Driver解决方法

   Idea运行web项目时,提示java.lang.ClassNotFoundException: com.mysql.jdbc.Driver解决方法 参考文章: (1)Idea运行web项目时,提示j ...

6. 控制台报错：java.lang.ClassNotFoundException: javax.xml.bind.JAXBException之解决方法

   控制台报错:java.lang.ClassNotFoundException: javax.xml.bind.JAXBException之解决方法 参考文章: (1)控制台报错:java.lang.C ...

7. java.lang.ClassNotFoundException: org.apache.commons.dbcp.BasicDataSource解决方法

   java.lang.ClassNotFoundException: org.apache.commons.dbcp.BasicDataSource解决方法 只需把这三个commons-pool.jar ...

8. ClassNotFoundException: com.fasterxml.jackson.databind.AnnotationIntrospector$XmlExtensions的解决方法

   [现象] java.lang.ClassNotFoundException: com.fasterxml.jackson.databind.AnnotationIntrospector$XmlExte ...

9. java.lang.ClassNotFoundException: org.springframework.web.servlet.HandlerMapping解决方法

   [现象] Caused by: java.lang.ClassNotFoundException: org.springframework.web.servlet.HandlerMapping at ...

最新文章

1. 设置Fetch快捷键Ctrl+Alt+Shift+1
2. linux进入文件夹命令,如何在 Linux 中不使用 CD 命令进入目录/文件夹？
3. python标准类型内建函数_Python 标准库系列之内建函数
4. 谷歌云使用账号密码_如何使用Google密码检查
5. C语言字符串输出函数puts()的作用是什么
6. virtual box中安装Mac OS后设置分辨率
7. Java最常见208道面试题：Java大土豆答案
8. Hexo 搭建个人博客学习笔记（4）：个性化主题Next个性化配置
9. echarts scatter3D 图标陷进地图
10. Apriori（关联分析算法）
11. 微信小程序判断手机号码格式正确与否的代码
12. Geometry点线面的初始化
13. ARM嵌入式的定义和开发工具介绍
14. 如何传播一个会议--给Open Party的建议
15. ntldr is compressed 解决方法 attrib -c ntldr
16. 经验帖｜M1芯片的MacBook pro如何安装Tensorflow【亲测有效】
17. python实现图书管理系统(带gui)
18. Kettle（一） 下载及环境部署
19. Facebook 广告效果越来越差，怎么办？
20. Axure PR9左侧页面概要元件母版不见了，在哪开启

热门文章

1. Qt利用avilib实现录屏功能_利用 dogtail 快速进行 GUI 自动化测试
2. etcd — Overview
3. Go 语言编程 — 高级数据类型 — Slice 切片
4. VMware 虚拟化编程(4) — VDDK 安装
5. Cocos坐标之convertToNodeSpace、convertToWorldSpace、convertToNodeSpaceAR、convertToWorldSpaceAR区别和用法...
6. 计算机网络-网络层（一）
7. [Python3网络爬虫开发实战] 7-动态渲染页面爬取-4-使用Selenium爬取淘宝商品
8. （实用）Ubuntu Linux静态IP网络配置
9. nethogs监控linux流量
10. Zabbix监控之常用snmp-OID