oozie4.0 cdh版的安装探讨(二)
来源:互联网 发布:我要下载淘宝网购物 编辑:程序博客网 时间:2024/06/02 12:35
配置oozie与yarn,使能够调度mapreduce:
注意,yarn的historyserver必须开启,否则会oozie会监测不到提交上去的作业。否则汇报类似的错误:
org.apache.oozie.action.ActionExecutorException: JA006: Call From localhost.localdomain/127.0.0.1 to localhost:10020 failed on connection exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused
1.修改oozie-site文件
将oozie.service.HadoopAccessorService.hadoop.configurations属性的值修改为*=实际的hadoop的配置文件路径
2.修改oozie-default文件
将oozie.services属性中的org.apache.oozie.service.JobsConcurrencyService值提到第一个位置
3.创建sharelib
oozie-setup.sh sharelib create -fs hdfs://localhost:8020 -locallib $OOZIE_HOME/oozie-sharelib-4.0.0-cdh5.0.1-yarn.tar.gz
下面的地址是官方文档,将如何用跑mapredcue的例子。
http://oozie.apache.org/docs/4.0.1/DG_Examples.html
其中,需要注意的是,job.properties中的jobtracker的地址要修改为yarn.resourcemanager.address的地址。这样就可以把mapredcue作业提交到yarn上。
- oozie4.0 cdh版的安装探讨(二)
- oozie4.0 cdh版的安装探讨(一)
- 安装cdh 版的impala
- oozie4.3编译安装
- Oozie4.3 安装部署
- oozie4.0.1详细安装教程
- Oozie4.2.0配置安装实战
- oozie4.0 hadoop2.3编译
- CDH版solr安装IKAnalyzer
- Oozie4.2 安装部署、以及example测试
- CDH安装
- 安装cdh
- cdh安装
- CDH安装
- CDH安装
- CDH安装
- CDH安装
- CDH安装
- QEWFQEFQ
- UIImage加载图片选择imageNamed方法还是imageWithContentsOfFile?
- HDU 1052 Tian Ji -- The Horse Racing
- javah命令生成含native方法声明的c/c++头文件
- [游戏技术]L4D1支持L4D2官方地图运行方法
- oozie4.0 cdh版的安装探讨(二)
- OpenGL程序运行提示glut32.dll丢失问题
- LayoutInflater的使用
- http接口开发及调用
- $.isEmptyObject()
- jquery的$.extend和$.fn.extend作用及区别
- json级联
- wiki 1914 运输问题
- 【小白的java成长系列】——java关键字