storm on Yarn
来源:互联网 发布:saas java开源架构 编辑:程序博客网 时间:2024/06/02 07:58
- 项目地址:https://github.com/yahoo/storm-yarn
- Storm-yarn enables Storm clusters to be deployed into machines managed by Hadoop YARN.It is still a workin progress.仍然在开发中,所以变化有可能会比较大,而且storm是作为一个work在其中运行的。
- 邮件列表:http://groups.google.com/group/storm-yarn
- 需要java7的版本
- 使用mvn编译
- 部署:在hadoop的网关(应该是master)然后将lib目录下的storm.zip文件上传至HDFS中,以便被分布式缓存分布在所有节点中的路径:/lib/storm/<storm-version>/storm.zip
- Storm-YARN被配置为使用Netty进行通信。
- 如果使用zeromq替代Netty运行storm,还需要使用
命令增加一个.so文件create-tarball.sh storm.zip
- 使用命令
启动集群storm-yarn launch <storm-yarn-config>
- storm-yarn-configuration(yaml文件)将被用于启动一个storm集群。storm-yarn有许多新的配置选项配置storm。
- 使用命令
启动masterstorm-yarn getStormConfig <storm-yarn-config> --appId <Application-ID> --output <storm.yaml>
- 使用命令
提交storm的作业storm jar <appJar>
- 帮助命令
storm-yarn help
0 0
- storm on Yarn
- Storm On YARN
- storm-on-yarn配置
- Storm on YARN
- Storm on yarn安装
- Storm on yarn 安装
- Storm On Yarn部署
- Storm On Yarn部署
- Storm On YARN
- Storm On YARN
- storm on yarn 部署
- storm on yarn 部署
- Storm on YARN
- Storm on yarn安装步骤
- Storm(五)Storm on YARN介绍
- Storm(六)Storm On YARN部署
- Storm On YARN带来的好处
- Storm on YARN 安装部署与感悟
- Aspect 切点表达式(xml形式,非注解形式的)
- 主流支付平台的业务流程简介
- bellman_ford算法 python实现
- oracle闪回技术恢复误操作数据
- c\c++编程规范
- storm on Yarn
- drush 学习
- code forces 407A Triangle
- 课堂 test
- OpenCV(1)ML库->Normal Bayes分类器
- 【CentOS笔记】CentOS安装JDK
- 5
- 矩形类的构造函数
- 二哥养细菌