文档章节

Storm Cluster安装

Gen_zhou
 Gen_zhou
发布于 2014/09/26 10:51
字数 269
阅读 267
收藏 8

Storm Cluster安装

@[安装|storm]

官方文档:设置storm cluster ####1. 上传storm安装包到服务器

  • 在120,121,122,123四台机器的/apps/目录下安装apache-storm-0.9.1-incubating

####2. 安装Zookeeper

  • 由于121,123,124上已有Zookeeper,所以不安装Zookeeper了

####3. 安装Java和Python

  • Java1.7
  • Python2.6.6

####4. 解压下载的storm release到Nimbus和worker机器  Storm下载

####5. 修改conf/storm.yaml配置文件

  • storm.zookeeper.servers: zookeeper cluster的主机列表
    storm.zookeeper.servers:
        - "10.0.8.121"
        - "10.0.8.123"
        - "10.0.8.124"

    # 若修改了zookeeper的默认端口,需配置storm.zookeeper.port参数:
     storm.zookeeper.port: 2181
  • storm.local.dir: 存储Nimbus和Supervisor守护进程的状态量
    storm.local.dir: "/apps/apache-storm-0.9.1-incubating/data"
  • nimbus.host: master机器的IP(以便worker nodes从master下载topology jars和confs)
    nimbus.host: "10.0.8.120"
  • supervisor.slots.ports: 每个worker机器运行4个进程,每个进程使用一个独立端口接收消息
    supervisor.slots.ports:
        - 6700
        - 6701
        - 6702
        - 6703

####6. 启动守护进程

  1. Nimbus: 在master机器上运行bin/storm nimbus
  2. Supervisor: 在每个worker机器上运行bin/storm supervisor
  3. StormUI: 运行/bin/storm ui启用stormUI

####7. 搭建StormUI

© 著作权归作者所有

上一篇: JVM的类加载
下一篇: Storm术语简介
Gen_zhou
粉丝 18
博文 25
码字总数 31230
作品 0
海淀
程序员
私信 提问
Kafka实战-Storm Cluster

1.概述   在《Kafka实战-实时日志统计流程》一文中,谈到了Storm的相关问题,在完成实时日志统计时,我们需要用到Storm去消费Kafka Cluster中的数据,所以,这里我单独给大家分享一篇Sto...

smartloli
2015/06/18
0
0
如何在eclipse调试storm程序

一、介绍 storm提供了两种运行模式:本地模式和分布式模式。本地模式针对开发调试storm topologies非常有用。 Storm has two modes of operation: local mode and distributed mode. In loca...

cloud-coder
2014/02/16
10.1K
1
storm client command

最近在研究实时日志分析,storm确实不错,以下是命令参数: storm help Syntax: storm jar topology-jar-path class 运行jar包中类的主函数和指定的参数 Commands: activate storm activate ...

China_OS
2014/02/22
1K
0
Twitter Storm入门

.通过学习tutorial了解storm的整体架构(https://github.com/nathanmarz/storm/wiki/Tutorial) 通过学习Concepts了解storm的关键概念(https://github.com/nathanmarz/storm/wiki/Concepts......

加油_张
2013/09/14
357
0
Apache Slider + Storm

Apache Slider + Storm 系统环境 安装如下组件,部署可用环境 JDK 1.7.0_79 Apache Zookeeper 3.4.* Apache Zookeeper Apache Hadoop 2.6.* Apache Hadoop Apache Storm 0.9.4 Apache Storm......

Yulong_
2016/09/21
468
0

没有更多内容

加载失败,请刷新页面

加载更多

linux 定时脚本

1.定时任务基本用法 linux设置定时任务的关键字是:crontab查看当前定时任务:crontab -l新建定时任务的命令是:crontab -e 打开类似vi编辑器向里面新增内容即可 2.参数说明 时间的格...

半张一块
16分钟前
2
0
免费好用的常用软件

UninstallTool 比控制面板的卸载好用的多很小 Everything硬盘搜索快 QuickLook快速查看预览文件不用打开 7Z 、Bandizip比winrar没广告 gogs,gitlab 自架git 服务器 VisualSVN Server,svn服...

momo1987
17分钟前
2
0
@Transactional事务几点注意及其属性Propagation的使用

@Transactional事务几点注意 这里面有几点需要大家留意: A. 一个功能是否要事务,必须纳入设计、编码考虑。不能仅仅完成了基本功能就ok。 B. 如果加了事务,必须做好开发环境测试(测试环境...

小海bug
20分钟前
2
0
10套精美可视化数据分析PPT图表,职场必备

在日常工作当中制作PPT的时,一些麻烦的数据什么的,我们常会用到图表展示,但是图表制作过程中难免会遇到一些问题,可能表达不清楚,或者可能有做得不好看的情况出现等等!其实如果有一些好...

TeFuiro
25分钟前
3
0
拐点已至,云原生引领数字化转型升级

作者 | 易立 阿里云资深技术专家 本文整理自易立在 2019 携程技术峰会上发表的题目为《拐点已至,云原生引领数字化转型升级》的演讲。 关注“阿里巴巴云原生”公众号,回复关键词“转型”即可...

阿里巴巴云原生
27分钟前
3
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部