ApacheStorm集群如何配置

这篇文章主要介绍Apache Storm集群如何配置,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

创新互联公司是一家以网络技术公司,为中小企业提供网站维护、做网站、成都网站设计、网站备案、服务器租用、空间域名、软件开发、小程序制作等企业互联网相关业务,是一家有着丰富的互联网运营推广经验的科技公司,有着多年的网站建站经验,致力于帮助中小企业在互联网让打出自已的品牌和口碑,让企业在互联网上打开一个面向全国乃至全球的业务窗口:建站欢迎咨询:18980820575

我们使用如下三台机器搭建Storm集群,此文档在我们已经安装了zookeeper集群、JDK的前提下有效

192.168.1.96
192.168.1.45
192.168.1.34

下面操作在不说明的情况下都是在96这台机器上做的操作

安装配置

首先下载解压

wget http://mirrors.noc.im/apache/storm/apache-storm-1.0.0/apache-storm-1.0.0.tar.gz  
tar xzvf  apache-storm-1.0.0.tar.gz  
cd apache-storm-1.0.0

其次编辑conf/storm.yaml文件

Apache Storm集群如何配置

1) storm.zookeeper.servers: storm集群使用的zk集群地址,如果zk使用的不是默认2181的端口,那么我们还要增加 storm.zookeeper.port的配置项 
2) storm.local.dir 用于存储少量数据,需要我们提前创建好目录   
3) nimbus.seeds 让工作节点知道哪个是nimbus以便下载topology的jar和conf  
4) supervisor.slots.ports 对于每个Supervisor工作节点,需要配置该工作节点可以运行的worker数量。
每个worker占用一个单独的端口用于接收消息,该配置选项即用于定义哪些端口是可被worker使用的。
默认情况下,每个节点上可运行4个workers,分别在6700、6701、6702和6703端口 
5)这里的cluster1对应96,cluster2对应45,cluster3对应34机器,刚开始的时候我这里都是直接写的ip,
但是storm ui起来之后发现如下情况,都是localhost而且nimbus里面有两个,如下图

Apache Storm集群如何配置6) 如何将ip和cluster1、cluster2、cluster3对应起来呢,我们需要配置机器的hosts和hostname,拿96这台机器来举例: Apache Storm集群如何配置

Apache Storm集群如何配置

同步storm到其他机器上

scp -r apache-storm-1.0.0/ 192.168.1.45:/data/strawbird/apache-storm-1.0.0
scp -r apache-storm-1.0.0/ 192.168.1.34:/data/strawbird/apache-storm-1.0.0

启动

在主节点也就是96这台机器上启动Nimbus,在从节点也就是45和34这两台机器上启动Supervisor服务
bin/storm nimbus &
bin/storm supervisor &
在主节点上启动storm ui,经测试storm ui在supervisor节点上启动之后访问URL: http://xxx.xxx.xxx:8080不能正确显示
bin/storm ui &
起来之后我们就可以看到如下截图,这就是正常了

Apache Storm集群如何配置

以上是“Apache Storm集群如何配置”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注创新互联行业资讯频道!


文章题目:ApacheStorm集群如何配置
路径分享:http://myzitong.com/article/gpepho.html