14.2 Storm部署搭建

2024-06-07 19:08
文章标签 部署 搭建 storm 14.2

本文主要是介绍14.2 Storm部署搭建,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

单机版:

1,上传apache-storm-0.9.5.tar.gz (前提需要有java环境)

2,解压 tar -zxvf apache-storm-0.9.5.tar.gz

3,cd apache-storm-0.9.5 进入解压目录

4,mkdir logs 在目录当中创建一个logs文件夹

5,./bin/storm dev-zookeeper >> ./logs/zk.out 2>&1 & 启动自带的zookeeper

6,./bin/storm nimbus >> ./logs/nimbus.out 2>&1 & 启动nimbus

7,./bin/storm ui >> ./logs/ui.out 2>&1 & 启动ui 一般和nimbus 在一台机子上

8,./bin/storm supervisor >> ./logs/supervisor.out 2>&1 & 启动supervisor,可以启动多个,再运行一次就行

9,./bin/storm logviewer >> ./logs/logviewer.out 2>&1 & 启动logviewer,在UI上可以查看日志

验证:访问http://node2:8080

单机版的步骤,storm自带了一个开发版的ZK,也不需要自己去部署,配置都不需要,极其简单 的,这也是Storm的一个好处,基本上是开箱即用的,单机环境虽然没有什么实际的价值,但是 在简单的测试上还是很有用的

./bin/storm jar /opt/local/storm.jar com.yuntian.test.StromTest workcount 上传jar包进行测试,传参数workcount


集群模式搭建:

修改配置文件conf/storm.yaml

storm.zookeeper.servers:

- "node2"

- "node3"

- "node4"

storm.zookeeper.port: 4180 当zookeeper不是默认端口需要配置端口

nimbus.host: "node2" 设置nimbus节点

scp -r apache-storm-0.9.5 root@node3:`pwd` 复制到其他几个节点 注意删除storm-local文件夹

1,启动zookeeper集群

2,在node2上启动nimbus:./bin/storm nimbus >> ./logs/nimbus.out 2>&1 &

3,在node2上启动ui :./bin/storm ui >> ./logs/ui.out 2>&1 &

4,可以在node3,node4上分别启动一个supervisor :./bin/storm supervisor >> ./logs/supervisor.out 2>&1 &

5,./bin/storm logviewer >> ./logs/logviewer.out 2>&1 & 启动logviewer,在UI上可以查看日志,和supervisor 同步

随便在一个节点node3,node4上:./bin/storm jar /opt/local/storm.jar com.yuntian.test.StromTest workcount 上传jar包进行测试,传参数workcount

http://node2:8080

这篇关于14.2 Storm部署搭建的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1040039

相关文章

使用docker搭建嵌入式Linux开发环境

《使用docker搭建嵌入式Linux开发环境》本文主要介绍了使用docker搭建嵌入式Linux开发环境,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面... 目录1、前言2、安装docker3、编写容器管理脚本4、创建容器1、前言在日常开发全志、rk等不同

redis-sentinel基础概念及部署流程

《redis-sentinel基础概念及部署流程》RedisSentinel是Redis的高可用解决方案,通过监控主从节点、自动故障转移、通知机制及配置提供,实现集群故障恢复与服务持续可用,核心组件包... 目录一. 引言二. 核心功能三. 核心组件四. 故障转移流程五. 服务部署六. sentinel部署

Linux搭建ftp服务器的步骤

《Linux搭建ftp服务器的步骤》本文给大家分享Linux搭建ftp服务器的步骤,本文通过图文并茂的形式给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录ftp搭建1:下载vsftpd工具2:下载客户端工具3:进入配置文件目录vsftpd.conf配置文件4:

Linux部署中的文件大小写问题的解决方案

《Linux部署中的文件大小写问题的解决方案》在本地开发环境(Windows/macOS)一切正常,但部署到Linux服务器后出现模块加载错误,核心原因是Linux文件系统严格区分大小写,所以本文给大... 目录问题背景解决方案配置要求问题背景在本地开发环境(Windows/MACOS)一切正常,但部署到

Java 与 LibreOffice 集成开发指南(环境搭建及代码示例)

《Java与LibreOffice集成开发指南(环境搭建及代码示例)》本文介绍Java与LibreOffice的集成方法,涵盖环境配置、API调用、文档转换、UNO桥接及REST接口等技术,提供... 目录1. 引言2. 环境搭建2.1 安装 LibreOffice2.2 配置 Java 开发环境2.3 配

使用IDEA部署Docker应用指南分享

《使用IDEA部署Docker应用指南分享》本文介绍了使用IDEA部署Docker应用的四步流程:创建Dockerfile、配置IDEADocker连接、设置运行调试环境、构建运行镜像,并强调需准备本... 目录一、创建 dockerfile 配置文件二、配置 IDEA 的 Docker 连接三、配置 Do

Python极速搭建局域网文件共享服务器完整指南

《Python极速搭建局域网文件共享服务器完整指南》在办公室或家庭局域网中快速共享文件时,许多人会选择第三方工具或云存储服务,但这些方案往往存在隐私泄露风险或需要复杂配置,下面我们就来看看如何使用Py... 目录一、android基础版:HTTP文件共享的魔法命令1. 一行代码启动HTTP服务器2. 关键参

游戏闪退弹窗提示找不到storm.dll文件怎么办? Stormdll文件损坏修复技巧

《游戏闪退弹窗提示找不到storm.dll文件怎么办?Stormdll文件损坏修复技巧》DLL文件丢失或损坏会导致软件无法正常运行,例如我们在电脑上运行软件或游戏时会得到以下提示:storm.dll... 很多玩家在打开游戏时,突然弹出“找不到storm.dll文件”的提示框,随后游戏直接闪退,这通常是由于

MySQL 主从复制部署及验证(示例详解)

《MySQL主从复制部署及验证(示例详解)》本文介绍MySQL主从复制部署步骤及学校管理数据库创建脚本,包含表结构设计、示例数据插入和查询语句,用于验证主从同步功能,感兴趣的朋友一起看看吧... 目录mysql 主从复制部署指南部署步骤1.环境准备2. 主服务器配置3. 创建复制用户4. 获取主服务器状态5

golang程序打包成脚本部署到Linux系统方式

《golang程序打包成脚本部署到Linux系统方式》Golang程序通过本地编译(设置GOOS为linux生成无后缀二进制文件),上传至Linux服务器后赋权执行,使用nohup命令实现后台运行,完... 目录本地编译golang程序上传Golang二进制文件到linux服务器总结本地编译Golang程序