Storm 安装

安装 Apache Storm 框架有三个主要步骤:

  • 如果尚未安装 JDK,请先在系统上安装 JDK。
  • 安装 ZooKeeper 框架。
  • 安装 Apache Storm 框架。

第1步 - 验证JDK安装

使用以下命令检查您的系统上是否已安装 JDK。

$ java -version

如果 JDK 已经存在,那么你会看到它的版本号。否则,请下载最新版本的 JDK。

步骤1.1 - 下载 JDK

下载最新版本的 JDK

例如,如果安装 JDK 8u60,那么在你的机器上下载文件 jdk-8u60-linux-x64.tar.gz。

步骤1.2 - 提取文件

解压缩 tar 文件:

$ cd /go/to/download/path
$ tar -zxf jdk-8u60-linux-x64.gz

步骤1.3 - 移动到opt目录

要让所有用户都可以使用 Java,请将提取的 Java 内容移动到 /usr/local/java 文件夹中。

$ su
password: (type password of root user)
$ mkdir /opt/jdk
$ mv jdk-1.8.0_60 /opt/jdk/

步骤1.4 - 设置路径

要设置路径和JAVA_HOME变量,请将以下命令添加到〜/ .bashrc文件中。

export JAVA_HOME =/usr/jdk/jdk-1.8.0_60
export PATH=$PATH:$JAVA_HOME/bin

现在将所有更改应用到当前正在运行的系统中。

$ source ~/.bashrc

步骤1.5 - Java选择

使用以下命令更改Java选项。

update-alternatives --install /usr/bin/java java /opt/jdk/jdk1.8.0_60/bin/java 100

步骤1.6

现在使用步骤1中介绍的验证命令(java -version)验证Java安装。

 

第2步 - ZooKeeper框架安装

步骤2.1 - 下载ZooKeeper

要在您的机器上安装ZooKeeper框架,请访问以下链接并下载最新版本的ZooKeeper http://zookeeper.apache.org/releases.html

截至目前,ZooKeeper的最新版本是3.4.6(ZooKeeper-3.4.6.tar.gz)。

步骤2.2 - 解压缩tar文件

使用以下命令提取tar文件 -

$ cd opt/
$ tar -zxf zookeeper-3.4.6.tar.gz
$ cd zookeeper-3.4.6
$ mkdir data

步骤2.3 - 创建配置文件

使用命令“vi conf / zoo.cfg”打开名为“conf / zoo.cfg”的配置文件,并将所有以下参数设置为起点。

$ vi conf/zoo.cfg
tickTime=2000
dataDir=/path/to/zookeeper/data
clientPort=2181
initLimit=5
syncLimit=2

一旦配置文件保存成功,您可以启动ZooKeeper服务器。

步骤2.4 - 启动ZooKeeper服务器

使用以下命令启动ZooKeeper服务器。

$ bin/zkServer.sh start

执行此命令后,您将得到如下响应

$ JMX enabled by default
$ Using config: /Users/../zookeeper-3.4.6/bin/../conf/zoo.cfg
$ Starting zookeeper ... STARTED

步骤2.5 - 启动CLI

使用以下命令启动CLI。

$ bin/zkCli.sh

执行上述命令后,您将连接到ZooKeeper服务器并获得以下响应

Connecting to localhost:2181
................
................
................
Welcome to ZooKeeper!
................
................
WATCHER::
WatchedEvent state:SyncConnected type: None path:null
[zk: localhost:2181(CONNECTED) 0]

第2.6步 - 停止ZooKeeper服务器

连接服务器并执行所有操作后,可以使用以下命令停止ZooKeeper服务器。

bin/zkServer.sh stop

您已经在您的机器上成功安装了Java和ZooKeeper。现在让我们看看安装Apache Storm框架的步骤。

第3步 - Apache Storm框架安装 步骤3.1下载Storm 要在您的机器上安装Storm框架,请访问以下链接并下载最新版本的Storm http://storm.apache.org/downloads.html

截至目前,Storm的最新版本是“apache-storm-0.9.5.tar.gz”。

第3.2步 - 解压缩tar文件 使用以下命令提取tar文件

$ cd opt/
$ tar -zxf apache-storm-0.9.5.tar.gz
$ cd apache-storm-0.9.5
$ mkdir data

Step 3.3 − 步骤3.3 - 打开配置文件

Storm的当前版本包含一个配置Storm守护进程的文件“conf / storm.yaml”。将以下信息添加到该文件。

$ vi conf/storm.yaml
storm.zookeeper.servers:
 - "localhost"
storm.local.dir: “/path/to/storm/data(any path)”
nimbus.host: "localhost"
supervisor.slots.ports:
 - 6700
 - 6701
 - 6702
 - 6703

应用完所有更改后,保存并返回到终端。

Step 3.4 − 步骤3.4 - 启动Nimbus

$ bin/storm nimbus

Step 3.5 − 第3.5步 - 启动主管

$ bin/storm supervisor

Step 3.6 步骤3.6启动UI

$ bin/storm ui

启动Storm用户界面应用程序后,在您喜欢的浏览器中键入URL http:// localhost:8080,您可以看到Storm群集信息及其运行拓扑。该页面应与以下屏幕截图类似。

Strom UI

我们已经了解了Apache Storm的核心技术细节,现在是编写一些简单场景的时候了。 场景 - 移动呼叫日志分析器移动电话及其持续时间将作为Apache Storm的输入提供,Storm将处理并分组相同呼叫者和 ...