一 storm平台概述
Storm平台是一个分布式实时计算系统,他可以用来处理源源不断流进来的消息,处理之后将结果写入到某个存储中去。授权协议为EPL,开发语言基本是Clojure,部分Java。
二 storm平台进程
共包括了3个主要的进程,详情如下:
进程名 | 启动脚本 | 概述说明 |
Nimbus | bin/storm nimbus >/dev/null 2>&1 & | 类似Hadoop的JobTracker,负责资源分配和任务调度,在主控节点上运行 |
Supervisor | bin/storm supervisor >/dev/null 2>&1 & | 类似Hadoop的TaskTracker,负责接受nimbus分配的任务,启动和停止属于自己管理的worker进程。 |
UI | bin/storm ui >/dev/null 2>&1 & | 观察集群的worker资源使用情况、Topologies的运行状态等信息,通过http://{nimbus host}:8080访问,在Storm主控节点上启动。 |