Apache Storm 简介

发表于 更新于 分类于 阅读次数： 本文字数： 571 阅读时长 ≈ 1 分钟

Storm 是什么？

　Apache Storm™ is a free and open source distributed realtime computation system. Storm makes it easy to reliably process unbounded streams of data, doing for realtime processing what Hadoop did for batch processing.

为什么要有 Storm？

分布式

　具备经济、快速、可靠、易扩充、数据共享、设备共享、通讯方便、灵活等分布式所具备的特性

可扩展性

　计算在多线程、进程 和 服务器之间并行进行

高可靠性

　能管理工作进程 和 节点的故障
　消息处理，能得到一次完成处理的保证

编程模型简单

　降低了并行批处理复杂性

高效实时

　利用 ZeroMQ 保证了消息的快速处理

支持热部署

　加速应用开发

Storm 工作机制

一些主要概念

  • Topology（计算拓扑）
  • Stream（消息流）
  • Spout（消息源）
  • Bolt（消息处理者）
  • grouping（数据的分发方式）
  • Topology（拓扑）
  • Worker（工作进程）
  • Task（执行具体逻辑的任务）
  • Executor（执行 Task 的线程）
  • Configuration（配置）
To be continued...

欢迎加入我们的技术群，一起交流学习

群名称 群号
人工智能（高级）
人工智能（进阶）
BigData
算法