storm初识

云计算 waitig 499℃ 百度已收录 0评论

storm集群搭建
storm核心组件
storm编程模型
storm task并发度
storm 消息容错
storm 通信机制
storm 与zk交互
strom 流式计算的一般架构
kfaka集群搭建
kfaka生产集群的原理/分区
kafka消费者的负载均衡
kafka消费者的负载均衡–kafkaspout
kafka broker核心机制(topic 分片 文件存储机制 )

flume用来获取数据 kafka用来临时保存数据 storm用来计算数据 redis是个内存数据库,用来保存数据。

Data Source:
Spout:从外部数据源获取数据(一条一条,string json javabean序列化 xml)
Bolt:Spout发送过来数据(Bolt如何处理是根据业务步骤来 )
业务逻辑处理节点,可以有多个
Topology:Storm中运行的一个应用程序的名称(拓扑)

tuple1:消息发送的最小单元,对象有个list
StreamGroup:数据分组策略


本文由【waitig】发表在等英博客
本文固定链接:storm初识
欢迎关注本站官方公众号,每日都有干货分享!
等英博客官方公众号
点赞 (0)分享 (0)