分享

mafka平台架构


问题导读


1.什么是Mafka?
2.mafka平台里面有哪四个角色?
3.mafka-client有什么特点?







什么Mafka
Mafka一个基于Kafka开发的一个分布式消息中间件综合解决方案。


Mafka架构 20150403180731708.png

mafka平台里面有四个角色,这四个角色是通过zk进行协调的。
mafka-client:负责发送和接受消息。
mafka-manager:对集群和client状态管理。
mafka-monitor:用于监控和报警。
mafka集群:由多个broker组成的mafka集群(作为服务端)用于存储消息。
zookeeper:用于存储配置信息。


mafka-client
  • 易于使用:接口明确简单、几乎不需要配置就可以使用。因为客户端做了很多错误或异常信息收集,使用不正确能及时收到报警方便提醒使用方
  • 负载均衡算法:目前负载均衡算法有很多种,我根据mafka系统特点选择了轮询和权重轮询调度2种算法。
  • 动态策略:通过管理控制台操作,可以支持客户端动态调优。
  • 服务发现:通过监听broker注册在zookeeper上临时节点,可以轻易发现集群中broker的变化,便于实现HA机制。
  • 容灾切换:当前集群crash时,client可以选择切换到其他可用集群。
mafka-monitor
  • 数据和流量监控
  • 运行状态监控
  • 空闲资源监控
  • 客户端监控
  • 消息堆积监控
monitor会对各种维度数据和流量进行监控(集群、broker、topic)。并且能及时掌握集群的运行状态,同时能对空闲资源进行回收,还能及时了解客户端状态变化,跟进消息堆积情况及时处理。

mafka-manager
  • 系统状态查看
           消息堆积、系统拓扑、zabbix监控项、客户端上报信息等
  • 集群管理
           双机房路由、topic,消费状态,appkey等
  • 权限管理
          用户、权限等
消息中间件需要有一个管理控制台,提高运维效率,目前能从mafka-manager看到消息堆积情况,集群拓扑图,
以及zabbix监控项、客户端上报等信息,也能管理双机房路由、topic、消费状态,appkey、用户、权限等。






已有(1)人评论

跳转到指定楼层
feng01301218 发表于 2015-4-5 10:57:37
1.什么是Mafka?
2.mafka平台里面有哪四个角色?
3.mafka-client有什么特点?
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条