分布式分布订阅消息系统

loloxiaoz · · 1896 次点击 · · 开始浏览    
这是一个创建于 的文章,其中的信息可能已经有所发展或是发生改变。

image.png

几千行 C 代码实现了的一个优先级/延时队列,短小精悍
概念
tube - 消息通道,类似于 kafka 里面的 topic, 用来存储某一类或者业务的任务
job - 生产和消费的基本单元,每个 job 都会有一个 id 和 优先级
特点
1、协议,类 Memcached 协议, 非二进制安全
2、全内存, 可开启 binlog, 断电从 binlog 恢复数据
3、单线程, 使用 epoll/kqueue 来实现事件机制

基于golang和beanstalk封装的分布式发布订阅消息系统
主要工作
1、producer消息路由
2、维护client与topic的订阅关系
3、dispatcher并发投递消息给多个相关订阅者,从而支持1对N的关系
delivery guarantee:At least one(消息绝不会丢,但可能会重复)

问题
1、存在单点,没有replication机制(会引入复杂性)
2、无探活,failover机制
3、订阅关系存储在文件中
使用beanstalk调度系统


有疑问加站长微信联系(非本文作者)

本文来自:简书

感谢作者:loloxiaoz

查看原文:分布式分布订阅消息系统

入群交流(和以上内容无关):加入Go大咖交流群,或添加微信:liuxiaoyan-s 备注:入群;或加QQ群:692541889

1896 次点击  
加入收藏 微博
暂无回复
添加一条新回复 (您需要 登录 后才能回复 没有账号 ?)
  • 请尽量让自己的回复能够对别人有帮助
  • 支持 Markdown 格式, **粗体**、~~删除线~~、`单行代码`
  • 支持 @ 本站用户;支持表情(输入 : 提示),见 Emoji cheat sheet
  • 图片支持拖拽、截图粘贴等方式上传