李志涛

导航

2020年4月8日 #

caseStudy-xxx-push kafka集群高峰期写入超时

摘要： 问题描述 5月底到6月初期间，一旦push kafka集群流量到达高峰，Kafka Producer就会出现写入超时，会丢失部分消息。解决此问题周期比较长，是个循序渐进的过程影响范围：部分topics的推送消息丢失故障处理人：xxx 处理过程 05月29日 16:00 xxx组织push超时讨论会议 阅读全文

posted @ 2020-04-08 18:09 李志涛 阅读(758) 评论(0) 推荐(0) 编辑

滴滴基于RocketMQ架构演变调研

摘要： 业务问题 据滴滴介绍2014年使用的Kafka-0.8.2，一个核心业务在使用Kafka的时候，出现了集群数据写入抖动非常严重的情况，经常会有数据写失败。 ? 随着业务增长，Topic的数据增多，集群负载增大，性能下降? 有个文件读写锁bug，会导致副本重新复制，复制的时候有大量的读，a56爆大奖在线娱乐们存储盘用的 阅读全文

posted @ 2020-04-08 16:37 李志涛 阅读(652) 评论(0) 推荐(0) 编辑

网易音乐消息队列实践调研

摘要： 业务背景 网易云音乐从13年4月上线以来，业务和用户突飞猛进。后台技术也从传统的 Tomcat 集群到分布式微服务快速演进和迭代，在业务的不断催生下，诞生了云音乐的 RPC，API 网关和链路跟踪等多种服务，消息队列也从 RabbitMQ 集群迁移到 Kafka集群。对于消息队列，更多处于使用阶段， 阅读全文

posted @ 2020-04-08 14:42 李志涛 阅读(778) 评论(2) 推荐(5) 编辑