网站首页 kafkamanager 第4页
-
消息队列中间件选型时的考虑（消息中间件性能对比）
消息队列中间件（简称消息中间件）是指利用高效可靠的消息传递机制进行与平台无关的数据交流，并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息排队模型，它可以在分布式环境下提供应用解耦、弹性伸缩、冗余存储、流量削峰、异步通信、数据同...
2024-07-11 wxchong 开源技术 28 ℃ 0 评论 -
docker-compose部署Kafka（docker部署kafka集群）
在服务与服务的通信过程中，除了基本的http接口调用，还可以使用消息队列，比如RabbitMQ、RocketMQ及Kafka。今天介绍一下Kafa的搭建，依然还是使用docker-compose进行部署。...
2024-07-11 wxchong 开源技术 17 ℃ 0 评论 -
十年资深架构师多年工作经验结晶:Kafka源码解析与实战
前言本篇系统介绍Kafka的实现原理和应用方法，并介绍Kafka的运维工具、客户端编程方法和第三方集成方式，深入浅出、图文并茂、分析透彻。...
2024-07-11 wxchong 开源技术 9 ℃ 0 评论 -
基于Prometheus的分布式监控平台落地与实践
...
2024-07-11 wxchong 开源技术 9 ℃ 0 评论 -
Kafka删除topic步骤以及注意事项（kafka清理过期数据原理）
删除kafkatopic不仅仅是在KafkaManager上点击下DeleteTopic，或者直接命令kafka-topics--delete--zookeeper【zookeeperserver:port】--topic...
2024-07-11 wxchong 开源技术 20 ℃ 0 评论 -
几种常见的 Kafka 集群监控工具（kafka监控平台）
一个功能健全的kafka集群可以处理相当大的数据量，由于消息系统是很多大型应用的基石，因此broker集群在性能上的缺陷，都会引起整个应用栈的各种问题。...
2024-07-11 wxchong 开源技术 11 ℃ 0 评论 -
美团 MySQL 数据实时同步到 Hive 的架构与实践
背景在数据仓库建模中，未经任何加工处理的原始业务层数据，我们称之为ODS（OperationalDataStore）数据。在互联网企业中，常见的ODS数据有业务日志数据（...
2024-07-11 wxchong 开源技术 9 ℃ 0 评论 -
流批一体化-实时数仓架构（流批一体计算）
背景T0和TN处理逻辑分离和使用计算框架不一致导致存储浪费、计算口径不一致、计算框架(HiveSQL/SparkSQL/Flink)本身语义不同、流批统一数据对外服务难度高误差大、维护成本高等问题...
2024-07-11 wxchong 开源技术 8 ℃ 0 评论 -
Kafka的内部topic:__consumer_offsets 消费位移量主题
由于Zookeeper并不适合大批量的频繁写入操作，新版Kafka已推荐将consumer的位移信息保存在Kafka内部的topic中，即__consumer_offsetstopic，并且默认提供了kafka_consumer_grou...
2024-07-11 wxchong 开源技术 6 ℃ 0 评论 -
万字修行!消息中间件架构体系:Kafka研究，从入门到深入
前言...
2024-07-11 wxchong 开源技术 8 ℃ 0 评论
- 控制面板
- 网站分类
- 最新留言
-