zl程序教程

Kafka学习之路

  • kafka学习之Kafka 的简介(一)

    kafka学习之Kafka 的简介(一)

    文章目录一 Kafka 的简介什么是Kafkakafka 产生的背景Kafka 的应用场景Kafka本身的架构二 kafka 的安装部署三 Kafka 的基本操作创建topic查看topic查看topic属性消费消息发送消息四 安装集群环境五 配置信息分析发送端的可选配置信息分析acksbatch.sizelinger.msmax.request.size消费端的可选配置分析group.idena

    日期 2023-06-12 10:48:40     
  • Kafka基础篇学习笔记整理

    Kafka基础篇学习笔记整理

    Kafka基础篇学习笔记整理生产者数据发送流程kafka生产者客户端的数据发送流程分为三个阶段:主线程调用KafkaProducer发送数据,数据不是之间发送给kafka broker服务端,而是先缓冲起来异步线程sender负责将缓冲数据发往kafka broker服务端 使用缓冲可以避免高并发请求造成服务端压力,并且还可以利用缓冲实现数据批量发送。异步sender线程负责数据发送,避免了主线程

    日期 2023-06-12 10:48:40     
  • kafka学习之-server.properties详细说明

    kafka学习之-server.properties详细说明

                http://blog.csdn.net/lizhitao/article/details/25667831  -- 参考文章 http://kafka.apache.org/documentation.html#serverconfig --官网

    日期 2023-06-12 10:48:40     
  • kafka学习之-KafkaOffsetMonitor后台监控

    kafka学习之-KafkaOffsetMonitor后台监控

    1.下载Kafka Consumer Offset Monitor安装包 http://pan.baidu.com/s/1ntzIUPN 2.在/usr/local/hadoop路径下面建立放置KafkaOffsetMonitor-assembly-0.2.0.jar的目录:kafa_consumer_offset_monitor。 3.vim /usr/local/hadoop/kafa_c

    日期 2023-06-12 10:48:40     
  • Kafka学习之一深度解析

    Kafka学习之一深度解析

    背景介绍 Kafka简介   Kafka是一种分布式的,基于发布/订阅的消息系统。主要设计目标如下: 以时间复杂度为O(1)的方式提供消息持久化能力,即使对TB级以上数据也能保证常数时间的访问性能 高吞吐率。即使在非常廉价的商用机器上也能做到单机支持每秒100K条消息的传输 支持Kafka Server间的消息分区,及分布式消费,同时保证每个partition内的消息顺序传输 同时支持离线数据

    日期 2023-06-12 10:48:40     
  • Kafka学习之路

    Kafka学习之路

    一直在思考写一些什么东西作为2017年开篇博客。突然看到一篇《Kafka学习之路》的博文,觉得十分应景,于是决定搬来这“他山之石”。虽然对于Kafka博客我一向坚持原创,不过这篇来自Confluent团队Gwen Shapira女士的博文实在精彩,所以还是翻译给大家,原文参见这里。 ~~~~~~~~~~~~ Kafka学习之路   看上去很多工程师都已经把“学习Kafka”加到了2017年的to

    日期 2023-06-12 10:48:40     
  • kafka消费者学习

    kafka消费者学习

    转自:https://www.cnblogs.com/cxuanBlog/p/11949238.html 1.介绍   Kafka 消费者从属于消费者群组。一个群组中的消费者订阅的都是相同的主题,每个消费者接收主题一部分分区的消息。   图1 上图中,左图为两个消费者消费4个分区,如果在某些环境下比如用户产生消息特别多的时候,生产者产生的消息仍旧让消费者吃不消,那

    日期 2023-06-12 10:48:40     
  • Kafka入门篇学习笔记整理

    Kafka入门篇学习笔记整理

    Kafka入门篇学习笔记整理 Kafka是什么Kafka的特性应用场景Kafka的安装单机版部署集群部署环境准备Kafka 2.x集群部署Kafka 3.x集群部署监听器和内外网络KRaft模型Docker安装

    日期 2023-06-12 10:48:40     
  • Kafka学习笔记

    Kafka学习笔记

    1. 相关概念 1. kafka是一个分布式的消息缓存系统2. kafka集群中的服务器都叫做broker3. kafka有两类客户端,一类叫producer(消息生产者),一类叫做consumer(消息消费者),客户端和broker服务器之间采用tcp协议连接4. kafka中不同业务系统的消息可以通过topic进行区分,而且每一个消息topic都会被分区,以分担消息读写的负载5. 每一个分区

    日期 2023-06-12 10:48:40     
  • 超强!!! Kafka高质量专栏学习大全,持续连载中

    超强!!! Kafka高质量专栏学习大全,持续连载中

    进滴滴技术答疑qun,跟众多技术专家交流技术 运维 Topic增删查(扩容) kafka-topics.sh kafka的动态配置 kafka-config.sh Topic发送

    日期 2023-06-12 10:48:40