kafka 学习
kafka学习之Kafka 的简介（一）
文章目录一 Kafka 的简介什么是Kafkakafka 产生的背景Kafka 的应用场景Kafka本身的架构二 kafka 的安装部署三 Kafka 的基本操作创建topic查看topic查看topic属性消费消息发送消息四 安装集群环境五 配置信息分析发送端的可选配置信息分析acksbatch.sizelinger.msmax.request.size消费端的可选配置分析group.idena
日期 2023-06-12 10:48:40
kafka学习之消息的消费原理与存储（二）
文章目录一 关于 Topic 和 PartitionTopicPartitionTopic&Partition 的存储二 关于消息分发kafka 消息分发策略消息默认的分发机制消费端如何消费指定的分区三 消息的消费原理分区分配策略Range strategy（范围分区）RoundRobin strategy（轮询分区）什么时候会触发分区分配策略呢？谁来执行Rebalance 以及管理 co
日期 2023-06-12 10:48:40
Kafka学习之（一）了解一下Kafka及关键概念和处理机制详解程序员
Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模小打的网站中所有动作流数据。优势 高吞吐量：非常普通的硬件Kafka也可以支持每秒100W的消息，即使在非常廉价的商用机器上也能做到单机支持每秒100K条消息的传输。 支持通过Kafka服务器和消费机集群来区分消息，也就是可以对消息进行分类，然后使用不同分类的服务器消费机去消费不同分类的消息。 支持Hadoop并行数据加载
日期 2023-06-12 10:48:40Kafka学习之（二）Centos下安装Kafka详解程序员
环境：Centos6.4，官方下载地址：http://kafka.apache.org/downloads ，前提是还需要安装了Java环境，本博客http://www.cnblogs.com/wt645631686/p/8267239.html有安装方法 # wget https://archive.apache.org/dist/kafka/0.10.1.0/kafka_2.10
日期 2023-06-12 10:48:40kafka学习之-java api测试
1.配置 package com.storm.storm_my.kafka; /** * * @author Peng.Li * */ public class KafkaConfigApiConstant { /** * * @author 配置的key * */ public interface kafkaProper
日期 2023-06-12 10:48:40
kafka学习之-雅虎开源管理工具Kafka Manager
http://blog.csdn.net/lizhitao/article/details/44523663
日期 2023-06-12 10:48:40kafka学习之-KafkaOffsetMonitor后台监控
1.下载Kafka Consumer Offset Monitor安装包 http://pan.baidu.com/s/1ntzIUPN 2.在/usr/local/hadoop路径下面建立放置KafkaOffsetMonitor-assembly-0.2.0.jar的目录：kafa_consumer_offset_monitor。 3.vim /usr/local/hadoop/kafa_c
日期 2023-06-12 10:48:40
kafka学习之-配置详解
# Licensed to the Apache Software Foundation (ASF) under one or more # contributor license agreements. See the NOTICE file distributed with # this work for additional information regarding copyrigh
日期 2023-06-12 10:48:40Kafka学习之路
一直在思考写一些什么东西作为2017年开篇博客。突然看到一篇《Kafka学习之路》的博文，觉得十分应景，于是决定搬来这“他山之石”。虽然对于Kafka博客我一向坚持原创，不过这篇来自Confluent团队Gwen Shapira女士的博文实在精彩，所以还是翻译给大家，原文参见这里。 ~~~~~~~~~~~~ Kafka学习之路 看上去很多工程师都已经把“学习Kafka”加到了2017年的to
日期 2023-06-12 10:48:40Kafka基础篇学习笔记整理
Kafka基础篇学习笔记整理 生产者数据发送流程批量与定时发送缓冲区大小send发送消息消息可靠性发布确认机制重试机制 消息顺序性问题如何避免重试导致消息顺序错乱自定义拦截器自定义序列化器自定义分区器幂
日期 2023-06-12 10:48:40牛人! 百度 T9 大佬纯手打的 Kafka 学习笔记, 吃透已胜过 80%Java 求职者
工作 3 年了，一直在一家初创公司做大数据架构师，最近几次大厂的面试经历都百般不顺，心如死灰，想着如果一直跳槽无望，只能跟着时下最火的地摊儿大军一起去出摊儿谋生了。 被问到了为什么要使用 Kafka，在哪种场景下需要使用 JMS，一脸问号。工作几
日期 2023-06-12 10:48:40kafka学习
1. 为何需要消息服务2. 消息中间件的发展历史3. 业界对比4. 基本概念介绍5. 操作实战基于消息中间件构建消息服务，解决云分布式场景的消息通信问题，提供高可靠，高性能（高并发，高吞吐)，高扩展的消息管道 优点： 1.系统解耦， 基于发布订阅模型，分布式应用异步解构，可以增加应用的水平扩展性，增加前端应用快速反应能力 2.削峰填谷, 大促等流量突然来袭时，消息服务可以缓冲突发流向，避免整个系
日期 2023-06-12 10:48:40Kafka学习入门
最近工作中用到了两个很给力的项目，一个是Kafka，一个是Strom。本着自我学习并方便他人的目的，我会将我觉得比较有用的英文文档翻译在此（保留系统专有名词不作翻译）。 1kafka介绍 在流式计算中，Kafka一般用来缓存数据，Storm通过消费Kafka的数据进行计算。 Apache Kafka是一个开源消息系统，由Scala写成。 Kafka是一个分布式消息队列：生产者、消费者的
日期 2023-06-12 10:48:40kafka学习方向系列
学习参考： 原理：https://mp.weixin.qq.com/mp/appmsgalbum?__biz=MzU3OTc1MDM1Mg==&action=getalbum&album_id=1703392164379934721&scene=173&from_msgid=2247497541&from_itemidx=1&count=3#wec
日期 2023-06-12 10:48:40