Kafka学习之（三）Centos下给PHP开启Kafka扩展(rdkafka)详解程序员

Centos版本：Centos6.4，PHP版本：PHP7。 在上一篇文章中使用IP为192.168.9.154的机器安装并开启了Kafka进行了简单测试，充当了Kafka服务器。 本篇文章新开启一台IP为192.16.9.157的机器给PHP开启扩展。 找到github的扩展下载地址，这里是php-rdkafka，虽然php有一个扩展是php-kafka，但是php-rdkafka要比ph

Kafka学习之（四）PHP操作Kafka详解程序员

简单测试 环境：Centos6.4，PHP7，kafka服务器IP：192.168.9.154，PHP服务器:192.168.9.157 在192.168.9.157创建目录和文件。 //生产者 ?php require ./modules/kafka.php; $rk = new kafka(); $rk- send([hello my kafka]); echo O

Kafka学习笔记详解架构师

最近在看“kafk权威指南”，记录一下。 1. kafka是一个队列，开源的发布订阅系统，可以支持在线、离线任务。 2. kafka作为队列系统，下游从kafka拉取数据并将处理成功信息反馈到kafka，可以实现下游至少处理一次，保证不丢数据。     可以结合其他启动(如去重等)实现消费一次且仅一次。     消费者客户端可以在本地记录当前的o

kafka学习之-雅虎开源管理工具Kafka Manager

    http://blog.csdn.net/lizhitao/article/details/44523663

kafka学习之-server.properties详细说明

            http://blog.csdn.net/lizhitao/article/details/25667831  -- 参考文章 http://kafka.apache.org/documentation.html#serverconfig --官网

kafka学习之-KafkaOffsetMonitor后台监控

1.下载Kafka Consumer Offset Monitor安装包 http://pan.baidu.com/s/1ntzIUPN 2.在/usr/local/hadoop路径下面建立放置KafkaOffsetMonitor-assembly-0.2.0.jar的目录：kafa_consumer_offset_monitor。 3.vim /usr/local/hadoop/kafa_c

kafka消息顺序性学习

转自：https://cloud.tencent.com/developer/article/1839597 1.介绍 全局有序：需要1个Topic只能对应1个Partition，对应的consumer也要使用单线程或者保证消费顺序的线程模型。 局部有序：在发消息的时候指定Partition Key，Kafka对其进行Hash计算，根据计算结果决定放入哪个Partition。这样Partitio

史上最全、最详细的 kafka 学习笔记！

一、为什么需要消息系统 1.解耦：　　允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。 2.冗余： 　　消息队列把数据进行持久化直到它们已经被完全处理，通过这一方式规避了数据丢失风险。许多消息队列所采用的"插入-获取-删除"范式中，在把一个消息从队列中删除之前，需要你的处理系统明确的指出该消息已经被处理完毕，从而确保你的数据被安全的保存直到你使用完毕。 3.扩展性：

群里兄弟量化测试数据。技术大牛，用到Kafka，GO语言，机器学习算法