我去个地方啊

kafka读书笔记

工作杂记(1)

/ 注册

全部文章 / kafka读书笔记（共6篇）

06-kafka消费者中

下面继续探讨kafka的消费者，正如上篇文章最后所说，消费者的逻辑牵涉到很多内容，并不是简单地死循环获取消息那么简单。本篇文章着重介绍消费者中比较重要的概念：消费位移。一、消费位移概念对于kafka中的分区所言，它的每条消息都有唯一的offset，用来表示消息在分区中对应的位置。可以翻译成”...

2019-09-24

0 753

05-kafka消费者上

学习完生产者，下面自然就是消费者。消费者要学习的内容比生产者要多，本篇主要聚焦于消费者/消费组的基本概念以及客户端的基本开发（包括如何订阅主题和分区、如何消费消息）。一、消费者和消费组在学习消费者消费消息之前，需要先了解消费者和消费组的关系。消费者负责订阅kafka的主题，并且可以从订阅的...

2019-09-24

0 630

03-linux下玩kafka

为了方便对实习生小课题中kafka方便调试，我决定在自己的腾讯云服务器上部署一个单机kafka，其实跟本地windows没啥区别，不过还是做一下记录吧。服务器环境是centod7.3。第一步-安装JDK 安装jdk1.8或以上版本。由于现在下载jdk都需要先注册，而注册内容令人不适，所以这里贴...

2019-09-24

0 573

02-windows下kafka的基本使用

环境准备 JDK8自行下载 kafka下载【我自己用的是以前下载的版本，为 kafka_2.11-2.1.0.tgz 这个版本，直接下载解压即可】 KafKA使用由于是windows环境，解压之后我们的注意点是kafka_2.11-2.1.0\bin\windows目录。启动ZK 在此目录...

2019-09-24

0 629

04-kafka生产者

在完成kafka的入门以及基本的操作之后，相信已经对kafka有了基本认识，下面我们一起从kafka的生产者开始，深入学习一下。一、一个简单的生产者示例 public class KafkaProducerAnalysis { //注1：brokerList可以写多个，中间用逗号隔开 ...

2019-09-24

0 786

01-kafka概念入门

一、为什么要学习kafka 目前，kafka的定位是一个分布式流处理平台，它以高吞吐、可持久化、可水平扩展、支持流数据处理等多种特性而被广泛使用。截止到写本文的时间：2019年08月21号，已经到了2.3版本，kafka也成为后端程序猿或者大数据程序猿不可不学习的一个重要中间件。它又三大特点：消...

2019-09-24

0 532