我去个地方啊
我去个地方啊
全部文章
分类
kafka读书笔记(6)
工作杂记(1)
归档
标签
去牛客网
登录
/
注册
fossi的小窝
好记性不如烂笔头,要记就记好东西。
全部文章
(共7篇)
06-kafka消费者中
下面继续探讨kafka的消费者,正如上篇文章最后所说,消费者的逻辑牵涉到很多内容,并不是简单地死循环获取消息那么简单。本篇文章着重介绍消费者中比较重要的概念:消费位移。 一、消费位移概念 对于kafka中的分区所言,它的每条消息都有唯一的offset,用来表示消息在分区中对应的位置。可以翻译成”...
2019-09-24
0
747
05-kafka消费者上
学习完生产者,下面自然就是消费者。消费者要学习的内容比生产者要多,本篇主要聚焦于消费者/消费组的基本概念以及客户端的基本开发(包括如何订阅主题和分区、如何消费消息)。 一、消费者和消费组 在学习消费者消费消息之前,需要先了解消费者和消费组的关系。 消费者负责订阅kafka的主题,并且可以从订阅的...
2019-09-24
0
609
03-linux下玩kafka
为了方便对实习生小课题中kafka方便调试,我决定在自己的腾讯云服务器上部署一个单机kafka,其实跟本地windows没啥区别,不过还是做一下记录吧。服务器环境是centod7.3。 第一步-安装JDK 安装jdk1.8或以上版本。由于现在下载jdk都需要先注册,而注册内容令人不适,所以这里贴...
2019-09-24
0
562
02-windows下kafka的基本使用
环境准备 JDK8自行下载 kafka下载【我自己用的是以前下载的版本,为 kafka_2.11-2.1.0.tgz 这个版本,直接下载解压即可】 KafKA使用 由于是windows环境,解压之后我们的注意点是kafka_2.11-2.1.0\bin\windows目录。 启动ZK 在此目录...
2019-09-24
0
620
04-kafka生产者
在完成kafka的入门以及基本的操作之后,相信已经对kafka有了基本认识,下面我们一起从kafka的生产者开始,深入学习一下。 一、一个简单的生产者示例 public class KafkaProducerAnalysis { //注1:brokerList可以写多个,中间用逗号隔开 ...
2019-09-24
0
760
01-kafka概念入门
一、为什么要学习kafka 目前,kafka的定位是一个分布式流处理平台,它以高吞吐、可持久化、可水平扩展、支持流数据处理等多种特性而被广泛使用。截止到写本文的时间:2019年08月21号,已经到了2.3版本,kafka也成为后端程序猿或者大数据程序猿不可不学习的一个重要中间件。它又三大特点: 消...
2019-09-24
0
523
实现动态切换多数据源及其原理分析
在开发中可能会遇到多个库的连接,那么一个库就是一个数据源,在程序中如何快速动态地切换数据源呢?本文来探讨一下spring提供的AbstractRoutingDataSource实现方案。 实现 比如我有三个数据源,分别交DATASOURCE_A、DATASOURCE_B、DATASOURCE_C...
2019-07-31
0
605