肝了30天,整出这份[分布式宝典:限流+缓存+通讯],春招跳槽有望


注意:备战春招跳槽,必啃三大分布式技术:限流(ZooKeeper+Nginx)、缓存(MongoDB+memcached+Redis)、通讯(ActiveMQ+Kafka+RabbitMQ),全文所提及这份[分布式宝典:限流+缓存+通讯]包含面试+学习PDF,可免费分享下载,还请转发一下下,然后点击传送门即可!!

第一个 分布式:限流

1.1 ZooKeeper+Nginx面试常备题(附答案)

ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致***的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。


ZK面试题答案

Nginx是一款轻量级的Web 服务器/反向代理服务器及电子邮件(IMAP/POP3)代理服务器,在BSD-like 协议下发行。其特点是占有内存少,并发能力强,事实上nginx的并发能力确实在同类型的网页服务器中表现较好,中国大陆使用nginx网站用户有:百度、京东、新浪、网易、腾讯、淘宝等


Nginx面试题答案

1.2 Nginx+ZooKeeper学习的笔记PDF

Nginx+ZooKeeper学习的笔记PDF

  • ZooKeeper-分布式过程协同技术详解

ZooKeeper-分布式过程协同技术详解

第一部分阐述了Apache ZooKeeper这类系统的设计目的和动机,并介绍分布式系统的一些必要背景知识

  • 第1章介绍了ZooKeeper可以做什么,以及其设计如何支撑这些任务
  • 第2章介绍了基本概念和基本组成模块,并通过命令行工具的具体操作介绍ZooKeeper可以做什么

第二部分阐述程序员所需要掌握的ZooKeeper库调用方法和编程技巧,虽然对系统运维人员来说也有一定价值,但也可以不选择阅读。这一部分主要以Java语言的API为主,因为Java是非常流行的开发语言,如果你之前使用其他开发语言,可以通过这一部分内容来学习基本的技术和方法调用,之后通过其他语言来实现

  • 第3章介绍Java语言的API
  • 第4章解释如何跟踪和处理ZooKeeper中的状态变更情况。·第5章介绍如何在系统或网络故障时复应用
  • 第6章介绍为了避免故障要注意的一些繁杂却很重要的场景
  • 第7章介绍C语言版的API,该章也可以作为非Java语言实现的ZooKeeper API的基础,对非Java语言的开发人员非常有帮助
  • 第8章介绍一款更高层级的封装的ZooKeeper接口

第三部分主要适用于ZooKeeper的系统运维人员,尤其在第9章中即便对开发人员也很有价值

  • 第9章介绍ZooKeeper的作者们在设计时所采用的方案,这些知识对运维管理非常有帮助。
  • 第10章介绍如何对ZooKeeper进行配置

ZooKeeper-分布式过程协同技术详解

  • ZK开发手册

ZK开发手册

  • 深入理解Nginx模块开发与架构解析

深入理解Nginx模块开发与架构解析

在第一部分的前两章中,将只探讨如何使用Nginx这一个问题。

在第二部分的第3章~第7章中,都是以例子来介绍HTTP模块的开发方式的,这里有些接近于“step by step”的学习方式,我在写作这一部分时,会通过循序渐进的方式使读者能够快速上手,同时会穿插着介绍其常见用法的基本原理。

在第三部分,将开始介绍Nginx的完整框架,阅读到这里将会了解第二部分中HTTP模块为何以此种方式开发,同时将可以轻易地开发Nginx模块。这一部分并不仅仅满足于阐述Nginx架构,而是会探讨其为何如此设计,只有这样才能抛开HTTP框架、邮件代理框架,实现一种新的业务框架、一种新的模块类型。

深入理解Nginx模块开发与架构解析

第二个 分布式:缓存

2.1 MongoDB+memcached+Redis面试常备题(附答案)

Mongodb,分布式文档存储数据库,由C++语言编写,旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个高性能,开源,无模式的文档型数据库,是当前NoSql数据库中比较热门的一种。它在许多场景下可用于替代传统的关系型数据库或键/值存储方式


MongoDB面试题答案

memcached是一套分布式的快取系统,与redis相似,当初是Danga Interactive为了LiveJournal所发展的,但被许多软件(如MediaWiki)所使用。这是一套开放源代码软件,以BSD license授权协议发布


memcached面试解析

redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)和zset(有序集合)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操作都是原子性的。在此基础上,redis支持各种不同方式的排序。与memcached一样,为了保证效率,数据都是缓存在内存中。区别的是redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件,并且在此基础上实现了master-slave(主从)同步。


Redis面试解析

2.2 MongoDB+memcached+Redis学习笔记

MongoDB+memcached+Redis学习笔记

  • MongoDB权威指南

MongoDB权威指南

  • Redis学习手册(基础篇+数据结构篇+持久化篇+集群篇+其他问题)

Redis学习手册(基础篇+数据结构篇+持久化篇+集群篇+其他问题)

Redis学习手册(基础篇+数据结构篇+持久化篇+集群篇+其他问题)

03 分布式通讯

3.1 ActiveMQ+Kafka+RabbitMQ面试常备题(附答案)

Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据。 这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理,也是为了通过集群来提供实时的消息


Kafka面试解析

ActiveMQ 是Apache出品,最流行的,能力强劲的开源消息总线。ActiveMQ 是一个完全支持JMS1.1和J2EE 1.4规范的 JMS Provider实现,尽管JMS规范出台已经是很久的事情了,但是JMS在当今的J2EE应用中间仍然扮演着特殊的地位

  • 什么是 ActiveMQ?
  • ActiveMQ 服务器宕机怎么办?
  • 丢消息怎么办?
  • 持久化消息非常慢
  • 消息的不均匀消费
  • 死信队列
  • ActiveMQ 中的消息重发时间间隔和重发次数吗?

ActiveMQ面试解析

RabbitMQ是一个由erlang开发的AMQP(Advanced Message Queue )的开源实现。AMQP 的出现其实也是应了广大人民群众的需求,虽然在同步消息通讯的世界里有很多公开标准(如 COBAR的 IIOP ,或者是 SOAP 等),但是在异步消息处理中却不是这样,只有大企业有一些商业实现(如微软的 MSMQ ,IBM 的 Websphere MQ 等),因此,在 2006 年的 6 月,Cisco 、Redhat、iMatix 等联合制定了 AMQP 的公开标准。

  • RabbitMQ 中的 broker 是指什么?cluster 又是指什么?
  • 什么是元数据?元数据分为哪些类型?包括哪些内容?与 cluster 相关的元数据有哪些?元数据是如何保存的?元数据在 cluster 中是如何分布的?
  • RAM node 和 disk node 的区别?
  • RabbitMQ 上的一个 queue 中存放的 message 是否有数量限制?
  • RabbitMQ 概念里的 channel、exchange 和 queue 这些东东是逻辑概念,还是对应着进程实体?这些东东分别起什么作用?
  • vhost 是什么?起什么作用?
  • 在单 node 系统和多 node 构成的 cluster 系统中声明 queue、exchange ,以及进行 binding 会有什么不同?
  • 客户端连接到 cluster 中的任意 node 上是否都能正常工作?
  • cluster 中 node 的失效会对 consumer 产生什么影响?若是在 cluster 中创建了mirrored queue ,这时 node 失效会对 consumer 产生什么影响?
  • 能够在地理上分开的不同数据中心使用 RabbitMQ cluster 么?
  • 为什么 heavy RPC 的使用场景下不建议采用 disk node ?
  • 向不存在的 exchange 发 publish 消息会发生什么?向不存在的 queue 执行consume 动作会发生什么?
  • routing_key 和 binding_key 的最大长度是多少?
  • RabbitMQ 允许发送的 message 最大可达多大?
  • 什么情况下 producer 不主动创建 queue 是安全的?
  • “dead letter”queue 的用途?
  • 为什么说保证 message 被可靠持久化的条件是 queue 和 exchange 具有durable 属性,同时 message 具有 persistent 属性才行?
  • 什么情况下会出现 blackholed 问题?
  • 如何防止出现 blackholed 问题?
  • Consumer Cancellation Notification 机制用于什么场景?
  • Basic.Reject 的用法是什么?
  • 为什么不应该对所有的 message 都使用持久化机制?
  • RabbitMQ 中的 cluster、mirrored queue,以及 warrens 机制分别用于解决什么问题?存在哪些问题?

RabbitMQ面试解析

3.2 ActiveMQ+Kafka+RabbitMQ学习笔记PDF

ActiveMQ+Kafka+RabbitMQ学习笔记PDF

  • RabbitMQ实战指南

RabbitMQ实战指南

  • 手写RocketMQ笔记

手写RocketMQ笔记

  • 手写“Kafka笔记”


最后总结

关于分布式,限流+缓存+缓存,这三大技术(包含:ZooKeeper+Nginx+MongoDB+memcached+Redis+ActiveMQ+Kafka+RabbitMQ)等等。这些相关的面试也好,还有手写以及学习的笔记PDF,都是啃透分布式技术必不可少的宝藏。以上的每一个专题每一个小分类都有相关的介绍,并且小编也已经将其整理成以下这些PDF啦~很方便查找阅读(注意:转发一下,然后点击传送门即可领取!!)

分布式:限流+缓存+缓存面试解析

分布式:限流+缓存+缓存笔记PDF

肝了30天,整出这份[分布式宝典:限流+缓存+通讯],春招跳槽有望

以上两图所示的分布式相关的面试以及学习的PDF笔记,有需要的朋友皆可免费分享,请记得点击传送门即可领取