ZooKeeper

点击上方 蓝色字体 ，选择“标星公众号” 优质文章，第一时间送达 作者 | 求知若渴的蜗牛 来源 | urlify.cn/m6VJbi 66套java从入门到精通实战课程分享 springcloud整合eureka实现服务的治理和负载均衡我已经再上篇https://www.cnblogs.com/wang66a/p/13746039.html进行了详细的介绍 但是现在eureka已经停止更新 固本篇主要讲解使用zookeeper替换eureka实现服务的治理 前段时间，了解了通过spring-cloud-config-server与spring-cloud-eureka-server作为配置中心与注册中心，同时了解到基于zookeeper或consul可以完成同样的事情，所以必须了解一下，这样有利于实际工作的技术对比与选型。 使用docker下载zookeeper 可看我https://www.cnblogs.com/wang66a/p/13754219.html这篇关于doker安装zookeeper的文章 下载和启动zookeeper之后可以通过zookeeper客户端工具zoolnspector连接测试zookepper是否启动成功 zoolnspector下载地址 链接：https://pan.baidu.com/s/16MsXQz2LUF5LWPhObpm1pA 提取码

1.ZooKeeper是什么？ ZooKeeper是一个 分布式 的，开放源码的分布式 应用程序协调服务 ，是Google的Chubby一个开源的实现，它是 集群的管理者 ， 监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作 。最终，将简单易用的接口和性能高效、功能稳定的系统提供给用户。 客户端的 读请求 可以被集群中的 任意一台机器处理 ，如果读请求在节点上注册了监听器，这个监听器也是由所连接的zookeeper机器来处理。对于 写请求 ，这些请求会同 时发给其他zookeeper机器并且达成一致后，请求才会返回成功 。因此，随着 zookeeper的集群机器增多，读请求的吞吐会提高但是写请求的吞吐会下降 。 有序性是zookeeper中非常重要的一个特性，所有的 更新都是全局有序的 ，每个更新都有一个 唯一的时间戳 ，这个时间戳称为 zxid（Zookeeper Transaction Id） 。而 读请求只会相对于更新有序 ，也就是读请求的返回结果中会带有这个 zookeeper最新的zxid 。 2.ZooKeeper提供了什么？ 1、 文件系统 2、 通知机制 3.Zookeeper文件系统 Zookeeper提供一个多层级的节点命名空间（节点称为znode）。与文件系统不同的是，这些节点 都可以设置关联的数据

1：Zookeeper是什么？ 　　答：ZooKeeper是一个开源的分布式协调服务，是集群的管理者，监视集群节点反馈信息进行下一步合理操作。 　　Zookeeper提供的服务：管理用户程序提交的数据；为用户程序提供节点监听服务。 　　应用场所：主从协调，服务器节点动态上下线，负载均衡、集群管理等。。。 2：Zookeeper特性：一致性、原子性、单一视图、可靠性、实时性。 3：Zookeeper集群的角色： Leader 、follower 和 Observer 　 Leader：事物请求的唯一调度和处理者，集群内部服务的调度者。 　 followe： 参与Leader选举投票、处理客户端的非事物请求，转发事物请求给Leader服务器、参与事物请求Proposal的投票 　 Observer：弱化版的Follower，不参与任何投票，主要是为了在不影响集群事务处理能力的前提下提升集群的非事务处理的吞吐量。 4：Zookeeper集群机制的：半数机制：集群中半数以上机器存活，集群可用。 5：Zookeeper提供了文件系统和通知机制 6：Zookeeper协议：ZAB协议，一种支持崩溃恢复的原子广播协议。 7：四种类型的数据节点-znode 　　PERSISTENT-持久节点 　　EPHEMERAL-临时节点 　　PERSISTENT_SEQUENTIAL-持久顺序节点 　

Kafka 简介 Apache Kafka 是一个分布式发布-订阅消息系统。是大数据领域消息队列中唯一的王者。最初由 linkedin 公司使用 scala 语言开发，在2010年贡献给了Apache基金会并成为顶级开源项目。至今已有十余年，仍然是大数据领域不可或缺的并且是越来越重要的一个组件。 Kafka 适合离线和在线消息，消息保留在磁盘上，并在集群内复制以防止数据丢失。kafka构建在zookeeper同步服务之上。它与 Flink 和 Spark 有非常好的集成，应用于实时流式数据分析。 Kafka特点： 可靠性：具有副本及容错机制。 可扩展性：kafka无需停机即可扩展节点及节点上线。 持久性：数据存储到磁盘上，持久性保存。 性能：kafka具有高吞吐量。达到TB级的数据，也有非常稳定的性能。 速度快：顺序写入和零拷贝技术使得kafka延迟控制在毫秒级。 Kafka 底层原理 先看下 Kafka 系统的架构 Kafka 架构 kafka支持消息持久化，消费端是主动拉取数据，消费状态和订阅关系由客户端负责维护， 消息消费完后，不会立即删除，会保留历史消息 。因此支持多订阅时，消息只会存储一份就可以。 broker ：kafka集群中包含一个或者多个服务实例（节点），这种服务实例被称为broker（一个broker就是一个节点/一个服务器）； topic

面试的时候，面试官只要看到你简历的上写的有Zookeeper（熟悉、掌握）之类，那你至少要准备接下来的11连问。 NO1：说说zookeeper是什么？ ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现（Chubby是不开源的），它是集群的管理者，监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。最终，将简单易用的接口和性能高效、功能稳定的系统提供给用户 。 Zookeeper一个最常用的使用场景就是用于担任服务生产者和服务消费者的注册中心，服务生产者将自己提供的服务注册到Zookeeper中心，服务的消费者在进行服务调用的时候先到Zookeeper中查找服务，获取到服务生产者的详细信息之后，再去调用服务生产者的内容与数据，简单示例图如下： NO2：了解Zookeeper的系统架构吗？ ZooKeeper 的架构图中我们需要了解和掌握的主要有： （1）ZooKeeper分为服务器端（Server） 和客户端（Client），客户端可以连接到整个 ZooKeeper服务的任意服务器上（除非 leaderServes 参数被显式设置， leader 不允许接受客户端连接）。 （2）客户端使用并维护一个 TCP 连接，通过这个连接发送请求、接受响应、获取观察的事件以及发送心跳。如果这个 TCP 连接中断

目录 一、集群使用场景 二、集群搭建 1.ZooKeeper集群搭建 2.Kafka集群搭建 三、多集群同步 1.配置 2.调优 总结 集群是一种计算机系统， 它通过一组松散集成的计算机软件和/或硬件连接起来高度紧密地协作完成计算工作。在某种意义上，他们可以被看作是一台计算机。集群系统中的单个计算机通常称为节点，通常通过局域网连接，但也有其它的可能连接方式。集群计算机通常用来改进单个计算机的计算速度和/或可靠性。一般情况下集群计算机比单个计算机，比如工作站或超级计算机性能价格比要高得多。 集群的特点 集群拥有以下两个特点： 可扩展性 ：集群的性能不限制于单一的服务实体，新的服务实体可以动态的添加到集群，从而增强集群的性能。 高可用性 ：集群当其中一个节点发生故障时，这台节点上面所运行的应用程序将在另一台节点被自动接管，消除单点故障对于增强数据可用性、可达性和可靠性是非常重要的。 集群的能力 负载均衡 ：负载均衡把任务比较均匀的分布到集群环境下的计算和网络资源，以提高数据吞吐量。 错误恢复 ：如果集群中的某一台服务器由于故障或者维护需要无法使用，资源和应用程序将转移到可用的集群节点上。这种由于某个节点的资源不能工作，另一个可用节点中的资源能够透明的接管并继续完成任务的过程，叫做错误恢复。 负载均衡和错误恢复要求各服务实体中有执行同一任务的资源存在，而且对于同一任务的各个资源来说

1. 学习 计划 1、将工程改造为基于SOA 架构 2、商品列表查询功能实现。 2. 将工程改造为 SOA 架构 2.1. 分析 由于 商城是基于 soa 的架构，表现层和服务层是不同的工程。所以要实现商品列表查询需要两个系统之间进行通信。 如何实现远程通信？ 1 、 Webservice ：效率不高基于 soap 协议。项目中不推荐使用。 2 、使用 restful 形式的服务： http+json 。很多项目中应用。如果服务太多，服务之间调用关系混乱，需要治疗服务。 3 、 使用 dubbo 。使用 rpc 协议进行远程调用，直接使用 socket 通信。传输效率高，并且可以统计出系统之间的调用关系、调用次数 。 2.2. dubbo 2.2.1. 什么是 dubbo 随着互联网的发展，网站应用的规模不断扩大，常规的垂直应用架构已无法应对，分布式服务架构以及流动计算架构势在必行，亟需一个治理系统确保架构有条不紊的演进。 单一应用架构 当网站流量很小时，只需一个应用，将所有功能都部署在一起，以减少部署节点和成本。 此时，用于简化增删改查工作量的 数据访问框架 (ORM) 是关键。 垂直应用架构 当访问量逐渐增大，单一应用增加机器带来的加速度越来越小，将应用拆成互不相干的几个应用，以提升效率。 此时，用于加速前端页面开发的 Web 框架 (MVC) 是关键。 分布式服务架构

前言 本文档是从阿里面试官整理的Java面试题；包含了Java基础、Java集合容器、Java异常、并发编程、JVM、Spring、Spring MVC、Spring Boot、Spring Cloud、MyBatis、Redis、MySQL数据库、消息中间件MQ与RabbitMQ、Dubbo、Linux、Tomcat、ZooKeeper、Netty、 架构设计&分布式&数据结构与算法等等，都是互联网大厂的面试真题，已经有粉丝靠这份PDF拿下众多大厂的offer。 每一份面试文档的左侧都有文档大纲，这也是为了方便大家阅读，特别整理的；文章限于篇幅，故这里只是部分的截图展示。 有需要答案解析的朋友可以关注公众号： 麒麟改bug 。 小编这篇分享篇幅可能有点长，观看的朋友可以先了解一下目录 JavaOOP面试题——108道 Java集合/泛型面试题——24道 Java异常面试题——8道 Java中的IO与NIO面试题——15道 Java反射面试题——10道 Java序列化面试题——10道 Java注解面试题——2道 多线程&并发面试题——108道 JVM面试题——87道 Mysql面试题——83道 Redis面试题——50道 Memcached面试题——24道 MongoDB面试题——95道 String面试题——131道 Spring Cloud面试题——35道

前言 本文档是从阿里面试官整理的Java面试题；包含了Java基础、Java集合容器、Java异常、并发编程、JVM、Spring、Spring MVC、Spring Boot、Spring Cloud、MyBatis、Redis、MySQL数据库、消息中间件MQ与RabbitMQ、Dubbo、Linux、Tomcat、ZooKeeper、Netty、 架构设计&分布式&数据结构与算法等等，都是互联网大厂的面试真题，已经有粉丝靠这份PDF拿下众多大厂的offer。 每一份面试文档的左侧都有文档大纲，这也是为了方便大家阅读，特别整理的；文章限于篇幅，故这里只是部分的截图展示。 有需要答案解析的朋友可以关注公众号： 麒麟改bug 。 小编这篇分享篇幅可能有点长，观看的朋友可以先了解一下目录 JavaOOP面试题——108道 Java集合/泛型面试题——24道 Java异常面试题——8道 Java中的IO与NIO面试题——15道 Java反射面试题——10道 Java序列化面试题——10道 Java注解面试题——2道 多线程&并发面试题——108道 JVM面试题——87道 Mysql面试题——83道 Redis面试题——50道 Memcached面试题——24道 MongoDB面试题——95道 String面试题——131道 Spring Cloud面试题——35道

　　在第一篇 读书笔记 中，了解到了 Service Registry ，它是整个“微服务架构”中的核心，不仅提供了 Service Registry（服务注册）功能，同时也为 Service Discovery （服务发现）提供了支持。 　　 服务注册 ，指的是在服务启动后，将服务的相关配置信息注册到服务注册表中。 　　 服务发现 ，可以理解为当客户调用这些服务时，将通过 Service GateWay （服务网关）从服务注册表中获取这些服务配置，然后通过反向代理的方式去调用具体的服务接口，从服务注册表中获取服务配置的过程。 　　同时，服务注册表会定期检查已经注册的服务，若发现某服务无法访问了，将其从服务注册表中移除掉，这种定期检测的过程叫作 “心跳检测” 。因此，服务注册表对 “分布式数据一致性” 的要求相当高，即，服务注册表中的服务配置一旦变更了，通知机制必须要做到高性能，且服务注册表本身还需要具备高可用。 　　那么，谁才能担当服务注册表的重任呢？我们认为 ZooKeeper 是服务注册表的最近解决方案之一。 目标 ： 认识 ZooKeeper，并学会使用 Zookeeper，最后基于 ZooKeeper 实现服务注册表的核心功能，同时，我们将使用 Node.js 搭建一个高可用的服务网关。 1. 什么是 ZooKeeper（What） 　　ZooKeeper