ZK

I'm using the latest version of Selenium and the chromedriver to test a ZK application. During the test, I'd like to dump the DOM (or part of it) to help me find the elements I need (and probably help people who have to maintain the test). The method WebDriver.getPageSource() looked promising but it only returns the HTML as it was sent by the server, not the result after running all the JavaScript code. The JavaScript code is run; I can find elements by ID that I can't see in the output of getPageSource() . So I tried WebElement.getText() but that is only the text of the elements, not the

ZK选举过程 当leader崩溃或者leader失去大多数的follower，这时候zk进入恢复模式，恢复模式需要重新选举出一个新的leader，让所有的Server都恢复到一个正确的状态。Zk的选举算法使用ZAB协议： 选举线程由当前Server发起选举的线程担任，其主要功能是对投票结果进行统计，并选出推荐的Server； 选举线程首先向所有Server发起一次询问(包括自己)； 选举线程收到回复后，验证是否是自己发起的询问(验证zxid是否一致)，然后获取对方的id(myid)，并存储到当前询问对象列表中，最后获取对方提议的leader相关信息(id,zxid)，并将这些信息存储到当次选举的投票记录表中； 收到所有Server回复以后，就计算出zxid最大的那个Server，并将这个Server相关信息设置成下一次要投票的Server； 线程将当前zxid最大的Server设置为当前Server要推荐的Leader，如果此时获胜的Server获得n/2 + 1的Server票数， 设置当前推荐的leader为获胜的Server，将根据获胜的Server相关信息设置自己的状态，否则，继续这个过程，直到leader被选举出来。 通过流程分析我们可以得出：要使Leader获得多数Server的支持，则Server总数最好是奇数2n+1，且存活的Server的数目不得少于n+1

window 下启动zookeeper闪退，百度半天没有找到怎么解决，看了下zookeeper启动加载项，zk在启动时加载log和zoo文件，但是zk解压出来zoo文件名字是zoo_examle 所以修改下文件名字为zoo就可以了 来源： CSDN 作者： spring_great 链接： https://blog.csdn.net/spring_great/article/details/50283855

问题 在windows10下启动zookeeper闪退。 解决 首先在zk的解压后的文件的conf目录下，将zoo_simple.cfg重命名为zoo.cfg，然后在bin目录下，编辑zkServer.cmd文件，在最后一行加上pause，启动就不会一闪而过，便于查看错误信息。 错误信息： 于是打开zkEnv.cmd文件： 发现是jdk环境变量未设置，所以设置环境变量： 设置后再启动zk： zk成功启动了! 来源： CSDN 作者： CemB 链接： https://blog.csdn.net/qq_28822933/article/details/85914273

一、安装 1.安装jdk 2.安装Zookeeper 3.单机模式（stand-alone）：安装目录/conf 复制 zoo_sample.cfg 并粘贴到当前目录下，命名zoo.cfg. 二、目录结构 bin 存放系统脚本 conf 存放配置文件 contrib zk附加功能支持 dist-maven maven仓库文件 docs zk文档 lib 依赖的第三方库 recipes 经典场景样例代码 src zk源码 其中bin和conf是非常重要的两个目录，平时也是经常使用的。 三、bin目录 其中 zkServer 为服务器，启动后默认端口为 2181 zkCli 为命令行客户端 四、conf目录 Conf 目录为配置文件存放的目录， zoo.cfg 为核心的配置文件 这里面的配置很多，这配置是运维的工作，目前没必要，也没办法全部掌握。 clientPort ：参数无默认值，必须配置，用于配置当前服务器对外的服务端口，客户端必须使用这端口才能进行连接 dataDir ：用于存放内存数据库快照的文件夹，同时用于集群的 myid 文件也存在这个文件夹里（注意：一个配置文件只能包含一个 dataDir 字样，即使它被注释掉了。） dataLogDir ：用于单独设置 transaction log 的目录， transaction log 分离可以避免和普通 log 还有快照的竞争

写在前面 生产上基本都使用Curator客户端去操作zookeeper，zookeeper原始API太底层了，自己封装的比较便利还是比较难的 完全出于自己想实现一下同步锁才有了这篇文章，文章中缺少了一块很重要的步骤 “创建根节点 ”，如果直接去拿文章中的代码去操作，报出来的错误就是 root/lock节点不存在。这里都体现了Curator API的实用性了，他们有一个 creatingParentContainersIfNeeded 的API 去创建父节点如果不存在的话 环境 jdk 1.7 SpringBoot 1.5.10 引用包 <dependency> <groupId>org.apache.curator</groupId> <artifactId>curator-framework</artifactId> <version>2.12.0</version> </dependency> <dependency> <groupId>org.apache.curator</groupId> <artifactId>curator-recipes</artifactId> <version>2.12.0</version> </dependency> <!-- https://mvnrepository.com/artifact/com.google.guava/guava

zookeeper: 1、 定义： zookeeper是一个分布式、开源的分布式应用程序协调服务。 2、 zookeeper的信息记录方式： 1). zk采用树形结构目录结构记录信息。树的深度没有限制(但实际中，不可能建立很深的树结构)，每一个节点称为node 2). 每个znode都有一个名称，为了避免出现字符集编码问题，不要使用中文作为znode的名称，另外，同一个znode下的子级znode名称不允许重复 3). 一个znode允许存储最多1MB大小的数据信息 4). znode根据创建性质的不一样，可分为四种行为类型不一样的znode。它们是PERSISTENT、PERSISTENT_SEQUENTIAL、EPHEMARAL、EPHEMARAL_SEQUENTIAL 5). PERSISTENT：持久化节点，创建这个节点的客户端在与zk服务的连接断开后，这个节点也不会被删除(除非使用api强制删除) 6). PERSISTENT_SEQUENTIAL：持久化顺序编号节点，当客户端请求创建这个节点A后，zk会根据parent-znode的zxid的状态，为这个A节点编写一个全目录唯一的编号(这个编号只会一直增长)。当客户端与zk服务的连接断开后，这个节点也不会被删除 7). EPHEMARAL：临时目录节点，创建这个节点的客户端在与zk服务的连接断开后，这个节点会被删除 8)

ZooKeeper是 Hadoop Ecosystem中非常重要的组件，它的主要功能是为分布式系统提供一致性协调(Coordination)服务，与之对应的Google的类似服务叫Chubby。今天这篇文章分为三个部分来介绍ZooKeeper，第一部分介绍ZooKeeper的基本原理，第二部分介绍ZooKeeper提供的Client API的使用，第三部分介绍一些ZooKeeper典型的应用场景。 ZooKeeper基本原理 1. 数据模型 如上图所示，ZooKeeper数据模型的结构与Unix文件系统很类似，整体上可以看作是一棵树，每个节点称做一个ZNode。每个ZNode都可以通过其路径唯一标识，比如上图中第三层的第一个ZNode, 它的路径是/app1/c1。在每个ZNode上可存储少量数据(默认是1M, 可以通过配置修改, 通常不建议在ZNode上存储大量的数据)，这个特性非常有用，在后面的典型应用场景中会介绍到。另外，每个ZNode上还存储了其Acl信息，这里需要注意，虽说ZNode的树形结构跟Unix文件系统很类似，但是其Acl与Unix文件系统是完全不同的，每个ZNode的Acl的独立的，子结点不会继承父结点的，关于ZooKeeper中的Acl可以参考之前写过的一篇文章《 说说Zookeeper中的ACL 》。 2.重要概念 2.1 ZNode 前文已介绍了ZNode

一、环境准备 软件 版本 Linux系统 CentOS7 JDK jdk-8u221-linux-x64.tar.gz Hadoop zookeeper-3.4.5-cdh5.14.2.tar.gz 二、机器配置 主机名 hadoop01 hadoop02 hadoop03 内存 8G 8G 8G CPU 4核 4核 4核 硬盘 500G 500G 500G 服务 QuorumPeerMain QuorumPeerMain QuorumPeerMain 三、前期准备工作 　　1、关闭防火墙 firewall-cmd --state # 查看防火墙状态 systemctl stop firewalld.service # 停止防火墙 systemctl disable firewalld.service # 禁止开机启动防火墙 　　2、配置host主机映射（使用root权限，将ip修改成对应的ip地址） sudo vi /etc/hosts ip1 hadoop01 ip2 hadoop02 ip3 hadoop03 　　3、创建普通用户（bigdata） useradd bigdata # 添加普通用户 passwd bigdata # 为普通用户设置密码 　　4、为bigdata用户配置ssh免密码登陆（具体操作步骤略，执行命令如下） ssh-keygen -t rsa #

Zookeeper是一个高可用的分布式数据管理与协调框架，该框架能很好地保证分布式环境中数据一致性。一般用来实现服务发现(类似DNS)，配置管理，分布式锁，leader选举等。 一、生产环境中Zookeeper安装部署规范 生产环境建议zookeeper至少为三台集群，统一安装配置，版本号为近期新版本，比如版本为3.4.8 部署路径：/opt/业务模块名/zookeeper 配置文件：/opt/业务模块名/zookeeper/conf/zoo.cfg 存储快照文件snapshot的目录：/opt/业务模块名/zookeeper/data 事务日志输出目录：/var/log/业务模块名/zookeeper 运行日志输出目录：/var/log/业务模块名/zookeeper Zookeeper所有端口需要提前开通防火墙入站规则 对外服务端口：默认2181，可自定义 通信端口：2888，可自定义 选举端口：3888，可自定义 autoperge默认关闭，建议自行编写脚本在业务低谷期清理快照和事务日志 查询状态：sh /opt/业务模块名/zookeeper/zkServer.sh status 启动服务：sh /opt/业务模块名/zookeeper/zkServer.sh start 停止服务：sh /opt/业务模块名/zookeeper/zkServer.sh stop