hbase-site.xml 中的 Zookeeper 仲裁设置到底是什么？

Question

hbase-site.xml 中的 Zookeeper 仲裁设置到底是什么？

Answer 1

如 hbase-default.xml 中所述， 这是设置：

ZooKeeper 仲裁中的服务器的逗号分隔列表。例如，“host1.mydomain.com、host2.mydomain.com、host3.mydomain.com”。默认情况下，它设置为 localhost 以实现本地和伪分布式操作模式。对于完全分布式设置，应将其设置为 ZooKeeper 仲裁服务器的完整列表。如果在 hbase-env.sh 中设置了 HBASE_MANAGES_ZK，则这是我们将启动/停止 ZooKeeper 的服务器列表。

Edward J. Yoon 此处。 为清楚起见，我进行了编辑：

Apache Zookeeper 是分布式应用程序的协调服务，例如 Google 的 Chubby。很多项目都使用zookeeper，我们（Apache Hama）也使用zookeeper来进行Bulk Synchronous Parallel计算框架的屏障同步。

今天，我调查了更多有关 Zookeeper 项目的 paxos 和动态仲裁功能的信息，以便更好地命名该类org.apache.hama.zookeeper.QuorumPeer。由于文档不够（ http://hadoop.apache。 org/zookeeper/docs/r3.0.0/api/index.html ），我不明白“quorum”的含义，因为这个术语对我来说有点奇怪。但是，“org.apache.hama.zookeeper.QuorumPeer”是正确的名称！ xD

那么，什么是法定人数以及为什么我们需要法定人数？

根据维基百科，法定人数是审议机构开展该团体业务所需的最低成员人数。通常情况下，这是预期参加的大多数人，尽管许多机构的法定人数可能较低或较高。

众所周知，容错机制是分布式系统的重要功能之一。 Quorum 算法用于防止裂脑情况。当裂脑情况发生时，zookeeper根据Quorum算法确定“主分区”和“辅助分区”。然后，主组中的服务器接收并处理用户的请求，次要组中的服务器变为只读。

该系统何时从裂脑状态中恢复？当它们再次合并到一个分区时。在内部，zookeeper 使用原子广播协议而不是 Paxos。

您还应该阅读原始版本，以防我错误翻译了他试图呈现的概念。

我对 Apache Zookeeper 中的仲裁机制的理解是，它明确定义了跨多个预定义主机的复制仲裁。如果未满足此法定人数，则不同意的分区将被拆分到辅助分区，直到 Zookeeper 可以将它们与主分区重新集成。

这为 Hadoop 的最终一致性模型添加了更多粒度。与此同时，HBase 目前正在进一步将 Zookeeper 与其代码集成。

Answer 2

从 hbase-default.xml 文件：

ZooKeeper 仲裁中的服务器的逗号分隔列表。
例如，“host1.mydomain.com、host2.mydomain.com、host3.mydomain.com”。
默认情况下，对于本地和伪分布式模式，此设置为 localhost
的操作。对于完全分布式设置，应将其设置为完整
ZooKeeper 仲裁服务器列表。如果在 hbase-env.sh 中设置了 HBASE_MANAGES_ZK
这是我们将启动/停止 ZooKeeper 的服务器列表。

从入门的要求部分：

自版本 0.20.0 起，HBase 依赖于 ZooKeeper。 HBase 在 ZooKeeper 中保留其根表的位置、当前的 master 是谁以及当前有哪些区域参与集群。客户端和服务器现在必须知道它们的 ZooKeeper Quorum 位置，然后才能执行其他操作（通常它们从 CLASSPATH 上提供的配置中获取此信息）。默认情况下，HBase 将为您管理单个 ZooKeeper 实例。在独立和伪分布式模式下，这通常就足够了，但对于完全分布式模式，您应该配置 ZooKeeper 仲裁（更多信息如下）。

希望有帮助。