基于 Ambari 部署 Kafka 高可用性

在 Hadoop 集群中部署 Kafka 时，确保其高可用性非常重要。Kafka 集群的高可用性可以通过多个 Kafka Broker 节点来实现。以下我们将介绍两种常见的 Kafka 高可用性部署方式：初始化安装阶段选择多个 Kafka Broker 和 后期节点扩容方式。

1. 方案一：初始化安装阶段选择多个 Kafka Broker

在安装 Kafka 服务时，你可以直接选择多个 Kafka Broker 来进行高可用性配置。

选择 Kafka 服务

在 Ambari 的 Add Service 页面中，选择 Kafka 服务，接着点击 Next。

提示

如果集群规模较大，推荐选择多个 Kafka Broker 节点以实现更好的负载均衡和容错性。

配置 Kafka Broker 节点

在此页面中，可以选择多个 Kafka Broker 节点。如果主机数量较多，你可以选择 3 台或更多的主机，确保 Kafka 服务的高可用性。完成选择后，点击 Next 继续。

提示

对于多节点配置，确保选择的 Kafka Broker 数量足够以实现高可用性和负载均衡。

点击下一步后，继续点击 Next，直到完成所有步骤并开始安装。

2. 方案二：节点扩容方式

如果 Kafka 集群已经部署完毕，但需要后期扩容，可以通过增加新的 Kafka Broker 节点来扩展集群。

进入 Hosts 页面

首先，回到 Ambari 首页，选择 Hosts，然后对 hadoop2 和 hadoop3 两台机器分别进行扩容操作。

添加 Kafka Broker 节点

进入每台主机的详细信息页面，点击 Add 按钮，选择 Kafka Broker，将其加入 Kafka 集群。

安装进度查看

Ambari 会自动进行安装和配置，过程中你可以查看安装进度，确保所有新添加的 Kafka Broker 节点正确配置并加入集群。

查看 Kafka 集群状态

安装完成后，回到 Ambari 首页，点击 Kafka，你将看到 Kafka 服务已经成功扩展，多个 Kafka Broker 已加入集群。

重启 Kafka 服务

在完成节点扩容后，需要重启 Kafka 服务以确保新节点正常运行。可以通过 Ambari 界面的 Restart 按钮来重启 Kafka 服务。