支持的 Apache Kafka 版本 - Amazon Managed Streaming for Apache Kafka
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 Amazon Web Services 服务入门

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

支持的 Apache Kafka 版本

Amazon Managed Streaming for Apache Kafka 和 Amazon MSK 版本。

Apache Kafka 版本 3.2.0

有关 Apache Kafka 版本 3.2.0 的更多信息发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 3.1.1

有关 Apache Kafka 版本 3.1.1 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.8.1

有关 Apache Kafka 版本 2.8.1 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.8.0

有关 Apache Kafka 版本 2.8.0 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.7.2

有关 Apache Kafka 版本 2.7.2 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.7.1

有关 Apache Kafka 版本 2.7.1 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.6.3

有关 Apache Kafka 版本 2.6.3 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.6.2

有关 Apache Kafka 版本 2.6.2 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.7.0

有关 Apache Kafka 版本 2.7.0 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.6.1

有关 Apache Kafka 版本 2.6.1 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.6.0

有关 Apache Kafka 版本 2.6.0 的更多信息发布说明在 Apache Kafka 下载网站上。

Apache Kafka 版本 2.5.1

Apache Kafka 2.5.1 版本包含多个错误修复和新增功能,包括针对 Apache 的传输中加密 ZooKeeper 和管理客户端。Amazon MSK 提供 TLS ZooKeeper 终端节点,您可以使用DescribeCluster operation.

的输出 DescribeCluster操作包括ZookeeperConnectStringTls节点,其中列出了 TLS zookeeper 端点。

以下示例展示了ZookeeperConnectStringTls的响应节点DescribeClusteroperate:

"ZookeeperConnectStringTls": "z-3.awskafkatutorialc.abcd123.c3.kafka.us-east-1.amazonaws.com:2182,z-2.awskafkatutorialc.abcd123.c3.kafka.us-east-1.amazonaws.com:2182,z-1.awskafkatutorialc.abcd123.c3.kafka.us-east-1.amazonaws.com:2182"

有关将 TLS 加密用于动物园管理员的信息,请参阅在 Apache 中使用 TLS 安全性 ZooKeeper.

有关 Apache Kafka 版本 2.5.1 的更多信息,请参阅发布说明在 Apache Kafka 下载网站上。

亚马逊 MSK 错误修复版本 2.4.1.1

此版本是 Apache Kafka 版本 2.4.1 的仅限Amazon MSK 的错误修复版本。此错误修复版本包含针对KAFKA-9752,这是一个罕见的问题,它会导致消费者群体不断重新平衡并停留在PreparingRebalancestate. 此问题会影响运行 Apache Kafka 版本 2.3.1 和 2.4.1 的集群。此版本包含一个社区制作的修补程序,在 Apache Kafka 2.5.0 版本中可用。

注意

运行版本 2.4.1.1 的 Amazon MSK 集群与任何与 Apache Kafka 2.4.1 版兼容的 Apache Kafka 客户端兼容。

如果您更喜欢使用 Apache Kafka 2.4.1,我们建议您对新的 Amazon MSK 集群使用 MSK 错误修复版本 2.4.1.1。您可以将运行 Apache Kafka 版本 2.4.1 的现有集群更新到此版本以包含此修复程序。有关升级现有集群的信息,请参阅更新 Apache Kafka 版本.

要在不将集群升级到 2.4.1.1 版本的情况下解决此问题,请参阅消费者群体陷入困境PreparingRebalancestate的 部分Amazon MSK 集群故障排除指南。

Apache Kafka 版本 2.4.1(改为使用 2.4.1)

注意

您无法再使用 Apache Kafka 版本 2.4.1 来创建 MSK 集群。相反,您可以改为使用亚马逊 MSK 错误修复版本 2.4.1.1将安装与 Apache Kafka 版本 2.4.1 兼容。而且,如果你已经有一个装有 Apache Kafka 2.4.1 版的 MSK 集群,我们建议你将其更新为使用 Apache Kafka 2.4.1.1 版。

KIP-392 是 Apache Kafka 2.4.1 版中包含的重要 Kafka 改进建议之一。此项改进允许使用器从最近的副本提取。要使用此功能,请将使用器属性中的 client.rack 设置为使用器可用区的 ID。例如 AZ ID 是use1-az1. Amazon MSK 套装broker.rack更新为代理可用区 ID。您还必须将 replica.selector.class 配置属性设置为 org.apache.kafka.common.replica.RackAwareReplicaSelector,这是 Apache Kafka 提供的 rack 感知的一种实现方式。

当您使用此版本的 Apache Kafka 时,PER_TOPIC_PER_BROKER 监控级别中的指标仅在其值首次变为非零后才会显示。有关此问题的更多信息,请参阅 PER_TOPIC_PER_BROKER级数监控

有关如何查找可用区 ID 的信息,请参阅您的资源的 AZ ID中的Amazon Resource Access Manager用户指南。

有关设置配置属性的信息,请参阅Amazon MSK 配置

有关 KIP-392 的更多信息,请参阅 Confluence 页面中的允许使用器从最近的副本提取

有关 Apache Kafka 版本 2.4.1 的更多信息,请参阅 Apache Kafka 下载网站上的版本说明

Apache Kafka 版本 2.3.1

有关 Apache Kafka 版本 2.3.1 的更多信息,请参阅 Apache Kafka 下载网站上的版本说明

Apache Kafka 版本 2.2.1

有关 Apache Kafka 版本 2.2.1 的更多信息,请参阅 Apache Kafka 下载网站上的版本说明

Apache Kafka 版本 1.1(仅适用于现有集群)

您无法再使用 Apache Kafka 版本 1.1 创建新 MSK 集群。您可以继续使用配置了 Apache Kafka 版本 1.1.1 的现有集群。有关 Apache Kafka 版本 1.1.1 的更多信息,请参阅 Apache Kafka 下载网站上的版本说明