Amazon Managed Streaming for Kafka（MSK）在AWS re: 2018大会上推出公开预览版，现在，该服务正式发布。Amazon MSK的目标是使基于Kafka的流应用程序的构建和运行变得更加容易。

新的MSK GA将对Kafka的支持扩展到2.1.0版本，同时，对于预览期间创建的应用程序，它与Kafka 1.1.1保持完全兼容。此外，亚马逊还根据早期客户的反馈添加了一些新功能。其中包括支持客户端和代理之间以及代理之间的TLS传输加密，与AWS CloudTrail集成用于日志记录以及基于集群创建时分配给集群的标记定义IAM策略的可能性。目前，在AWS云环境中提供MSK的唯一方法是使用AWS管理控制台和CLI。然而，Amazon正在添加AWS CloudFormation支持，以支持使用JSON或YAML文本描述进行MSK建模和配置。

亚马逊简化Kafka集成的努力不限于设置、扩展和管理自托管Kafka服务器的固有困难。事实上，它的MSK服务还包括一个Apache Zookeeper节点以确保高可用性和安全性，亚马逊不会对其收费。正如亚马逊数据流产品经理Damien Wylie所说：

我们将自动检测故障，然后重新引入一个新节点。因此，IP可以保持不变，最后，你运行集群期间需要的任何补丁，我们都会自动为你应用。

在AWS管理控制台中创建Kafka集群的过程被大大简化了。你只需要选择要使用的Kafka版本，决定每个可用性区域需要多少代理，并设置加密和存储选项，其中大多数设置都提供了合理的默认值。如果希望更改代理实例类型或Amazon EDB卷大小，可以通过访问高级自定义设置部分来实现。

一旦你拥有了Apache Kafka集群，就可以设置任意数量的主题供生产者在发送消息时使用。消费者将以流的方式接收它们正在侦听的主题的所有消息。所有这些任务都可以通过标准的Apache Kafka工具来完成。

最后，值得一提的是，Amazon为MSK提供了一个服务级别协议，确保了99.9%的可用性。

Apache Kafka最初是在LinkedIn开发的，后来在2011年开源。Amazon并不是唯一提供托管Kafka服务的供应商。特别值得一提的是，Confluent最近推出了一项名为Confluent Cloud的托管Kafka服务。该公司由最初开发了Kafka的LinkedIn团队创建，并专注于构建一个基于Kafka的平台。

如果你想开始使用Amazon MKS，最好从Amazon分步指南开始。

查看英文原文：Amazon Managed Kafka Aims to Simplify Kafka Streaming Setup and Use

创作场景

Amazon Managed Kafka 旨在简化 Kafka Streaming 的设置和使用