Confluent Platform 6为Apache Kafka带来集群链接

日期: 2020-09-07 作者:Sean Michael Kerner翻译:邹铮 来源:TechTarget中国 英文

近日Confluent公司发布Confluent Platform 6,此次更新为这个开源Apache Kafka事件流平台带来新的功能。

在8月24日举行的Kafka Summit虚拟会议期间,这家流处理供应商发布了该更新,但并没有透露何时正式发布。

在该平台最新版本中,增强功能包括ksqlDB事件流数据库,该数据库于2019年11月首次引入。

Confluent还集成了一系列可扩展性改进,这些改进统称为Project Metamorphosis。作为其可扩展性功能的一部分,Confluent在更新中添加了群集链接功能,旨在使用户更轻松地连接不同的Kafka事件流数据实例。

Confluent Platform 6蜕变

IDC分析师Stewart Bond说,Confluent Platform 6.0是Project Metamorphosis的第一个成果,并且还会添加更多功能。

Bond说:“Confluent Platform 6.0在围绕Kafka添加功能,这将使开发人员更容易构建云原生数据应用程序,并增加对实时流处理工作负载的部署。其实业务一直是实时,但是过去的技术局限性限制了实时计算。”

Kafka集群链接

关于新的群集链接功能,Bond指出,在较高的层次上,群集链接可能看起来像基本联结,但在底层却不只如此。

Bond指出,集群链接会保留整个集群的偏移量。在独立集群中,偏移量用于管理顺序,即数据消息传递给使用者的顺序,并确保使用者不会获得同一消息的多个副本。

Bond说:“偏移量在水平扩展的环境中非常重要,其中多个进程实例可以同时运行,并读取同一集群。通过集群链接,多个集群可以联结,数据可以在集群之间共享,并且通过保留偏移量,进程也可以在集群之间共享。”

群集链接使用Kafka二进制协议。Confluent公司集团产品经理Addison Huddy指出,通过集群链接,企业可以链接在不同云提供商和不同部署运行的Kafka集群。

Huddy说:“集群链接允许软件架构师创建Kafka全局网格。”

ksqlDB现已可用于生产环境

该ksqlDB技术是专门为Kafka事件流而构建的数据库。Confluent公司首席产品经理Michael Drogalis表示,Confluent Platform 6.0开始提供ksqlDB的两个最强大的功能:查询层和连接器管理。该平台更新本身尚未正式发布。

Drogalis解释说,查询层提供了低延迟接口来询问时间点问题。而连接器管理功能使用户可获取和同步数据—通过Confluent的100多个数据源连接器产品组合。

Drogalis说:“在过去的一年中,通过持续使用–我们的客户和我们自己的云业务,这两项功能都已经得到强化。KsqlDB已被用于构建物化视图和流化ETL(提取、转换、加载)管道,这两者对于构建现代应用程序都至关重要。”

 

我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。

我原创,你原创,我们的内容世界才会更加精彩!

【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

翻译

邹铮
邹铮

相关推荐

  • 如何将遗留应用程序迁移到云端

    随着企业寻求提高可扩展性、安全性和成本效益,企业不得不想办法让遗留应用程序现代化。虽然云迁移提供令人信服的好处 […]

  • 云计算的未来:热门趋势和预测

    在过去的几十年里,云计算已经从配置虚拟机的更便宜的替代品演变为更细微和复杂的基础设施。尽管就原始基础设施成本而 […]

  • 5个值得考虑的开源云监控工具

    如果你的IT团队需要低成本、无锁定的云监控工具,开源可能是不错的选择。 云计算的受欢迎程度持续飙升。然而,由于 […]

  • 云退出策略的8个关键步骤

    吸引企业迁移到公共云有很多好处,例如降低运营复杂性和降低成本的潜力。但云服务不一定是每个工作负载的最佳场所。有 […]