收录了 ksql 频道下的 50 篇内容
本文作者Michael Noll介绍了如何使用KSQL实现流处理。KSQL是Apache Kafka的数据流SQL引擎。本文内容涵盖了有状态流处理中的挑战、KSQL是如何解决这些挑战的,以及KSQL是如何通过流和表构建了流数据和数据库之间的桥梁。
在本文中,作者Robin Moffatt展示了如何借助一个电商实例应用程序使用Apache Kafka和KSQL构建数据集成和处理应用程序。本文讨论了三个应用场景:客户操作、操作仪表板、在线分析。
不推荐使用 KSQL 和 Kafka Streams,因为缺少检查点机制以及存在随机排序等问题。
今天,Confluent公司(为Apache Kafka开源软件提供商业化服务支持的初创公司,由Kafka的几位创立者离开LinkedIn后成立)联合创始人兼CEOJay Kreps在Confluent官方博客发文表示:Confluent平台部分开源组件正式变更开源许可协议,从Apache 2.0切换到Confluent社区许可。这个新的许可允许免费下载、修改和重新发行代码(类似于Apache 2.0),但不允许将这些软件作为SaaS产品提供给用户。去年刚推出并引发关注的流数据SQL引擎KSQL将受到新许可的影响,但Kafka本身不受影响。
Kafka的作者Neha Narkhede在Confluent上发表了一篇博文,介绍了Kafka新引入的KSQL引擎——一个基于流的SQL。推出KSQL是为了降低流式处理的门槛,为处理Kafka数据提供简单而完整的可交互式SQL接口。KSQL目前可以支持多种流式操作,包括聚合(aggregate)、连接(join)、时间窗口(window)、会话(session),等等。
Confluent发布KSQL:针对Apache Kafka的交互式、分布式流数据SQL引擎。KSQL支持对Apache Kafka中的主题进行多种流处理操作,比如聚合、连接、时间窗口以及会话。Confluent是在最近举行的Kafka峰会上宣布开源这个流SQL引擎的。
这篇文章将告诉我们如何正确地使用消息的序列化格式,以及如何在Kafka Connect连接器中对其进行标准化。
实现强大的搜索能力——从设计决策到幕后的一切
本文介绍了Kafka 应用实践与生态集成的相关内容
创业公司CitusData(CitusData 是一家将 PostgreSQL 商业化的初创企业,也是 PostgreSQL 社区领导者,不久前被微软收购)的云产品负责人Craig Kerstiens近日发文表示,在他十多年的职业生涯中学到了很多技能,但没有一种技能比SQL更有用。他的文章在Hacker News上引起了热烈讨论,截至发稿之时已经收到779个点赞、372条评论,网友纷纷表示:SQL一直以来确实被严重低估了。下面就让我们一起来看一下Craig是怎么说的。
Kafka不仅取代了其他传统的中间件,而且人们还使用DDD和Kafka原生API直接构建微服务。
本文介绍Rheos SQL这一实时流式SQL处理平台在设计和实现中的细节。
Kafka 是一头值得研究的野兽。尽管随着时间的推移,Kafka 的内核已经相当稳定,但围绕 Kafka 的框架却在迅速发展。
Confluent平台是基于Apache Kafka构建的一个企业级流平台。该平台的5.0版本支持LDAP授权、Kafka主题检查以及用于物联网(IoT)集成的Confluent MQTT代理。
北京时间1月24日,开源Apache Kafka项目背后的公司Confluent在官方博客宣布进行了D轮融资,价值约为1.25亿美元,公司总估值高达25亿美元。
Confluent宣布更改其Confluent Platform某些组件的许可协议,Confluent Platform是一个提供传输数据功能的流式平台,也是连接系统和数据源的工具。许可变更主要是为了限制SaaS供应商使用这些组件。
在这篇文章里,我将分享如何通过扩展KCache来实现一个全功能的关系型数据库,我把这个数据库叫作KarelDB。
Confluent联合创始人兼CEO Jay Kreps发表了一篇博客,给出了Kafka的真正定位——它不只是个消息系统,它还是个存储系统,而它的终极目标是要让流式处理成为现代企业的主流开发范式。
为了防止云提供商,开源组织接连修改许可,这一行为引发开源社区部分人士的不满,并提出质疑:还记得开源精神吗?
Kafka Streams是2016年发布的Apache Kafka 0.10版本中引入的一个新Feature,提供了对存储于Kafka内的数据进行流式处理和分析的功能。与Spark、Storm等流式框架相比,Kafka Streams具备低延迟和轻量级等特点,使得它在特定业务场景(比如本文所介绍的广告消耗预测)中成为更理想的流式框架的选择。