关于 Apache Pulsar
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。
导语
各位小伙伴们,Pulsar 社区周报来啦!
本次 Pulsar 社区周报,为大家呈现 Pulsar transaction、broker、metrics、client 等方面内容,帮助社区小伙伴们掌握 Pulsar 项目及社区进展,也方便大家更好地参与到 Pulsar 社区中来!
感谢近两周以下小伙伴为 Apache Pulsar 添砖加瓦(排名不分先后,看看你有没有上榜): @gaoran10、@315157973、@zhanghaou、@hangc0276、@Technoboy-、@equanz、@srkukarni@codelipenghui、@MarvinCai、@aloyszhang、@kellyfj、@zymap、@wolfstudy、@jerrypeng、@cimura、@tuteng、@jianyun8023、@Jennifer88huang、@RobertIndie、@BewareMyPower、@massakam、 @Bklyn
接下来,一起看看 08-22 ~ 09-04 有哪些值得你关注的进展吧!
重要特性
- 因为 PR 较多,仅列举较大 PR 进展,不包括全部动态
- 下面 PR 均已合入 Pulsar 主分支
-
[Transaction] 处理事务中的消息确认。
-
[Transaction] 支持对分区事务的异常终止。
-
[Transaction] 优化消费事务型消息的逻辑。
-
[Topic Policy] 支持在 Topic 级别设置、获取和移除
inactiveTopicPolicies
。 -
[Topic Policy] 支持在 Topic 级别设置卸载策略。
-
[Topic Policy] 支持在 Topic 级别设置、获取和移除
maxProducers
。 -
[Topic Policy] 支持在 Topic 级别设置、获取和移除压缩阈值。
-
[Broker] Pulsar Functions 的消费者/生产者属性支持主机名。
-
[Broker] Pulsar primitive schema 支持 Java 8 日期和时间类型。
-
[Broker] BatchPushSource 支持异步通知错误。
-
[Broker] 支持在 Topic 级别上设置消息发送速率的流控。
重要 Bug 修复
- 因修复内容较多,仅列举较重要修复内容,不包括全部动态
- 下面修复均已合入 Pulsar 主分支
-
[Broker] 修复 broker 端确认消息时出现的 NPE(空指针异常)问题。
-
[Broker] 在 Key_Shared 订阅模式下,当消费者无法消费消息造成临时跳过消息时,暂停发布消息。
-
[Metrics] 修复提供错误信息的 Pulsar metrics。
-
[CPP Client] 确保 BatchAcknowledgementTracker 和 UnAckedMessageTrackerEnabled 的 clear() 方法线程安全。
-
[Broker] 通过 Ledger ID 划分消息范围,并将其存储在 individualDeletedMessages 中。
-
[Broker] 修复添加消费者时发生的死锁问题。
-
[CPP Client] 异常处理中,抛出 std::exception 类来代替 char*。
活动和新闻
-
TGIP 每周直播:Pulsar 及其生态系统
- 点击此处,获取以往视频链接
8月25日: StreamNative 在线研讨会 - "Managing Real-Time Data Teams"
主讲人: Jesse Anderson,Big Data Institute 大数据专家。
ppt 链接:https://www.slideshare.net/JesseAnderson/managing-realtime-data-teams
研讨会回放链接:https://www.youtube.com/watch?v=Owl_ncQbVwk
活动预告
- TGIP-CN 025 答疑专场,有问题您就来
本周日 TGIP 会对近期社区小伙伴提出的问题进行解答,由 Apache Pulsar PMC 成员李鹏辉为大家线上答疑解惑。 点击此处报名参加
- Pulsar Summit Asia 2020 官网上线,正式开始演讲征集
大会官网:https://pulsar-summit.org/zh/event/asia-2020
-
09/09: "Apache Pulsar: Under the Hood for Java Developers"
分享嘉宾:Addison Higham
推荐阅读
Apache Pulsar 2.6.1 版本更新,详情阅读博客:
https://streamnative.io/blog/tech/2020-08-21-pulsar-261Apache Pulsar 社区贡献者人数突破 300 位
https://streamnative.io/blog/tech/2020-08-24-pulsar-300-contributors-
《The role of Apache BookKeeper in Apache Pulsar - part 1》
作者:Bartosz Konieczny
文章链接:https://www.waitingforcode.com/apache-pulsar/role-apache-bookkeeper-apache-pulsar-part-1/read
-
《10 Reasons for Choosing Apache Pulsar over Apache Kafka》
作者:Maximilian Michels
文章链接:https://maximilianmichels.com/2020/apache-pulsar-vs-apache-kafka/
=============
作为全球性开源项目,截至 2020 年 9 月 4 日,Apache Pulsar 已拥有超出 300 名贡献者、6.5K+ Star、1.6K+ Fork,最新版本为 2.6.1。正是由于分布在全球各地的社区开发者的贡献,才使得 Apache Pulsar 项目不断发展与前进。
让我们期待下一周的 Apache Pulsar 周报!
如果你也想为 Apache Pulsar 项目出一份力、成为我们的 Contributor,参考下面链接,来加入我们吧: