脉冲星 4月脉动 | 2.3.1 发布,2.4.0 预览和社区海内外布道

本月看点速览

产品动态

Pulsar 2.3.1 发布

PIP-34 : Key_Shared Subscription

PIP-26 : Delayed Message Delivery

PIP-30 : Kerberos Authentication

Go Schema Support

社区动态

DataPipeline Meetup (China)

Flink Forward San Francisco (Overseas)

Pulsar 2.3.1 Release

Apache Pulsar 在 4 月 12 日正式发布了 2.3.1 版本!2.3.1 版本修复和改进了众多用户在使用 2.3.0 版本中反馈的问题。这些修复覆盖了从消息存储核心,多语言客户端,到 Pulsar Functions 等多方面。

2.3.1 版本特性的详细解读,请参考 ApachePulsar 的公众号文章Apache Pulsar 发布 2.3.1 版本。

Pulsar 2.4.0 预览

Apache Pulsar 2.4.0 版本即将发布,整个四月,团队成员围绕 2.4.0 版本中的各项工作在紧张有序地进行着。以下是 2.4.0 版本几个特性的提前预览。

PIP-34: Key_Shared Subscription

Apache Pulsar 提供了消息队列和流的统一消息模型。目前支持 Exclusive、Failover 和 Shared 三种订阅方式。在 Exclusive 和 Failover 订阅方式下,一个分区只能被一个消费者消费,但是能够保证消息的顺序消费;在 Shared 订阅方式下,一个分区可以被多个消费者以乱序的方式消费,应用可以通过增加消费者的数量提供消费的吞吐。 PIP-34 引入了 Key_Shared 的订阅方式,这个消费方式可以保证消费者对同一分区里面的消息,按照 Partition Key 或者 Ordering Key 进行有序消费,同时可以通过增加消费者数量来提高消费的吞吐,兼顾了 Exclusive/Failover 的有序性和 Shared 的扩展性。Key_Shared 订阅方式将在 2.4.0 版本中发布。

关于 Key_Shared 订阅的设计,请参考 PIP-34

(https://github.com/apache/pulsar/wiki/PIP-34%3A-Add-new-subscribe-type-Key_Failover)。

PIP-26: Delayed Message Delivery

Apache Pulsar 将在 2.4.0 版本中支持延时消息。用户可以通过deliverAfter指定一条消息在多长时间后进行投递,通过 delieverAt 指定一条消息在什么时候进行投递。延时消息只对共享订阅的消费者生效,对于独占和灾备订阅等具有消费顺序性的订阅模式不生效。

关于 Delayed Message Delivery 的设计,请参考 PIP-26

(https://github.com/apache/pulsar/wiki/PIP-26%3A-Delayed-Message-Delivery)。

PIP-30: Kerberos Authentication

在 2.3.0 版本中,Pulsar 引入了对 JWT (Json-Web-Token) 认证的支持。在 2.4.0 版本中,Pulsar 正式支持使用 Kerberos 进行安全认证。所有关于 Kerberos 的特性开发都已经合并到主干分支,将于 2.4.0 版本中发布。

关于 Kerberos 的支持,请参考 Kerberos authentication

(https://github.com/apache/pulsar/issues/3491)。

Go Schema

Schema 是 Apache Pulsar 作为一个云原生流数据平台的灵魂组件。在 2.3.0 版本之前,只有 Java 客户端实现了对所有 Schema 的支持。2.3.0 版本在 C++ 和 Python 客户端实现了对 Schema 的支持。2019 年 4 月,Pulsar 社区在 Go 客户端实现了对 Schema 的支持。Go 客户端是继 Java 客户端之后第二个对 Schema 进行完整支持的客户端。

关于 Go Schema 的支持,请参考[Go Schema for pulsar-client-go]

(https://github.com/apache/pulsar/pull/3904)。

DataPipeline Meetup

Apache Pulsar PMC 成员郭斯杰(StreamNative CEO) 受邀在 Datapipeline & RocketMQ Meetup 上分享了 Efficient Schemas in Event Streaming using Apache Pulsar,该分享受到社区的热烈反响。

Flink Forward San Francisco 2019

Flink Forward 是 Ververica 组织的 Flink 年度技术大会,本届在美国的大会于 2019 年 4 月 1 - 2 日在美国旧金山举办。大会的 keynotes 和技术分享涵盖 Flink 用户案例,Flink 生态的增长,流处理和实时分析等主题。演讲嘉宾来自 Ververica,Alibaba,Comcast,The Trade Desk, Foyer, Lyft, Uber, Netflix 等企业的技术团队。来自 StreamNative 的郭斯杰分享了 Elastic Data Processing with Apache Pulsar and Apache Flink。

TALK

Elastic Data Processing with Apache Pulsar and Apache Flink

Speaker:Sijie Guo (StreamNative) 活动链接:Conference Program – Flink Forward San Francisco 2019

(https://sf-2019.flink-forward.org/conference-program#elastic-data-processing-with-apache-flink-and-apache-pulsar)

以上是本期全部内容,谢谢阅读。

我们下期再见~

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 219,490评论 6 508
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,581评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 165,830评论 0 356
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,957评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,974评论 6 393
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,754评论 1 307
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,464评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,357评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,847评论 1 317
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,995评论 3 338
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,137评论 1 351
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,819评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,482评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,023评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,149评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,409评论 3 373
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,086评论 2 355

推荐阅读更多精彩内容