目录
- 1. 背景
- 2. 介绍
- 3. Pulsar Flink Connector
- 3.1 Flink读取Pulsar消息
- 3.1 Flink发送消息到Pulsar
1. 背景
虽然可以使用produce和consume的API进行消息的发送和消费,但Pulsar提供了一种更简便的方式,用来同步其它系统的数据到Pulsar的topic,和将Pulsar的topic的数据发送到其它系统
2. 介绍
Pulsar IO分为Input和Output两个模块。支持的Source Connector和Sink Connector可以参考Pulsar官网Connector部分
3. Pulsar Flink Connector
3.1 Flink读取Pulsar消息
Source可以使用Flink官网DataStream Connector提供的Pulsar Connector
3.1 Flink发送消息到Pulsar
Flink官网DataStream Connector提供的Pulsar Connector没有Sink。使用io.streamnative.connectors提供的pulsar-flink-connector版本1.14.3.0,只有Scala2.11版本的,没有Scala2.12版本的