iskytek / rsqldb

RSQLDB

RSQLDB 为 RocketMQ Streams 的开发提供了基于 SQL 的开发体验， 让基于消息队列的流式开发更加容易；

Features

• 采用标准的流式SQL规范，可以与其他的流计算框架如Flink兼容；

如果您希望更详细的了解RSQLDB的相关内容， 请点击这里

Quickstart

本地安装docker，安装链接

安装后启动docker 使用docker -v 能查看docker版本即是启动成功。

下载RSQLDB工程

git clone https://github.com/alibaba/rsqldb.git

进入工程目录并执行启动docker

cd rsqldb
docker-compose -f docker-compose.yml up

此为前台启动，也可使用 docker-compose -f docker-compose.yml up -d 方式后台启动。

进入rsqldb-client容器

另开shell窗口，进入rsqldb-client容器，进入方式：

#查看容器
docker ps
#进入rsqldb-client容器
docker exec -it ${rsqldb-client-containerId} bash

提交任务

sh clientExector.sh submitTask rocketmq.sql

rocketmq.sql任务从RocketMQ中rsqldb-source topic中读取数据，过滤出数据中首字段为1的数据，然后将结果写回到RocketMQ 中的rsqldb-sink topic中。

开始任务

sh clientExector.sh startTask

向RocketMQ中写入数据

java -cp RocketmqTest-1.0-SNAPSHOT.jar  com.test.rocketmqtest.docker.Producer

执行上述语句，向RocketMQ的rsqldb-source topic中写入RocketmqTest-1.0-SNAPSHOT.jar包中默认数据，即向RocketMQ发送的数据为：

{"field_3":"3","field_4":"4","field_1":"1","field_2":"2"}
{"field_3":"3","field_4":"4","field_1":"2","field_2":"2"}
{"field_3":"3","field_4":"4","field_1":"3","field_2":"2"}
{"field_3":"3","field_4":"4","field_1":"4","field_2":"2"}

（也可以向RocketMQ发送json数据，显式指定数据数据哪个字段，见rsqldb-disk/client中其他例子） 根据执行的任务rocketmq.sql，期望能将field_1=1的数据过滤出来；

另外，也可以使用RocketmqTest-1.0-SNAPSHOT.jar向任意topic发送任意数据，使用方式是：

java -cp RocketmqTest-1.0-SNAPSHOT.jar  com.test.rocketmqtest.producer.Producer ${topic} ${groupId} ${数据文件全路径}

查看结果输出

java -cp RocketmqTest-1.0-SNAPSHOT.jar  com.test.rocketmqtest.docker.Consumer

从RocketMQ的rsqldb-sink topic中读出结果数据，每执行一次producer会有一行输出(第一次需要等待1min轮询提交的任务)：

Receive New Messages: body[{"field_3":"3","field_4":"4","field_1":"1","field_2":"2"}]

另外，也可以使用RocketmqTest-1.0-SNAPSHOT.jar接收任意topic的数据，使用方式是：

java -cp RocketmqTest-1.0-SNAPSHOT.jar  com.test.rocketmqtest.consumer.Consumer ${topic} ${groupId} 

其他启动方式

本地jar包启动

本地jar包启动

本地工程启动

本地工程启动

其他支持sql类型

更多其他sql使用示例请见 rsqldb-disk/client