streamsets 集成 cratedb 测试

2022-05-06 00:00:00 用户专区订阅配置加载

我们可以集成crate 到streamsets 中可以实现强大的数据导入，数据分析能力。
演示的是进行csv 文件的解析并输出到cratedb

环境使用docker && docker-compose

环境启动

docker-compose yaml 文件

version: "3"
services:
   sets:
     image: streamsets/datacollector 
     volumes:
     - "./ms/data:/data"
     - "./ms/logs:/logs"
     - "./ms/tmp:/tmp"
     ports:
     - "8000:8000"
     - "18630:18630"
   crate:
     image: crate
     ports:
     - "4200:4200"
     - "4300:4300"
     - "5432:5432"

相关文章