环境部署
在开始之前,我们需要安装 InLong 的全部组件
安装 ClickHouse
使用 Docker 快速部署 ClickHouse 数据库,命令如下:
docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8
启动所有组件
进入 InLong 的 Docker Compose 配置文件目录,并启动所有组件:
cd docker/docker-compose
docker-compose up -d
登录
打开浏览器,访问 http://localhost,并使用以下凭据登录:
User: admin
Password: inlong
主界面
系统主要包括数据接入,数据同步,数据订阅,数据节点,集群管理,审批管理,系统管理,系统运维等模块
集群管理
新建标签
注册 Pulsar 集群
添加新的 Pulsar 集群,配置集群的连接信息和相关参数。
数据接入
选择数据源类型,配置数据源连接信息,如数据库地址、用户名、密码等。
支持数据源如下
数据目标支持数据源如下
数据节点
审批管理
对数据接入、同步等请求进行审批,确保数据流动的安全性和合规性。
数据同步
数据同步模块负责将数据源的数据按照指定规则同步到目标存储中。你可以配置同步任务的详细信息,包括数据源、目标存储、同步频率、数据转换规则等。