实时数仓flick+clickhouse启动命令

FlinkCDC环境部署

1、启动zookeeper

zk.sh start

2、启动DFS,Hadoop集群

start-dfs.sh

3、启动yarn

start-yarn.sh

4、启动kafka(如果需要在启用)

启动Kafka集群

bin/kafka-server-start.sh -daemon config/server.properties

查看Kafka topic 列表

bin/kafka-topics.sh --bootstrap-server localhost:9092 --list

创建Kafka ods层topic 副本

bin/kafka-topics.sh --zookeeper localhost:2181 --create --topic ods_cars_log --replication-factor 1 --partitions 1

bin/kafka-topics.sh --zookeeper localhost:2181 --create --topic ods_entrance_guard_log --replication-factor 1 --partitions 1

删除Kafka ods层topic

bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic ods_cars_log

bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic ods_entrance_guard_lo

5、启动Flink SQL-client服务

(1)#启动flink yarn-session

bin/yarn-session.sh -s 1 -jm 1024 -tm 1024

#关闭yarn-session命令

bin/yarn application -kill application_1659752641091_0003

(2)#启动flink sql

bin/sql-client.sh -s yarn-session

(3)#设置checkpoint配置

SET 'execution.checkpointing.interval' = '10s';

SET 'parallelism.default' = '3';

flink启动之前需要:

#启动HDFS

start-dfs.sh

#启动集群

start-cluster.sh

#启动历史服务器

historyserver.sh start

启动sql-client:bin/sql-client.sh embedded

CH的命令

1、基于默认配置启动ClickHouse

service clickhouse-server start

2、查看ClickHouse启动进程

ps -ef | grep clickhouse

3、重新启动

systemctl restart clickhouse-server

4、#客户端连接ClickHouse

clickhouse-client

5、#查询数据库

show databases;

用户名:default

密码:123456

相关推荐
_下雨天.5 小时前
LVS负载均衡
服务器·负载均衡·lvs
mounter6258 小时前
【硬核前沿】CXL 深度解析:重塑数据中心架构的“高速公路”,Linux 内核如何应对挑战?-- CXL 协议详解与 LSF/MM 最新动态
linux·服务器·网络·架构·kernel
特长腿特长8 小时前
centos、ubantu系列机的用户和用户组的结构是什么?具体怎么配置?用户组权限怎么使用?这篇文章持续更新,帮助你复习linux的基础知识
linux·运维·centos
zzzyyy5388 小时前
Linux环境变量
linux·运维·服务器
等....8 小时前
Minio使用
数据库
kebeiovo9 小时前
atomic原子操作实现无锁队列
服务器·c++
win x9 小时前
Redis 使用~如何在Java中连接使用redis
java·数据库·redis
赛博云推-Twitter热门霸屏工具10 小时前
Twitter运营完整流程:从0到引流获客全流程拆解(2026)
运维·安全·自动化·媒体·twitter
CHHC188010 小时前
NetCore树莓派桌面应用程序
linux·运维·服务器
迷枫71210 小时前
DM8 数据库安装实战:从零搭建达梦数据库环境(附全套工具链接)
数据库