实时数仓flick+clickhouse启动命令

FlinkCDC环境部署

1、启动zookeeper

zk.sh start

2、启动DFS,Hadoop集群

start-dfs.sh

3、启动yarn

start-yarn.sh

4、启动kafka(如果需要在启用)

启动Kafka集群

bin/kafka-server-start.sh -daemon config/server.properties

查看Kafka topic 列表

bin/kafka-topics.sh --bootstrap-server localhost:9092 --list

创建Kafka ods层topic 副本

bin/kafka-topics.sh --zookeeper localhost:2181 --create --topic ods_cars_log --replication-factor 1 --partitions 1

bin/kafka-topics.sh --zookeeper localhost:2181 --create --topic ods_entrance_guard_log --replication-factor 1 --partitions 1

删除Kafka ods层topic

bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic ods_cars_log

bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic ods_entrance_guard_lo

5、启动Flink SQL-client服务

(1)#启动flink yarn-session

bin/yarn-session.sh -s 1 -jm 1024 -tm 1024

#关闭yarn-session命令

bin/yarn application -kill application_1659752641091_0003

(2)#启动flink sql

bin/sql-client.sh -s yarn-session

(3)#设置checkpoint配置

SET 'execution.checkpointing.interval' = '10s';

SET 'parallelism.default' = '3';

flink启动之前需要:

#启动HDFS

start-dfs.sh

#启动集群

start-cluster.sh

#启动历史服务器

historyserver.sh start

启动sql-client:bin/sql-client.sh embedded

CH的命令

1、基于默认配置启动ClickHouse

service clickhouse-server start

2、查看ClickHouse启动进程

ps -ef | grep clickhouse

3、重新启动

systemctl restart clickhouse-server

4、#客户端连接ClickHouse

clickhouse-client

5、#查询数据库

show databases;

用户名:default

密码:123456

相关推荐
2401_88842309几秒前
网络编程-TCP的并发服务器构建
服务器·网络·tcp/ip
mCell4 小时前
Docker 进阶教程
运维·docker·容器
mCell4 小时前
Docker 入门教程
运维·docker·操作系统
祈祷苍天赐我java之术5 小时前
Linux 进阶之性能调优,文件管理,网络安全
java·linux·运维
武子康5 小时前
Java-109 深入浅出 MySQL MHA主从故障切换机制详解 高可用终极方案
java·数据库·后端·mysql·性能优化·架构·系统架构
王火火(DDoS CC防护)6 小时前
服务器网络带宽不足要怎么处理?
运维·服务器
潇凝子潇6 小时前
获取服务器指标的信息
linux·运维·服务器
FreeBuf_6 小时前
Chrome高危零日漏洞PoC公开,已被用于野外攻击
linux·运维·服务器·安全·web安全
专注API从业者7 小时前
基于 Node.js 的淘宝 API 接口开发:快速构建异步数据采集服务
大数据·前端·数据库·数据挖掘·node.js
前端无冕之王7 小时前
一份兼容多端的HTML邮件模板实践与详解
前端·css·数据库·html