实时数仓flick+clickhouse启动命令

FlinkCDC环境部署

1、启动zookeeper

zk.sh start

2、启动DFS,Hadoop集群

start-dfs.sh

3、启动yarn

start-yarn.sh

4、启动kafka(如果需要在启用)

启动Kafka集群

bin/kafka-server-start.sh -daemon config/server.properties

查看Kafka topic 列表

bin/kafka-topics.sh --bootstrap-server localhost:9092 --list

创建Kafka ods层topic 副本

bin/kafka-topics.sh --zookeeper localhost:2181 --create --topic ods_cars_log --replication-factor 1 --partitions 1

bin/kafka-topics.sh --zookeeper localhost:2181 --create --topic ods_entrance_guard_log --replication-factor 1 --partitions 1

删除Kafka ods层topic

bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic ods_cars_log

bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic ods_entrance_guard_lo

5、启动Flink SQL-client服务

(1)#启动flink yarn-session

bin/yarn-session.sh -s 1 -jm 1024 -tm 1024

#关闭yarn-session命令

bin/yarn application -kill application_1659752641091_0003

(2)#启动flink sql

bin/sql-client.sh -s yarn-session

(3)#设置checkpoint配置

SET 'execution.checkpointing.interval' = '10s';

SET 'parallelism.default' = '3';

flink启动之前需要:

#启动HDFS

start-dfs.sh

#启动集群

start-cluster.sh

#启动历史服务器

historyserver.sh start

启动sql-client:bin/sql-client.sh embedded

CH的命令

1、基于默认配置启动ClickHouse

service clickhouse-server start

2、查看ClickHouse启动进程

ps -ef | grep clickhouse

3、重新启动

systemctl restart clickhouse-server

4、#客户端连接ClickHouse

clickhouse-client

5、#查询数据库

show databases;

用户名:default

密码:123456

相关推荐
小光学长1 小时前
基于vue框架的防疫科普网站0838x(程序+源码+数据库+调试部署+开发环境)带论文文档1万字以上,文末可获取,系统界面在最后面。
数据库
极限实验室1 小时前
使用 Docker Compose 简化 INFINI Console 与 Easysearch 环境搭建
数据库·docker·devops
飞翔的佩奇1 小时前
Java项目:基于SSM框架实现的旅游协会管理系统【ssm+B/S架构+源码+数据库+毕业论文】
java·数据库·mysql·毕业设计·ssm·旅游·jsp
GuokLiu1 小时前
250708-Debian系统安装Edge浏览器并配置最小中文输入法
运维·edge·debian
Code Warrior1 小时前
【Linux】基础开发工具(3)
linux·服务器
guygg882 小时前
ubuntu手动编译VTK9.3 Generating qmltypes file 失败
linux·运维·ubuntu
先做个垃圾出来………3 小时前
自动化一次通过率
运维·自动化
float_六七3 小时前
SQL六大核心类别全解析
数据库·sql·oracle
夕泠爱吃糖4 小时前
Linux中的静态库和动态库
linux·运维·服务器
Vic101014 小时前
Java 开发笔记:多线程查询逻辑的抽象与优化
java·服务器·笔记