数据采集 案例

导入数据

vim application.properties

java -jar gmall2020-mock-db-2021-11-14.jar

//监听kafka数据

bin/kafka-console-consumer.sh --bootstrap-server master:9092 --topic BigData2403

启动efak监听

传数据

cd /opt/module/maxwell/

bin/maxwell --user='maxwell' --password='1234' --host='master' --producer=kafka --kafka.bootstrap.servers=master:9092 --kafka_topic=BigData2403

相关推荐
瀚高PG实验室10 小时前
ETL中,分区表子表未及时收集统计信息,导致sql执行耗时很长
数据库·数据仓库·sql·etl·瀚高数据库
荒川之神10 小时前
Oracle 数据仓库雪花模型设计原则(核心 + 落地 + Oracle 数据库适配)
数据库·数据仓库·oracle
荒川之神10 小时前
Oracle 数据仓库星型模型设计原则
数据库·数据仓库·oracle
AllData公司负责人2 天前
AllData数据中台通过集成开源项目Apache IOTDB Web相关项目,建设物联网数据库平台
数据仓库·物联网·时序数据库·iotdb·工业物联网·apache iotdb·物联网数据库平台
Leo.yuan2 天前
数据仓库是什么?数据仓库和BI有什么区别?
数据仓库
heimeiyingwang3 天前
【架构实战】ETL架构演进:从批处理到实时流处理
数据仓库·架构·etl
素玥3 天前
实训4 ETL构建中间层
数据仓库·etl
苛子3 天前
ETL与ELT的区别与选择:企业数据集成方案深度对比
数据仓库·etl
清水白石0083 天前
Python 日志采集到数据仓库 ETL 流程设计实战:从基础语法到生产级可靠运维
数据仓库·python·etl
2501_933329553 天前
企业舆情处置系统设计与实践:Infoseek数字公关AI中台技术解析
数据仓库·人工智能·重构·架构·数据库开发