数据采集 案例

导入数据

vim application.properties

java -jar gmall2020-mock-db-2021-11-14.jar

//监听kafka数据

bin/kafka-console-consumer.sh --bootstrap-server master:9092 --topic BigData2403

启动efak监听

传数据

cd /opt/module/maxwell/

bin/maxwell --user='maxwell' --password='1234' --host='master' --producer=kafka --kafka.bootstrap.servers=master:9092 --kafka_topic=BigData2403

相关推荐
ghgxm52013 小时前
EXCEL使用VBA代码实现按条件查询数据库--简单实用
开发语言·数据仓库·笔记·excel·数据库开发
喻师傅1 天前
Hive 中 NULL 值在逻辑判断中的“陷阱”(踩坑复盘)
数据仓库·hive·hadoop
涤生大数据1 天前
放弃Canal后,我们用Flink CDC实现了99.99%的数据一致性
大数据·数据仓库·flink·大数据开发·flink cdc·数据开发·实时数据
jinxinyuuuus2 天前
订阅指挥中心:数据可移植性、Schema设计与用户数据主权
数据仓库·人工智能
老徐电商数据笔记2 天前
技术复盘第四篇:Kimball维度建模在电商场景的实战应用
大数据·数据仓库·技术面试
程序员小羊!3 天前
数仓数据基线,在不借助平台下要怎么做?
大数据·数据仓库
老徐电商数据笔记3 天前
技术复盘第二篇:电商数据主题域划分企业级实践
大数据·数据库·数据仓库·零售·教育电商·技术面试
亲亲菱纱3 天前
hive数仓分层
数据仓库
老徐电商数据笔记3 天前
技术复盘第三篇:百果园新零售核心业务流程主题域划分详解
大数据·数据仓库·零售·技术面试
colorknight4 天前
数据编织-异构数据存储的自动化治理
数据仓库·人工智能·数据治理·数据湖·数据科学·数据编织·自动化治理