- 实时数仓中,为什么没有零点漂移问题?
- 因为flink直接取的事件时间
- 用kafka是为了速度快,并且数据不丢,那为什么既用了kafkachannel,也用了kafka,而不只用kafkachannel呢?
- 因为需要削峰填谷
- 离线数仓中,为什么用两个flume,一个kafka,直接用taildirsource,kafkachannel,hdfssink不行吗?
- 不行
- kafka可以削峰填谷
- 如果用kafkachannel,那么数据写到kafka,只剩event,没有header,无法解决零点漂移问题,而多加一个flume,可以在kafkasource中添加拦截器。
离线数仓中,为什么用两个flume,一个kafka
青云游子2023-08-03 12:44
相关推荐
小淮AI2 小时前
国际教育课程的本土化探索:以枫叶教育三十年为观察样本龙兵AI增长破局圈.赵老师讲成交3 小时前
只有把过程管好,结果才会出来。qq407855604 小时前
面向智能补货需求的进销存系统盘点CHENGQUAN_kenan4 小时前
佛山亚马逊卖家出口退税合规指南|9610免税、一般贸易退税、无票采购、申报误区全覆盖Web3_Daisy4 小时前
从流动性到执行:如何降低 MEV 对 Web3 市场日常通勤穿搭4 小时前
电商 AI 作图用哪个最方便?新手商家 AI 出图工具对比小淮AI5 小时前
一个国际家庭在武汉的择校笔记:两份外籍人员子女学校的课程方案比较一只鹿鹿鹿5 小时前
大数据中心安全系统解决方案(Word文件)qq_33776320196 小时前
仿博易大师内外盘国际期货软件源码全套开发:期货交易系统架构设计与核心技术解析盛世宏博智慧档案6 小时前
POE温湿度传感器常见故障排查与优化解决原理