- 实时数仓中,为什么没有零点漂移问题?
- 因为flink直接取的事件时间
- 用kafka是为了速度快,并且数据不丢,那为什么既用了kafkachannel,也用了kafka,而不只用kafkachannel呢?
- 因为需要削峰填谷
- 离线数仓中,为什么用两个flume,一个kafka,直接用taildirsource,kafkachannel,hdfssink不行吗?
- 不行
- kafka可以削峰填谷
- 如果用kafkachannel,那么数据写到kafka,只剩event,没有header,无法解决零点漂移问题,而多加一个flume,可以在kafkasource中添加拦截器。
离线数仓中,为什么用两个flume,一个kafka
青云游子2023-08-03 12:44
相关推荐
AI推荐率4 小时前
想让AI在选购问题中推荐品牌,应该找什么类型的服务商?浅思科技集5 小时前
工业生产运营软件如何选择?看端到端可见性、数据贯通与AI落地浅念-5 小时前
一文吃透Git:本地操作|冲突处理|远程协作|GitFlow工作流详解葫三生5 小时前
《论三生原理》神话学构想与“神话历史”理论、《古史中的神话》思路异同?国科安芯5 小时前
星链供电架构中的高集成度电源管理方案研究——基于ASP4644四通道降压稳压器在低轨卫星星座中的应用分析小王毕业啦6 小时前
2011-2024年 各地级市养老服务信息面板数据 xlsxailsa_hui7 小时前
对于医疗器械行业,鼎捷的ERP有成熟的行业解决方案和合规性支持吗?资讯综合8 小时前
500亿招聘市场悖论:AI技术能否填平行业的信任深坑百胜软件@百胜软件8 小时前
胜券AI的Skills可插拔技能包,让零售AI从“泛”到“专”汇智信科9 小时前
基于 Jmis 框架的制度与流程管控系统设计与应用|项目全生命周期管理