etl学习

慕容尘轩5 个月前
etl学习·kettle深入浅出·kettle http post·kettle http post body
kettle从入门到精通 第七十一课 ETL之kettle 再谈http post,轻松掌握body中传递json参数场景:kettle中http post步骤如何发送http请求且传递body参数?解决方案:http post步骤中直接设置Request entity field字段即可。
慕容尘轩5 个月前
etl学习·kettle深入浅出·kettle数据校验·kettle数据清洗·kettle异常处理·kettle脏数据处理
kettle从入门到精通 第七十课 ETL之kettle kettle数据校验,脏数据清洗轻松拿捏场景:输入在指定的错误(错误应涵盖数据类型不匹配的情况)行数内,trans不报错,但通过错误处理步骤捕捉,并记入文件,整个数据管线正常完成直至处理完最后一个输入行。
慕容尘轩5 个月前
etl学习·kettle深入浅出·kettle实时同步·kettle cdc·kettle cdc mysql
kettle从入门到精通 第六十九课 ETL之kettle kettle cdc mysql,轻松实现实时增量同步1、之前kettle cdc mysql的时候使用的方案是canal+kafka+kettle,今天我们一起学习下使用kettle的插件Debezium直接cdc mysql。
慕容尘轩5 个月前
kettle·etl学习·kettle深入浅出·kettle阻塞
kettle从入门到精通 第六十七课 ETL之kettle 再谈kettle阻塞,阻塞多个分支的多个步骤场景:ETL沟通交流群内有小伙伴反馈,如何多个分支处理完毕之后记录下同步结果呢?或者是调用后续步骤、存储过程、三方接口等。
慕容尘轩5 个月前
etl学习·kettle深入浅出·kettle阻塞
kettle从入门到精通 第六十六课 ETL之kettle kettle阻塞教程,轻松获取最后一行数据,so easy场景:ETL沟通交流群内有小伙伴反馈,如何在同步一批数据完成之后记录下同步结果呢?或者是调用后续步骤、存储过程、三方接口等。