技术栈

combiner

开出南方的花
7 个月前
人工智能·算法·机器学习·scikit-learn·1024程序员节·combiner
机器学习与金融风控项目篇-day04-卡方分箱案例与模型的可解释性Toad 是专为工业界模型开发设计的Python工具包,特别针对评分卡的开发Toad 的功能覆盖了建模全流程,从EDA、特征工程、特征筛选到模型验证和评分卡转化
流月up
1 年前
大数据·mapreduce·combiner·预聚合
5.MapReduce之Combiner-预聚合在 MR、Spark、Flink 中,常用的减少网络传输的手段。 通常在 Reducer 端合并,shuffle 的数据量比在 Mapper 端要大,根据业务情况及数据量极大时,将大幅度降低效率;且预聚合这种方式也是有其缺点,不能改变业务最终的逻辑,否则会出现,计算结果不正确的情况。