【大数据面试题】010 Flink有哪些算子

一步一个脚印,一天一道大数据面试题

这几天生病了,每天只睡2到4小时,吃药恢复了,就先来点简单的题

Flink 有哪些算子

这是一个挺简单的题,不过有时一问我,我还真只结结巴巴说出 mapflatmap 。那就来列举一下吧。

  • map 对流进行变形,使用函数进行变化,处理
  • flatmapmap类似,变形,使用函数进行变化,但不一样的是会把一个元素变为多个,类似于str.split(",")
  • filter 过滤出想要的元素
  • keyBy 指定某列进行分组,用于后续处理
  • reduce 需结合keyBy,对已分组的数据进行聚合处理
  • join 连接两个流
  • fromSource 获取Source,获取数据源
  • adsSink添加输出的Sink
  • print 打印数据
  • connect 两个流连接一起,跟join不一样的是不一定需要相同的key
相关推荐
swipe7 小时前
从 0 到 1 实现大文件上传:分片、秒传、断点续传、暂停、重试与服务端合并
前端·javascript·面试
SelectDB8 小时前
秒级弹性、最高降本 70%:SelectDB Serverless 如何重塑云数仓资源效率
大数据·后端·云原生
WhoAmI8 小时前
MapReduce框架原理解析一:InputFormat
大数据·hadoop
WhoAmI8 小时前
MapReduce框架原理解析三:OutputFormat
大数据·hadoop
WhoAmI8 小时前
MapReduce框架原理解析二:Shuffle
大数据·hadoop
阳火锅11 小时前
😭测试小姐姐终于不骂我了!这个提BUG神器太香了...
前端·javascript·面试
林希_Rachel_傻希希13 小时前
js里面的proxy理解。以及vue3响应式数据设计底层
前端·javascript·面试
用户15630681035117 小时前
Day01 | 什么是Agent?
面试
写代码的皮筏艇17 小时前
React中的forwardRef
前端·react.js·面试
大大大大晴天1 天前
Hudi技术内幕:Key Generation原理与实践
大数据