Go channel 数据聚合

一个数据聚合模块的工作协程将多个数据流合为一个数据流(就是指有多个源 channel 输入、一个目的 channel 输出的情况)。

下面这个函数将任意数量的数据流合为一个。

e.g.

通过每个 goroutine 处理一个 channel 的方式来实现。

go 复制代码
func Aggregator(chs ...<-chan any) <-chan any {
 out := make(chan any)
 var wg sync.WaitGroup
 for _, ch := range chs {
  wg.Add(1)
  ch := ch
  go func() {
   defer wg.Done()
   for v := range ch {
    out <- v
   }
  }()
 }
 go func() {
  wg.Wait()
  close(out)
 }()
 return out
}

e.g.

通过反射的方式来实现,主要就是构造出 SelectCase slice,然后传递给 reflect.Select 语句。

go 复制代码
func AggregatorReflect(chs ...<-chan any) <-chan any {
 out := make(chan any)
 go func() {
  defer close(out)
  // 构造 SelectCase slice
  var cases []reflect.SelectCase
  for _, ch := range chs {
   cases = append(cases, reflect.SelectCase{
    Dir:  reflect.SelectRecv,
    Chan: reflect.ValueOf(ch),
   })
  }
  // 循环,从 cases 中选择一个可用的
  for len(cases) > 0 {
   i, v, ok := reflect.Select(cases)
   if !ok { // 此通道关闭并且它的缓冲队列中为空
    cases = append(cases[:i], cases[i+1:]...)
    continue
   }
   out <- v.Interface()
  }
 }()
 return out
}
相关推荐
HuanYu10 分钟前
JDK实现动态代理
后端
袋鱼不重20 分钟前
解决 Web 端图片预览与下载颜色不一致的一种工程方案
前端·后端
lizhongxuan20 分钟前
Agent 的 Code-driven Assembly
后端
稀土熊猫君44 分钟前
一个人能做出什么开源项目?
vue.js·后端·开源
lizhongxuan1 小时前
Agent Runtime 中的 Code-driven Assembly
后端
货拉拉技术1 小时前
资损下降 99.96% 的背后: AI 资损防控平台实战
后端
用户8358086187911 小时前
撮合引擎 OrderBook 的 100ns 之路:无锁 RingBuffer + 伪共享消除,Go 1.22 下单 op 11ns
后端
用户881863001361 小时前
用Node.js写一个简单的API请求日志中间件
后端