Go 雪花算法生成唯一ID(Snowflake)&分布式

在使用 Go 语言实现的雪花算法(Snowflake)时,每个分布式系统中的节点通常都会有一个独立的 Node 实例。这个 Node 实例会根据节点的配置生成唯一的ID。

以下是几个关键点:

  1. 节点唯一性:每个节点(或服务实例)都应该有一个唯一的工作节点ID(worker ID)。这是雪花算法保证全局唯一性的关键。

  2. 独立 Node 实例 :在实际部署中,每个节点应该创建自己的 Node 实例,并为其分配一个唯一的工作节点ID。

  3. 不要共享 Node 实例 :尽管雪花算法是线程安全的,可以在同一节点内被多个 Goroutine 安全地调用,但不同节点之间不应该共享同一个 Node 实例。

  4. 配置工作节点ID :在创建 Node 实例时,你需要为每个节点配置一个不同的工作节点ID。这个ID通常在节点启动时配置,并在节点的整个生命周期内保持不变。

Go 复制代码
package main

import (
	"fmt"
	"github.com/bwmarrin/snowflake"
	"sync"
)

func main() {
	// 假设有5个服务实例,每个实例有一个唯一的节点ID
	nodeIDs := []int64{1, 2, 3, 4, 5}
	var wg sync.WaitGroup

	// 并发生成ID的函数
	generateIDs := func(nodeID int64) {
		defer wg.Done()
		node, err := snowflake.NewNode(nodeID)
		if err != nil {
			fmt.Printf("创建ID为的节点时出错%d: %v\n", nodeID, err)
			return
		}

		for i := 0; i < 200; i++ { // 每个节点生成10个ID
			id := node.Generate().Int64()
			fmt.Println(id)
			// 模拟工作负载
			//time.Sleep(10 * time.Millisecond)
		}
	}

	// 为每个服务实例创建一个Goroutine
	for _, nodeID := range nodeIDs {
		wg.Add(1)
		go generateIDs(nodeID)
	}

	// 等待所有Goroutine完成
	wg.Wait()
}
Go 复制代码
package main

import (
	"fmt"
	"sync"
	"time"

	"github.com/bwmarrin/snowflake"
)

func main() {
	var wg sync.WaitGroup

	// 模拟多个节点
	nodes := []int64{1, 2, 3, 4, 5} // 节点ID
	numIDs := 200                   // 每个节点生成的ID数量

	// 启动多个goroutines模拟多个节点
	for _, nodeID := range nodes {
		wg.Add(1)
		go func(nid int64) {
			defer wg.Done()
			node, err := snowflake.NewNode(nid)
			if err != nil {
				fmt.Println("创建节点时出错:", err)
				return
			}

			for i := 0; i < numIDs; i++ {
				id := node.Generate().Int64()
				fmt.Println(id) // 模拟工作负载
				time.Sleep(1 * time.Millisecond)
			}
		}(nodeID)
	}

	// 等待所有goroutines完成
	wg.Wait()
}
Go 复制代码
package main

import (
	"fmt"
	"github.com/bwmarrin/snowflake"
	"log"
	"sync"
)

func GenerateSnowflakeID(wg *sync.WaitGroup, i int) {
	defer wg.Done()
	// 需要设置节点的机器ID
	node, err := snowflake.NewNode(int64(i))
	if err != nil {
		log.Fatal(err)
	}
	for i := 0; i < 100; i++ {
		fmt.Println(node.Generate().Int64())
	}

}
func main() {
	var wg sync.WaitGroup
	for i := 0; i < 20; i++ {
		wg.Add(1)
		go GenerateSnowflakeID(&wg, i)
	}
	wg.Wait()
}

注意事项

  • 确保每个服务实例的节点ID是唯一的,不要重复。
  • 雪花算法的Node实例是线程安全的,所以你可以在同一实例中并发地生成ID,而不必担心线程安全问题。
  • 在实际部署中,节点ID通常会通过配置文件、环境变量或配置管理系统来分配和获取
相关推荐
starzy19906 小时前
深入理解Scala隐式函数:自动类型转换
开发语言·后端·scala
布莱克6057 小时前
Swift 循环与控制转移详解:从 for-in 到标签跳转
开发语言·ssh·swift·循环
敲上瘾8 小时前
Qt核心机制:信号与槽详解
开发语言·c++·qt·ui·qt6.3
联犀8 小时前
ai时代复杂项目的golang项目如何更好的与ai共舞:monorepo+gozero
开发语言·人工智能·golang
stark张宇9 小时前
分布式事务方案设计与选型思考:2PC、TCC
分布式·架构
codeejun10 小时前
每日一Go·MySQL-15、慢查询日志实战分析(从 0 到 1 实战排查慢 SQL)
sql·mysql·golang
lcj251111 小时前
[C++] C++11
开发语言·c++·笔记
Evand J12 小时前
【MATLAB例程】基于IMM-CKF的AOA+测距融合的二维移动目标跟踪定位
开发语言·matlab·目标跟踪
JianZhen✓13 小时前
IM 聊天列表为什么总“消息乱跳“:有序插入、时间轴派生、本地截断、已读回执
开发语言·前端·php
FungLeo14 小时前
FengCMS · PHP+MySQL 升级实录· 代码审计怎么闭环:REVIEW到 CLOSURE 四件套,12 个域90 篇修复文档跟到底
开发语言·mysql·php·代码审计·fengcms