MongoDB分片集群搭建及扩容

分片集群搭建及扩容

整体架构

环境准备

  1. 3台Linux虚拟机,准备MongoDB环境,配置环境变量。
  2. 一定要版本一致(重点),当前使用 version4.4.9

配置域名解析

在3台虚拟机上执行以下命令,注意替换实际 IP 地址

java 复制代码
echo "192.168.65.97 mongo1 mongo01.com mongo02.com" >> /etc/hosts

echo "192.168.65.190 mongo2 mongo03.com mongo04.com" >> /etc/hosts

echo "192.168.65.200 mongo3 mongo05.com mongo06.com" >> /etc/hosts

准备分片目录

在各服务器上创建数据目录,我们使用 `/data`,请按自己需要修改为其他目录:

在mongo01.com / mongo03.com / mongo05.com 上执行以下命令:

java 复制代码
mkdir -p /data/shard1/db /data/shard1/log /data/config/db /data/config/log

在mongo02.com / mongo04.com / mongo06.com 上执行以下命令:

java 复制代码
mkdir -p /data/shard2/db /data/shard2/log /data/mongos/

创建第一个分片用的复制集

在mongo01.com / mongo03.com / mongo05.com 上执行以下命令:

java 复制代码
mongod --bind_ip 0.0.0.0 --replSet shard1 --dbpath /data/shard1/db \

--logpath /data/shard1/log/mongod.log --port 27010 --fork \

--shardsvr --wiredTigerCacheSizeGB 1

--shardsvr 声明这是集群的一个分片

--wiredTigerCacheSizeGB 设置内存大小

初始化第一个分片复制集

java 复制代码
# 进入mongo shell

mongo mongo01.com:27010

#shard1复制集节点初始化

rs.initiate({

    _id: "shard1",

    "members" : [

    {

        "_id": 0,

        "host" : "mongo01.com:27010"

    },

    {

        "_id": 1,

        "host" : "mongo03.com:27010"

    },

    {

        "_id": 2,

        "host" : "mongo05.com:27010"

    }

    ]

})

#查看复制集状态

rs.status()

创建 config server 复制集

在mongo01.com / mongo03.com / mongo05.com上执行以下命令:

java 复制代码
mongod --bind_ip 0.0.0.0 --replSet config --dbpath /data/config/db \

--logpath /data/config/log/mongod.log --port 27019 --fork \

--configsvr --wiredTigerCacheSizeGB 1

初始化 config server 复制集

java 复制代码
# 进入mongo shell

mongo mongo01.com:27019

#config复制集节点初始化

rs.initiate({

    _id: "config",

    "members" : [

    {

        "_id": 0,

        "host" : "mongo01.com:27019"

    },

    {

        "_id": 1,

        "host" : "mongo03.com:27019"

    },

    {

        "_id": 2,

        "host" : "mongo05.com:27019"

    }

    ]

})

搭建 mongos

在mongo01.com / mongo03.com / mongo05.com上执行以下命令:

java 复制代码
#启动mongos,指定config复制集

mongos --bind_ip 0.0.0.0 --logpath /data/mongos/mongos.log --port 27017 --fork \

--configdb config/mongo01.com:27019,mongo03.com:27019,mongo05.com:27019

mongos加入第1个分片

java 复制代码
# 连接到mongos

mongo mongo01.com:27017

#添加分片 mongos>sh.addShard("shard1/mongo01.com:27010,mongo03.com:27010,mongo05.com:27010")

#查看mongos状态

mongos>sh.status()

创建分片集合

java 复制代码
连接到mongos, 创建分片集合

mongo mongo01.com:27017

mongos>sh.status()

#为了使集合支持分片,需要先开启database的分片功能

mongos>sh.enableSharding("company")

# 执行shardCollection命令,对集合执行分片初始化

mongos>sh.shardCollection("company.emp", {_id: 'hashed'})

mongos>sh.status()



#插入测试数据

 use company

for (var i = 0; i < 10000; i++) {

    db.emp.insert({i: i});

}

#查询数据分布

db.emp.getShardDistribution()

创建第2个分片的复制集

在mongo02.com / mongo04.com / mongo06.com上执行以下命令:

java 复制代码
mongod --bind_ip 0.0.0.0 --replSet shard2 --dbpath /data/shard2/db \

--logpath /data/shard2/log/mongod.log --port 27011 --fork \

--shardsvr --wiredTigerCacheSizeGB 1

初始化第二个分片的复制集

java 复制代码
# 进入mongo shell

mongo mongo06.com:27011

#shard2复制集节点初始化

rs.initiate({

    _id: "shard2",

    "members" : [

    {

        "_id": 0,

        "host" : "mongo06.com:27011"

    },

    {

        "_id": 1,

        "host" : "mongo02.com:27011"

    },

    {

        "_id": 2,

        "host" : "mongo04.com:27011"

    }

    ]

})

#查看复制集状态

rs.status()

mongos加入第2个分片

java 复制代码
# 连接到mongos

mongo mongo01.com:27017

#添加分片 mongos>sh.addShard("shard2/mongo02.com:27011,mongo04.com:27011,mongo06.com:27011")

#查看mongos状态

mongos>sh.status()
相关推荐
剩下了什么3 小时前
MySQL JSON_SET() 函数
数据库·mysql·json
山峰哥4 小时前
数据库工程与SQL调优——从索引策略到查询优化的深度实践
数据库·sql·性能优化·编辑器
较劲男子汉4 小时前
CANN Runtime零拷贝传输技术源码实战 彻底打通Host与Device的数据传输壁垒
运维·服务器·数据库·cann
java搬砖工-苤-初心不变4 小时前
MySQL 主从复制配置完全指南:从原理到实践
数据库·mysql
山岚的运维笔记6 小时前
SQL Server笔记 -- 第18章:Views
数据库·笔记·sql·microsoft·sqlserver
roman_日积跬步-终至千里7 小时前
【LangGraph4j】LangGraph4j 核心概念与图编排原理
java·服务器·数据库
汇智信科7 小时前
打破信息孤岛,重构企业效率:汇智信科企业信息系统一体化运营平台
数据库·重构
野犬寒鸦7 小时前
从零起步学习并发编程 || 第六章:ReentrantLock与synchronized 的辨析及运用
java·服务器·数据库·后端·学习·算法
晚霞的不甘8 小时前
揭秘 CANN 内存管理:如何让大模型在小设备上“轻装上阵”?
前端·数据库·经验分享·flutter·3d
市场部需要一个软件开发岗位9 小时前
JAVA开发常见安全问题:纵向越权
java·数据库·安全