MongoDB分片部署(windows)

【超详细】手把手教你搭建MongoDB集群搭建 ​ 为解决mongodb在replica set每个从节点上面的数据库均是对数据库的全量拷贝,从节点压力在高并发大数据量的场景下存在很大挑战,同时考虑到后期mongodb集群的在数据压力巨大时的扩展性,应对海量数据引出了分片机制。​ 分片是将数据库进行拆分,将其分散在不同的机器上的过程,无需功能强大的服务器就可以存储更多的数据,处理更大的负载,在总数据中,将集合切成小块,将这些块分散到若干片中,每个片只负载总数据的一部分,通过一个知道数据与分片对应关系的组件mongos的路由进程进行操作。​ 数据库 阅读详情

操作系统: win11

MongoDB:4.4.24

伪分布式

分片架构

从图中可以看出,分片集群中主要由三个部分组成,即分片服务器( Shard )、路由服务器
( Mongos )以及配置服务器( Config Server )组成。其中,分片服务器有三个,即 Shard1 、
Shard2 、 Shard3 ;路由服务器有两个,即 Mongos1 和 Mongos2 ;配置服务器有三个,即主、副、副。
主要有如下所述三个主要组件:
Shard: 用于存储实际的数据块,实际生产环境中一个shard server 角色可由几台机器组个一个 replica set(副本集群) 承担,防止主机单点故障【3.6版本后必须配置成副本集群】
Config Server: mongod实例,存储了整个 ClusterMetadata ,其中包括 chunk 信息【3.4版本后必须部署成副本集群】。
Query Routers: 前端路由,客户端由此接入,且让整个集群看上去像单一数据库,前端应用可以透明使用。

部署分片集群

一、环境准备

每一个分片都应该安装 MongoDB 实例,需要将 bin 文件复制到每个分片中, 并且创建data 文件以及 log 文件每个shard包含两个实例,一主一从

二、启动分片服务(实列) 
启动分片集群shard1(shard11和shard12)

进入shard11bin目录启动cmd输入命令:

shardsvr 为分片声明

当命令一直保持运行状态则说明服务运行成功,此服务为一次性服务,不要关闭此窗口,最小化即可。

shard12

进入shard12bin目录启动cmd输入命令:

启动分片集群shard2(shard21和shard22)

shard21

 shard22

电脑版本比较高,所以的 cmd 需要使用管理员身份运行
启动服务均为一次性服务,关闭 cmd 即为关闭服务,所以在未完成前,请勿关闭
实例均未添加至系统环境变量,请在 bin 目录下启动
虽然窗口很多,操作不太友好,但是在 win 系统下,还是多有耐心一点, linux会简单一些

三、配置分片(shard1和shard2)
进入到shard1集群任何一个节点中

进入到shard2集群任何一个节点中

shard的两个集群配置好了

部署config server

一、环境准备

值得注意的是:在 MongoDB 3。4 版本后 config 服务必须配置为 副本集,这里设置为一主一从。

复制bin文件夹到config里再给config1和config2创建data和log

二、启动config server
启动config1

进入configbin目录中,启动cmd

--configsvr 这里我们完全可以像启动普通 mongodb 服务一样启动,不需要添加 —shardsvr 和 configsvr 参数。因为这两个参数的作用就是改变启动端口的,所以我们自行指定了端口就可以。

启动config2

不要关闭cmd窗口,最小化即可

三、配置config server集群 

进入任何一个配置服务器的节点初始化配置服务器的群集

use admin
 
config={_id:"shard1",members:[
... {_id:0,host:"localhost:4006",priority:2},
... {_id:1,host:"localhost:4007",priority:1}
... ]}
 
 
rs.initiate(config)

部署路由服务器 Route Process

创建专门的文件夹存放日志

 在进入mongoDBbin目录中启动cmd

mongos : mongos 就是一个路由服务器,它会根据管理员设置的 “ 片键 ” 将数据分摊到自己管理的

mongod 集群,数据和片的对应关系以及相应的配置信息保存在 "config 服务器 " 上。

配置分片信息
bin 目录下使用 MongoDB Shell 登录到 mongos ,添加 Shard 节点

sh.addShard("shard1/localhost:4006,localhost:4007")

sh.addShard("shard2/localhost:4008,localhost:4009")

测试分片

指定要分片的数据库,以下指令指定分片数据库为test

sh.enableSharding("test")

指定数据库里需要分片的集合和片键,片键根据实际情况选择

sh.shardCollection("test.c1",{"id":"hashed"})

上述指令指定分片集合为c1,分片字段为“id”,分片形式是哈希分片,若改成“1”则为范围分片

如果集合已经包含数据,则必须在分片集合之前创建一个支持分片键的索引,如果集合为空,则

mongodb 将创建索引。

插入10000条数据验证,数据必须包含分片键:id

查看分片状态

输入sh.status()查看分片集群状态

 两个shard都有数据分布,即说明分片成功。

MongoDB集群分片安装部署手册 按照先后顺序来处理关闭,mongos>config>shard3>shard2>shard1。启动顺序:config>shadr1>shadr2>shadr3>mongos。等十几分钟后,数据会均匀分配到其他分片。只需要在一台主机上执行。只需要在一台主机上执行。只需要在一台主机上执行。只需要在一台主机上执行。只需要在一台主机上执行。只需要在一台主机上执行。 阅读详情

相关推荐

数据库安装部署系列:Mongodb高可用集群部署步骤详解

在以上代码中,我们通过指定Mongodb副本集的主机名和端口号以及replicaSet参数来创建Mongodb的连接。综上所述,本文介绍了Mongodb高可用集群部署步骤,并给出了一些相关的源代码示例。通过部署高可用集群,我们可以确保Mongodb数据库的数据安全和稳定性,为大数据处理提供可靠的支持。进入Mongodb的安装目录,找到配置文件mongod.conf,使用文本编辑器打开并进行相应的修改。其中,hostname是待添加节点的主机名或IP地址,port是Mongodb的端口号。

CodeHeroicX的博客 488

MongoDB分布式集群架构(3种模式)

MongoDB 有三种集群部署模式,分别为主从复制(Master-Slaver)、副本集(Replica Set)和分片(Sharding)模式。 Master-Slaver 是一种主从副本的模式,目前已经不推荐使用。 Replica Set 模式取代了 Master-Slaver 模式,是一种互为主从的关系。Replica Set 将数据复制多份保存,不同服务器保存同一份数据,在出现故障时自动切换,实现故障转移,在实际生产中非常实用。 Sharding 模式适合处理大量数据,它将数据分开存储,不同服务器保

Rio520的博客 1961

MongoDB分片部署

fgOS:win10MongoDB:4.4.24从图中可以看出,分片集群中主要由三个部分组成,即分片服务器( Shard )、路由服务器 ( Mongos )以及配置服务器( Config Server )组成。其中,分片服务器有三个,即 Shard1 、 Shard2 、 Shard3 ;路由服务器有两个,即 Mongos1 和 Mongos2 ;配置服务器有三个,即主、副、副。 主要有如下所述三个主要组件: Shard: 用于存储实际的数据块,实际生产环境中一个shard server 角色可由几台机器

yusupali19的博客 1452

MongoDB分片部署Windows)教学博客

随着数据量的不断增长,单一MongoDB实例可能无法满足性能和存储的需求。此时,MongoDB分片功能就派上了用场。分片是将数据水平拆分成多个片段,并将这些片段分散到集群中的不同服务器上的过程。在Windows环境下部署MongoDB分片集群,可以充分利用Windows系统的稳定性和易用性。的配置文件,内容类似配置服务器,但需要修改端口号和dbPath等。分别连接到分片1和分片2的MongoDB实例,并初始化副本集。),下载适合Windows系统的MongoDB安装包,并安装到本地计算机。

2301_81228071的博客 2329

MongoDB分片部署(windows)

操作系统: win11伪分布式。

laolv3的博客 1748

MongoDB分片部署(Windows)

分片技术是开发人员用来提高数据存储和数据读写吞吐量常用的技术之一。简单的来说,分片主要是将数据进行划分后,将它们分别存放于不同机器上的过程。通过使用分片可以实现降低单个机器的压力和处理更大的数据负载功能。分片与副本集主要区别在于,分片是每个节点存储数据的不同片段,而副本集是每个节点存储数据的相同副本。

2303_81963017的博客 1889
上一篇: Mongodb副本部署
下一篇: Java一课一得:用实际问题探究Java抽象类
易家云
博客等级 码龄3年 136粉丝 · 15原创
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值