问题 使用ReadPreference的Mongos路由= NEAREST


我无法诊断我的Java应用程序对MongoDB的请求没有路由到最近的副本的问题,我希望有人可以提供帮助。首先让我解释一下我的配置。

配置:

我正在生产一个Sharded ReplicaSet的MongoDB实例。它目前只有一个碎片(它还没有足够大,还需要拆分)。此单个分片由3节点副本集支持。副本集的2个节点位于我们的主数据中心。第三个节点位于我们的辅助数据中心,并且禁止成为主节点。

我们在两个数据中心同时运行我们的生产应用程序,但是我们的辅助数据中心中的实例以“只读”模式运行,并且从不将数据写入MongoDB。它仅为客户端请求读取现有数据提供服务。此配置的目的是确保如果我们的主数据中心出现故障,我们仍然可以为客户端读取流量提供服务。

我们不希望在我们的辅助数据中心浪费所有这些硬件,因此即使在愉快的时候,我们也会主动将一部分只读流量负载平衡到在辅助数据中心运行的应用程序实例。此应用程序实例配置为readPreference = NEAREST,并指向在localhost(版本2.6.7)上运行的mongos实例。 mongos实例显然配置为指向我们的3节点副本集。

来自mongos:

mongos> sh.status()
--- Sharding Status --- 
sharding version: {
"_id" : 1,
"version" : 4,
"minCompatibleVersion" : 4,
"currentVersion" : 5,
"clusterId" : ObjectId("52a8932af72e9bf3caad17b5")
}
shards:
{  "_id" : "shard1",  "host" : "shard1/failover1.com:27028,primary1.com:27028,primary2.com:27028" }
databases:
{  "_id" : "admin",  "partitioned" : false,  "primary" : "config" }
{  "_id" : "test",  "partitioned" : false,  "primary" : "shard1" }
{  "_id" : "MyApplicationData",  "partitioned" : false,  "primary" : "shard1" }

从replicaset的故障转移节点:

shard1:SECONDARY> rs.status()
{
"set" : "shard1",
"date" : ISODate("2015-09-03T13:26:18Z"),
"myState" : 2,
"syncingTo" : "primary1.com:27028",
"members" : [
{
    "_id" : 3,
    "name" : "primary1.com:27028",
    "health" : 1,
    "state" : 1,
    "stateStr" : "PRIMARY",
    "uptime" : 674841,
    "optime" : Timestamp(1441286776, 2),
    "optimeDate" : ISODate("2015-09-03T13:26:16Z"),
    "lastHeartbeat" : ISODate("2015-09-03T13:26:16Z"),
    "lastHeartbeatRecv" : ISODate("2015-09-03T13:26:18Z"),
    "pingMs" : 49,
    "electionTime" : Timestamp(1433952764, 1),
    "electionDate" : ISODate("2015-06-10T16:12:44Z")
},
{
    "_id" : 4,
    "name" : "primary2.com:27028",
    "health" : 1,
    "state" : 2,
    "stateStr" : "SECONDARY",
    "uptime" : 674846,
    "optime" : Timestamp(1441286777, 4),
    "optimeDate" : ISODate("2015-09-03T13:26:17Z"),
    "lastHeartbeat" : ISODate("2015-09-03T13:26:18Z"),
    "lastHeartbeatRecv" : ISODate("2015-09-03T13:26:18Z"),
    "pingMs" : 53,
    "syncingTo" : "primary1.com:27028"
},
{
    "_id" : 5,
    "name" : "failover1.com:27028",
    "health" : 1,
    "state" : 2,
    "stateStr" : "SECONDARY",
    "uptime" : 8629159,
    "optime" : Timestamp(1441286778, 1),
    "optimeDate" : ISODate("2015-09-03T13:26:18Z"),
    "self" : true
}
],
"ok" : 1
}


shard1:SECONDARY> rs.conf()
{
    "_id" : "shard1",
    "version" : 15,
    "members" : [
    {
        "_id" : 3,
        "host" : "primary1.com:27028",
        "tags" : {
            "dc" : "primary"
        }
    },
    {
        "_id" : 4,
        "host" : "primary2.com:27028",
        "tags" : {
            "dc" : "primary"
        }
    },
    {
        "_id" : 5,
        "host" : "failover1.com:27028",
        "priority" : 0,
        "tags" : {
            "dc" : "failover"
        }
    }
    ],
    "settings" : {
        "getLastErrorModes" : {"ACKNOWLEDGED" : {}}
    }
}

问题:

问题是,在我们的辅助数据中心中击中此mongos的请求似乎被路由到在我们的主数据中心运行的副本,而不是在辅助数据中心中运行的最近节点。这会导致大量网络延迟并导致糟糕的读取性能。

我的理解是mongos决定副本集中的哪个节点将请求路由到,并且它应该从我的java驱动程序的请求中遵守ReadPreference。是否有一个命令我可以在mongos shell中运行以查看副本集的状态,包括节点的ping时间?或者某种方式来查看传入请求的日志记录,这些请求指示了所选副本集中的节点以及为什么?有关如何诊断问题根本原因的任何建议吗?


3329
2017-09-02 21:54


起源

您究竟如何阻止第二个数据中心的服务器成为主服务器?你可以发布输出 sh.status() 和 rs.status()? - Markus W Mahlberg
您可以阻止节点成为优先级为priority = 0的节点 docs.mongodb.org/master/core/replica-set-priority-0-member/... - skelly
有几种方法可以防止节点成为主节点,只是想确保它不被隐藏。 ;)有趣的问题...... - Markus W Mahlberg


答案:


在配置读取首选项时,当ReadPreference = NEAREST时,系统不会寻找最小的网络延迟,因为如果网络连接正确,它可能会将primary视为最近的。但是,最近的读取模式与标记集合时,会选择网络延迟最低的匹配成员。即使最近也可能是主要或次要的。配置首选项时的mongos行为以及网络延迟方面的官方文档中没有明确说明。

http://docs.mongodb.org/manual/core/read-preference/#replica-set-read-preference-tag-sets

希望这可以帮助


5
2017-09-11 04:26





如果我用标志-vvvv(4x verbose)启动mongos,那么我会在日志文件中看到请求路由信息,包括有关所使用的读取首选项和请求被路由到的主机的信息。例如:

2015-09-10T17:17:28.020+0000 [conn3] dbclient_rs say 
using secondary or tagged node selection in shard1, 
read pref is { pref: "nearest", tags: [ {} ] } 
    (primary : primary1.com:27028, 
    lastTagged : failover1.com:27028)

4
2017-09-11 13:55