Nacos 我用三个节点组成nacos集群，其中有一个节点挂掉了，重启之后发现和另外两个数据不一致，就是在这个节点的web界面修改服务权重后，刷新不生效，但是其他两个生效了，日志报错ERROR [DISTRO-INIT] load snapshot Nacos:Naming:v2:ClientData from 10.111.107.10:8878 failed.com.alibaba.nacos.core.distributed.distro.exception.DistroException: [DISTRO-EXCEPTION][DISTRO] Cancel get snapshot caused by target server 10.111.107.10:8878 unhealthyat com.alibaba.nacos.naming.consistency.ephemeral.distro.v2.DistroClientTransportAgent.getDatumSnapshot(DistroClientTransportAgent.java:190)at com.alibaba.nacos.core.distributed.distro.task.load.DistroLoadDataTask.loadAllDataSnapshotFromRemote(DistroLoadDataTask.java:104)at com.alibaba.nacos.core.distributed.distro.task.load.DistroLoadDataTask.load(DistroLoadDataTask.java:87)at com.alibaba.nacos.core.distributed.distro.task.load.DistroLoadDataTask.run(DistroLoadDataTask.java:63)at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)at java.util.concurrent.FutureTask.run(FutureTask.java:266)at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.access$201(ScheduledThreadPoolExecutor.java:180)at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:293)at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)at java.lang.Thread.run(Thread.java:748) nacos-opensource | Nacos 官网
7月6日（周六）开源沙龙首个AI原生应用架构专场 | 上海站 ，欢迎报名！Know more
DOCS
NACOS CLOUD
COMMUNITY
COMMUNITY Report a doc issue Contribute community Contributors
Events News Activity Resources Blog E-book Download
case nacos

Nacos开源之夏2024，贡献社区赢取12000奖金

READ ARTICLE
case nacos

Nacos 安全使用最佳实践 - 访问控制实践

READ ARTICLE
CONTACT US
GitHub
DingDing
E-mail
BLOG
DOWNLOAD
DEMO
FAQ
EN

Nacos 我用三个节点组成nacos集群，其中有一个节点挂掉了，重启之后发现和另外两个数据不一致，就是在这个节点的web界面修改服务权重后，刷新不生效，但是其他两个生效了，日志报错ERROR [DISTRO-INIT] load snapshot Nacos:Naming:v2:ClientData from 10.111.107.10:8878 failed.com.alibaba.nacos.core.distributed.distro.exception.DistroException: [DISTRO-EXCEPTION][DISTRO] Cancel get snapshot caused by target server 10.111.107.10:8878 unhealthyat com.alibaba.nacos.naming.consistency.ephemeral.distro.v2.DistroClientTransportAgent.getDatumSnapshot(DistroClientTransportAgent.java:190)at com.alibaba.nacos.core.distributed.distro.task.load.DistroLoadDataTask.loadAllDataSnapshotFromRemote(DistroLoadDataTask.java:104)at com.alibaba.nacos.core.distributed.distro.task.load.DistroLoadDataTask.load(DistroLoadDataTask.java:87)at com.alibaba.nacos.core.distributed.distro.task.load.DistroLoadDataTask.run(DistroLoadDataTask.java:63)at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)at java.util.concurrent.FutureTask.run(FutureTask.java:266)at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.access$201(ScheduledThreadPoolExecutor.java:180)at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:293)at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)at java.lang.Thread.run(Thread.java:748) nacos-opensource

根据您提供的错误信息和已知的知识，问题分析及解决步骤如下：

问题分析：

  1. 节点重启后数据不一致：当您重启挂掉的Nacos节点后，该节点与集群中其他节点的数据不一致，特别是在修改服务权重后，该节点上的变更未能生效，而其他节点生效。这表明重启节点未能成功同步到最新的集群数据。
  2. 日志错误信息：日志中的错误信息ERROR [DISTRO-INIT] load snapshot Nacos:Naming:v2:ClientData from 10.111.107.10:8878 failed. com.alibaba.nacos.core.distributed.distro.exception.DistroException: [DISTRO-EXCEPTION][DISTRO] Cancel get snapshot caused by target server 10.111.107.10:8878 unhealthy表明，在尝试从地址10.111.107.10:8878加载快照数据时失败，原因是目标服务器被标记为不健康。

解决步骤：

  1. 检查网络连通性：首先确保重启的节点与集群中其他节点，特别是地址10.111.107.10:8878之间的网络通信是正常的。使用ping、telnet等工具验证网络连接情况。

  2. 确认目标节点健康状况：登录到目标服务器10.111.107.10，检查Nacos服务是否运行正常，包括查看Nacos的日志（如nacos-cluster.log），确认是否有异常信息，确保该节点没有健康问题。

  3. 清理并重新加载数据：如果网络无碍且目标节点健康，可能需要考虑手动干预以强制重启节点加载正确的数据。可以尝试以下操作：

    • 停止当前重启的Nacos服务。
    • 清理该节点的临时数据目录（具体路径依据您的Nacos配置确定，一般在data目录下）。
    • 重新启动Nacos服务，此时它会尝试重新从集群中的其他健康节点同步数据。

  4. 检查集群配置一致性：根据知识中的提示，确保集群中所有节点的cluster.conf和application.properties配置文件保持一致，特别关注集群配置项NACOS_SERVERS是否包含了所有节点地址。

  5. 监控日志与健康检查：在执行上述步骤后，持续监控Nacos的日志输出，特别是关注是否能成功加载快照数据和数据同步过程。同时，通过Nacos控制台检查集群状态和数据一致性。

解释：

以上步骤旨在解决网络通信问题、确保节点健康、以及强制节点重新同步数据以达到数据一致性。清理数据目录是为了避免使用了旧的或损坏的本地数据。检查和维持配置一致性是分布式系统正常运作的基础，以避免因配置不同步导致的集群问题。通过这些步骤，应能有效解决重启节点后数据不一致的问题。

答疑服务说明：

本内容经由技术专家审阅的用户问答的镜像生成，我们提供了专家智能答疑服务，在页面的右下的浮窗”专家答疑“。您也可以访问 : 全局专家答疑 。 咨询其他产品的的问题

反馈

如问答有错漏，欢迎点：差评给我们反馈。