如何从Cassandra集群中删除死亡节点？

Question

1. 我在EC2上有12个节点的cassandra集群。
2. 由于某些故障，我们完全丢失了一个节点。我的意思是这台机器不再存在。
3. 因此，我创建了新的EC2实例，它具有与死节点不同的ip和相同的令牌，并且我还有该节点上的数据备份，所以它工作正常
4. 但问题是死节点ip仍然在描述集群中显示为不可访问的节点。
5. 作为该节点（EC2实例）不存在了，我不能用nodetool退役或nodetool disablegossip

我怎样才能摆脱这种不可达节点的

Answer 1

常当您要将要设置新节点的令牌的节点替换为(failure node's token) - 1并让其启动时。从1.0开始，现在有一个标志可以在启动时指定到replace a dead node：“cassandra.replace_token =”。

既然你已经添加了新的节点与同样有一个额外的步骤：

1. 移动新节点的令牌(failure node's token) - 1使用从节点组成一个nodetool move
2. 运行nodetool removetoken <failed node's token>
3. 每个节点

上运行nodetool cleanup这些基本上pre 1.0 instructions用于替换带有附加令牌的死节点移动。

Answer 2

我有同样的问题，我解决了它与removenode，它不需要您查找和更改节点令牌。

首先，得到节点UUID：

nodetool status 

DN 192.168.56.201 ?   256  13.1% 4fa4d101-d8d2-4de6-9ad7-a487e165c4ac r1 
DN 192.168.56.202 ?   256  12.6% e11d219a-0b65-461e-babc-6485343568f8 r1 
UN 192.168.2.91 156.04 KB 256  12.4% e1a33ed4-d613-47a6-8b3b-325650a2bbd4 RAC1 
UN 192.168.2.92 156.22 KB 256  13.6% 3a4a086c-36a6-4d69-8b61-864ff37d03c9 RAC1 
UN 192.168.2.93 149.6 KB 256  11.3% 20decc72-8d0a-4c3b-8804-cc8bc98fa9e8 RAC1 

正如你可以看到.201和.202死亡，在不同的网络上。如果没有适当的退役和重新调试，这些更改为.91和.92。我正在安装网络，并提出了一些错误......

二，删除.201用下面的命令：

nodetool removenode 4fa4d101-d8d2-4de6-9ad7-a487e165c4ac 

（在旧版本中，它是nodetool删除...）

但与nodetool removetoken ...一样，它会阻止...（请参阅psandord答案中的samarth评论）但是，它有副作用，它会将UUID放入要删除的节点列表中。所以接下来我们可以强制删除：

nodetool removenode force 

（在旧版本中它是nodetool删除...）

现在节点接受它告诉我，这是消除无效项命令：

RemovalStatus：删除令牌（-9136982325337481102）。等待[/192.168.2.91,/192.168.2.92]复制确认。

我们也看到它与其他两个节点通信，因此需要一点时间，但它仍然很快。

下一个nodetool status不显示.201节点。我再重复.202，现在状态很干净。

之后，你可能还需要运行一个清理在psanford答复中提到：

nodetool cleanup 

清理工作应在所有节点逐个运行，以确保变化充分考虑帐户。