主页 / server / 问题 / 661214
Accepted
frlan
Asked: 2015-01-22 05:35:01 +0800 CST

Hadoop：如何为数据节点配置故障转移时间

  • 772

如果数据节点失败，我需要在我的 HDFS 集群上重新复制块。实际上，这似乎在大约 10 分钟后就已经发生了。但是，我想减少这个时间，但想知道该怎么做。

我试图设置dfs.namenode.check.stale.datanode但没有任何大的成功。那么配置选项是什么，或者我必须在这里调整哪些选项才能将其减少到 1 分钟？

hdfs-site.xml 的完整部分如下所示

<property>
    <name>dfs.namenode.check.stale.datanode</name>
    <value>true</value>
    <description>Activate stale check</description>
</property>

<property>
    <name>dfs.namenode.stale.datanode.interval</name>
    <value>10</value>
    <description>Timeout</description>
</property>
failover

1 个回答

  1. Best Answer

    根据对hadoop-user-mailing-list的讨论，似乎dfs.namenode.heartbeat.recheck-interval需要在hdfs-site.xml. 直到一个数据节点被标记为死亡的时间是从这个时间开始计算的dfs.heartbeat.interval。实际上是一个配置

    <property>
    <name>dfs.namenode.heartbeat.recheck-interval</name>
    <value>10000</value>
</property>

    导致大约 45 秒，直到节点被标记为死亡。（这适用于 Hadoop 2.6）

    • 1

相关问题