hadoop datanode 节点超时时间设置

来源:互联网 发布:梦想海贼王超进化数据 编辑:程序博客网 时间:2024/06/02 20:17

定义:datenode  与namenode 之间的通信是通过心跳的机制,当超过一定的时间则默认为datanode 为死亡

,默认的死亡的事件为:10分钟+30秒 ,可同一下配置文件配置:



datanode进程死亡或者网络故障造成datanode无法与namenode通信,namenode不会立即把该节点判定为死亡,
        要经过一段时间,这段时间暂称作超时时长。HDFS默认的超时时长为10分钟+30秒。如果定义超时时间为timeout,则超时时长的计算公式为:
timeout  = 2 * heartbeat.recheck.interval + 10 * dfs.heartbeat.interval。
而默认的heartbeat.recheck.interval 大小为5分钟,dfs.heartbeat.interval默认为3秒。
需要注意的是hdfs-site.xml 配置文件中的heartbeat.recheck.interval的单位为毫秒,
dfs.heartbeat.interval的单位为秒。所以,举个例子,如果heartbeat.recheck.interval设置为5000(毫秒),
dfs.heartbeat.interval设置为3(秒,默认),则总的超时时间为40秒。



hdfs-site.xml:

       <property>
            <name>heartbeat.recheck.interval</name>
           <value>300</value>

            <description>设置的大小</description>
       </property>
      <property>
             <name>dfs.heartbeat.interval</name>
              <value>5</value>

              <description>默认值</description>
       </property>



0 0
原创粉丝点击