hadoop nameNode 备份方法
hadoop namenode 备份 hadoop namenode
nameNode保存文件在集群中的存信息,一但nameNode挂掉,整个集群就完了,所以要做好对nameNode的备份。(恢复时,将name目录里的文件都copy到备份机器上,配制好和nameNode相同的运行环境就行了)。
1.用linux的DFS系统备份到其它机器上,修改hadoop-site.xml里的dfs.name.dir增加:
<property>
<name>dfs.name.dir</name>
<value>/home/hadoop/name/,/mnt/nn_bp/</value>
</property>
2.Secondary NameNode节点的处理。
Secondary NameNode通过bin/start-dfs.sh在conf/masters中指定的节点上启动,目录配制为:fs.checkpoint.dir
<property>
<name>fs.checkpoint.dir</name>
<value>${hadoop.tmp.dir}/dfs/namesecondary(默认配制,可以改成其它机器上的指定directory)</value>
</property>
注:以后的设置,在必须是在nameNode格式化之后才能配制,否则format不能成功。
转载请注明:数据分析 » hadoop nameNode 备份方法_hadoop培训