备份
namenode
上的元数据持久状态文件,将写入元数据的写入操作备份到一台远程挂在的
NFS
文件上。为了确保完全恢复,平时需要
通过一台物理机对
namenode
定期镜像,所有
nodename
的操作都在辅助机上重复,但由于重复仍是滞后于主机,所以需要配合
NFS
的元数据来完成完全备份。
./hadoop distcp hdfs://192.168.0.51:9000/hbase hdfs://120.27.44.69:9000/hbase
hdfs dfsadmin -safemode get
hadoop distcp -overwrite hdfs://xd-gw:9005/hbase hdfs://xd-ui:9000/hbase
http://zanrenpin.vicp.net:8180/view/stays/6/2014-12-23%200/2014-12-23%2022
http://120.27.44.69:8080/view/stays/6/2014-12-23%200/2014-12-23%2022
Daemon Default Port Configuration Parameter
----------------------- ------------ ----------------------------------
Namenode 50070 dfs.http.address
Datanodes 50075 dfs.datanode.http.address
Secondarynamenode 50090 dfs.secondary.http.address
Backup/Checkpoint node? 50105 dfs.backup.http.address
Jobracker 50030 mapred.job.tracker.http.address
Tasktrackers 50060 mapred.task.tracker.http.address
hdfs dfsadmin -safemode get
hadoop distcp -overwrite hdfs://xd-gw:9005/hbase hdfs://xd-ui:9000/hbase
http://zanrenpin.vicp.net:8180/view/stays/6/2014-12-23%200/2014-12-23%2022
http://120.27.44.69:8080/view/stays/6/2014-12-23%200/2014-12-23%2022
Daemon Default Port Configuration Parameter
----------------------- ------------ ----------------------------------
Namenode 50070 dfs.http.address
Datanodes 50075 dfs.datanode.http.address
Secondarynamenode 50090 dfs.secondary.http.address
Backup/Checkpoint node? 50105 dfs.backup.http.address
Jobracker 50030 mapred.job.tracker.http.address
Tasktrackers 50060 mapred.task.tracker.http.address
hadoop的端口
jobtracker 默认的端口号:50030 ,jobtracker-host:50030 ,job的管理界面 。
dfs 默认端口:50070 ,namenode-host:50070 ,dfs的管理界面
(以下转载自: http://hi.baidu.com/chemical_liang/blog/item/18ff1a3a465142e93a87cef8.html)
默认端口 设置位置 描述信息
50030 mapred.job.tracker.http.address JobTracker administrative web GUI
JOBTRACKER的HTTP服务器和端口
50070 dfs.http.address NameNode administrative web GUI
NAMENODE的HTTP服务器和端口
50010 dfs.datanode.address DataNode control port (each DataNode listens on this port and registers it with the NameNode on startup)
DATANODE控制端口,主要用于DATANODE初始化时向NAMENODE提出注册和应答请求
50020 dfs.datanode.ipc.address DataNode IPC port, used for block transfer
DATANODE的RPC服务器地址和端口
50060 mapred.task.tracker.http.address Per TaskTracker web interface
TASKTRACKER的HTTP服务器和端口
50075 dfs.datanode.http.address Per DataNode web interface
DATANODE的HTTP服务器和端口
50090 dfs.secondary.http.address Per secondary NameNode web interface
辅助DATANODE的HTTP服务器和端口
jobtracker 默认的端口号:50030 ,jobtracker-host:50030 ,job的管理界面 。
dfs 默认端口:50070 ,namenode-host:50070 ,dfs的管理界面
(以下转载自: http://hi.baidu.com/chemical_liang/blog/item/18ff1a3a465142e93a87cef8.html)
默认端口 设置位置 描述信息
50030 mapred.job.tracker.http.address JobTracker administrative web GUI
JOBTRACKER的HTTP服务器和端口
50070 dfs.http.address NameNode administrative web GUI
NAMENODE的HTTP服务器和端口
50010 dfs.datanode.address DataNode control port (each DataNode listens on this port and registers it with the NameNode on startup)
DATANODE控制端口,主要用于DATANODE初始化时向NAMENODE提出注册和应答请求
50020 dfs.datanode.ipc.address DataNode IPC port, used for block transfer
DATANODE的RPC服务器地址和端口
50060 mapred.task.tracker.http.address Per TaskTracker web interface
TASKTRACKER的HTTP服务器和端口
50075 dfs.datanode.http.address Per DataNode web interface
DATANODE的HTTP服务器和端口
50090 dfs.secondary.http.address Per secondary NameNode web interface
辅助DATANODE的HTTP服务器和端口