现在的位置: 首页 > 综合 > 正文

HDFS命令行接口

2013年04月26日 ⁄ 综合 ⁄ 共 660字 ⁄ 字号 评论关闭

 fs.default.name

 

 这个属性设定Hadoop缺省的文件系统。参数是个URI的格式。例如:hdfs://192.168.10.4:54310。

 

 NameNode进程按照这个参数启动IPC服务。IPC是Hadoop跨机器通信机制,通过IPC客户端直接调用服务器类的某个方法,屏蔽了复杂的socket通信和协议转换。

 

 对于命令行接口这个属性设定了客户端缺省连接的NameNode IPC服务。

 

 

 dfs.replication

 对于命令行接口,这个属性指定了上传文件的备份个数。

 

 

 FS Shell

 hdfs的命令行接口的属性有两种方法设置命令行接口的属性

 

 1.  在hadoop安装目录/conf/hadoop-site.xml文件里指定属性

 

 2.  hadoop fs  -D 属性=值

 

      例如   hadoop fs  -D fs.default.name=hdfs://192.168.10.4:54310 -put  localfile remotepath
 

 Shell 的命令和linux的文件操作命令很类似:

 

 $ ./hadoop fs -put localfile remotepath
 $ ./hadoop fs -get remotefile localpath
 $ ./hadoop fs -mkdir remotepath
 $ ./hadoop fs -ls remotepath
 $ ./hadoop fs -rm remotepath

 

 更多的例如cp、mv、cat的操作都已得到支持,可以运行hadoop fs得到相关帮助。

 

 

 

抱歉!评论已关闭.