怎么查看hadoop的输出文件,比如运行wordcount的时候产生的output结果,我要将文件拷贝出来怎么办??
发布网友
发布时间:2022-04-28 15:02
我来回答
共2个回答
热心网友
时间:2023-09-11 12:46
看文件可以在hadoop的web接口上进行,也可以使用命令行。
web接口:
需要配置本机的hosts文件,加入集群中机器的主机名和ip信息。
访问http://masterhost:50070然后通过页面的点击查看输出的结果。
命令行:
$HADOOP_HOME/bin/hadoop fs -ls output 查看输出目录中的文件
$HADOOP_HOME/bin/hadoop fs -cat output/fileName 查看文件的内容
如果想将文件拷贝出来:
1、通过web接口页面上的download this file的链接下载。
2、使用命令,好像是
$HADOOP_HOME/bin/hadoop fs -get src localdest
或者$HADOOP_HOME/bin/hadoop fs -copyToLocal src localdest
你可以输入$HADOOP_HOME/bin/hadoop fs 看一下提示
热心网友
时间:2023-09-11 12:46
使用hadoop fs -get 1 2
命令。
1为产生output的文件;
2为要拷到的本地文件。