向hdfs上传文件,运行程序,查看结果

eternityzzy 2020-02-29

1.建立目录 

hdfs dfs -mkdir -p /data/wc/input

2.上传文件

hdfs dfs -D dfs.blocksize=1048576 -put /setup/data.txt /data/wc/input

3.进入运行程序所在目录

cd /software/hadoop-2.7.7/share/hadoop/mapreduce

4.运行程序

hadoop jar hadoop-mapreduce-examples-2.7.7.jar wordcount /data/wc/input  /data/wc/output 

5.查看目录下的文件

hdfs dfs -ls /data/wc/output

6.查看具体文件内容

hdfs dfs -cat /data/wc/output/part-r-00000

7.下载文件

hdfs dfs -get /data/wc/output/part-r-00000 /setup

注意:输出目录“/data/wc/output ”,必须是空目录,否则会报错。

相关推荐

硅步至千里 / 0评论 2020-04-19