统计文件行数和文件的大小

2017-08-15  本文已影响1052人  山的那边是什么_

1.hdfs下载文件夹中多个文件

```

hadoop fs -get  /目录   目录

```

结果是输出到本地的文件夹之中

2. 多个文件合并后输出到一个文件之中

```

hadoop fs -getmerge  filePath  localPath/data.dat

```

3.统计多个文件行数

```

hadoop fs -cat  /文件* | wc -l

```

4.统计文件大小

```

hadoop fs -count /文件*

```

统计单个文件  只需要精确到文件即可

上一篇 下一篇

猜你喜欢

热点阅读