2017年10月31日星期二

spark合并小文件

spark使用FileUtil.copyMerge来进行小文件合并:https://hadoop.apache.org/docs/r2.7.1/api/org/apache/hadoop/fs/FileUtil.html

没有评论:

发表评论