HDFS空间不足解决方法

您所在的位置:网站首页 nas存储容量使用满了怎么办 HDFS空间不足解决方法

HDFS空间不足解决方法

#HDFS空间不足解决方法| 来源: 网络整理| 查看: 265

1、执行sudo -u hdfs hadoop fs -du -h / 查询hdfs中各目录的占用的空间,进入占用最多的目录中(一般是日志或临时文件)

2、找到目录 /user/root/.sparkStaging 占用了大量空间,此目录下存放的是各spark历史任务依赖文件

3、执行hdfs dfs -rm -r /user/root/.sparkStaging/* 删除此目录下的文件夹

4、删除的文件会被保存到/user/root/.Trash,清空垃圾桶即可



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3