首页 > 编程入门文章详情

HDFS空间不足解决方法

编程入门行业动态更新时间:2024-10-24 21:31:45

1、执行sudo -u hdfs hadoop fs -du -h /
查询hdfs中各目录的占用的空间，进入占用最多的目录中（一般是日志或临时文件）

2、找到目录 /user/root/.sparkStaging 占用了大量空间，此目录下存放的是各spark历史任务依赖文件

3、执行hdfs dfs -rm -r /user/root/.sparkStaging/*
删除此目录下的文件夹

4、删除的文件会被保存到/user/root/.Trash，清空垃圾桶即可

更多推荐

HDFS空间不足解决方法

本文发布于:2023-06-14 08:46:00，感谢您对本站的认可！

本文链接:https://www.elefans.com/category/jswz/34/1457921.html

版权声明:本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系，我们将在24小时内删除。

解决方法空间 HDFS

发布评论取消回复

评论列表（有 0 条评论）

热门文章