如何使用hortonworks hdp ssh客户端释放未使用dfs的空间?

8dtrkrch  于 2021-05-31  发布在  Hadoop
关注(0)|答案(1)|浏览(285)

我在用hdp自学,学习大数据基础知识。今天我遇到了以下问题:hdfs磁盘使用率为91%。非dfs使用31.2 gb/41.6 gb(74.96%)。

我到底应该怎么做来释放磁盘空间?是否可以从沙盒hdp ssh客户端执行此操作?我在虚拟盒子上运行hpd。
我已经从sandbox hdp ssh客户端执行了以下命令: hdfs dfs -du -h / 但这显然是hdfs数据的使用。

12.2 M   /app-logs
1.5 G    /apps
0        /ats
860.9 K  /demo
724.4 M  /hdp
0        /livy2-recovery
0        /mapred
0        /mr-history
479.6 M  /ranger
176.6 K  /spark2-history
0        /tmp
4.0 G    /user
0        /webhdfs
kuuvgm7e

kuuvgm7e1#

就像对待其他磁盘几乎满的问题一样。
登录到沙盒。跑 du -s /*/* 查看磁盘空间正在被占用。我怀疑可能是日志文件(在 /var/log/* ).

相关问题