为什么alluxio文件始终保持待保存状态

lb3vh1jj  于 2021-06-01  发布在  Hadoop
关注(0)|答案(1)|浏览(469)

我已经部署了一个 Alluxio 基于的群集 HDFS 集群。当我使用alluxio原生javaapi将一些文件写入alluxio并设置writetype async\u through时,这些文件(即使只有1g)似乎没有写入hdfs,几天后一直保持to\u be\u的状态。

hujrc8aj

hujrc8aj1#

我找到了答案。我发现日志“error defaultasyncpersisthandler-not all blocks of file/test/sample\u data/order\u detail\u titile\u 2.0.txt storage on the same worker”,当使用async\u through时,alluxio请求一个worker中的所有文件阻止程序。我在哪里使用缓存没有问题

相关问题