我已经部署了一个 Alluxio 基于的群集 HDFS 集群。当我使用alluxio原生javaapi将一些文件写入alluxio并设置writetype async\u through时,这些文件(即使只有1g)似乎没有写入hdfs,几天后一直保持to\u be\u的状态。
Alluxio
HDFS
hujrc8aj1#
我找到了答案。我发现日志“error defaultasyncpersisthandler-not all blocks of file/test/sample\u data/order\u detail\u titile\u 2.0.txt storage on the same worker”,当使用async\u through时,alluxio请求一个worker中的所有文件阻止程序。我在哪里使用缓存没有问题
1条答案
按热度按时间hujrc8aj1#
我找到了答案。我发现日志“error defaultasyncpersisthandler-not all blocks of file/test/sample\u data/order\u detail\u titile\u 2.0.txt storage on the same worker”,当使用async\u through时,alluxio请求一个worker中的所有文件阻止程序。我在哪里使用缓存没有问题