有没有办法修复hdfs的随机因子的种子

roejwanj  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(305)

我正在用hadoop-0.22在hdfs上做一些实验。另一方面,为了使我的实验具有可重复性,我需要修复一些随机因子的hdfs种子。具体来说,每次我重新格式化文件系统并导入同一组数据时,我都希望数据块被分配到与上一个实验相同的datanode,并且具有相同的名称。我不知道有人做过这件事。感谢您的回复。

6za6bjd0

6za6bjd01#

您的hadoop版本支持一个可插入的块放置策略,您可以根据需要提供更静态或非随机的块放置策略。更多的技术细节,以及自那时以来该接口的相关发展,请参见hdfs-385。

相关问题