我们正在开发用于分布式图计算的hadoop map reduce。图形表示为邻接列表并存储在文件中。这些文件存储在hdfs上。
任务是读取这些文件，并由集群的不同节点创建一个内存中的图，以便可以对该“内存中的图”执行任意数量的查询。查询的例子可以是搜索邻居、遍历等。
在节点中创建和存储这些内存图时，我们面临一个问题。有谁能帮我们做到这一点吗？
编辑：为了更清楚地了解需求，需要构造内存中的图形，以减少由于map reduce期间执行的i/o操作而导致的延迟。这些文件应该在内存中只读取一次，并保持原封不动，以便可以对其进行进一步的计算，而不是从辅助存储器中读取。