我正在尝试获取有关在运行hdfs的hbase上实施分层存储的信息。我从这个链接中了解到了hdfs上的分层存储。我也浏览了这个链接,但我仍然对执行有疑问。
在hdfs上,根据访问频率,我可以将文件从一种存储类型移动到另一种存储类型。但是由于hbase在hdfs上存储文件,我如何知道文件的访问频率?如果我直接在hdfs上移动文件,hbase和hdfs之间的Map是否会因为这个移动而受到干扰?
要在hdfs上移动数据,是需要编写自己的逻辑,还是可以进行配置,然后某个hbase实用程序将数据从一个存储移动到另一个存储?
我了解分层存储的概念,但对实施过程有疑问。
如果你能在同一个网站上分享任何信息,或者给我一个博客/文章的链接,那会很有帮助。提前谢谢。
1条答案
按热度按时间mctunoxg1#
我猜您要实现的是所谓的lambda架构。除了提供的链接外,我建议你上网搜索,有很多关于人们在实施这样的系统时所做决定的例子。