我想将数据从hortonworks配置单元导出到cassandra有没有一种方法可以在不使用etl工具的情况下将数据从hortonworks配置单元导出到datastax cassandra?
pes8fvy91#
你可以使用sqoop。apache sqoopapache sqoop(tm)是一种设计用于在apache hadoop和结构化数据存储(如关系数据库)之间高效传输大量数据的工具。sqoop于2012年3月从孵化器成功毕业,现在是一个顶级的apache项目。互联链接
yhuiod9q2#
将apachespark与spark-cassandra连接器和savetocassandra结合使用是另一种选择,我看到的一种方法是最近推荐更多的使用sqoop。您可以使用spark作为基本的加载工具,也可以使用它对数据执行etl转换。
2条答案
按热度按时间pes8fvy91#
你可以使用sqoop。
apache sqoop
apache sqoop(tm)是一种设计用于在apache hadoop和结构化数据存储(如关系数据库)之间高效传输大量数据的工具。
sqoop于2012年3月从孵化器成功毕业,现在是一个顶级的apache项目。
互联链接
yhuiod9q2#
将apachespark与spark-cassandra连接器和savetocassandra结合使用是另一种选择,我看到的一种方法是最近推荐更多的使用sqoop。您可以使用spark作为基本的加载工具,也可以使用它对数据执行etl转换。