我正在测试我的设置，我需要将hdfs中的数据移动到sqldb，并且在生成数据时也需要这样做。我的意思是。。mapreduce作业完成后，它将发送activmq消息。我需要在收到使用sqoop的activmq消息后自动将其移动到sql。有人能帮我解决这个问题吗。有人能告诉我mq和sqoop是否一起工作吗。。？谢谢您。。
v9tzhpje1#
我不完全清楚这个用例，但是你可以设置一个ooizie工作流。sqoop作业只有在map reduce作业完成后才会启动。你可以使用oozie创建一个复杂的dag。oozie工作流可以从远程java客户端调用。希望这有帮助。
1条答案
按热度按时间v9tzhpje1#
我不完全清楚这个用例，但是你可以设置一个ooizie工作流。sqoop作业只有在map reduce作业完成后才会启动。你可以使用oozie创建一个复杂的dag。oozie工作流可以从远程java客户端调用。希望这有帮助。