我应该使用hadoopmapreduce和php来连接api和写入数据库吗

l7wslrjt  于 2021-05-29  发布在  Hadoop
关注(0)|答案(0)|浏览(182)

我有一个情况,我必须做以下步骤每15秒
连接到api
下载json字符串
分析并应用一些逻辑。
插入mysql数据库。
为了加快进程,我尝试使用hadoop,使用mapping Mapper.php 是从api下载数据并发送到reducer的文件。 Reducer.php is具有为mysql解析和创建insert语句的逻辑。
这是为了节省运行时间并发现任何性能问题,但是我发现,如果使用hadoop运行而不使用hadoop,整个过程所需的时间都是相同的。
hadoop不是用来处理比普通操作系统更快的东西吗?
你有没有更好的想法,减少服务器负载和更快的处理速度?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题