我在寻找最好的和最有效的解决方案如何刮以下网站:
- Indeed.com
- LinkedIn职位
- 谷歌Map
- Google搜寻
我正在使用Scrapingtool Octoparse,但我对这个工具不是很满意。他们提供的云抓取经常失败,所以我总是要在本地抓取,这不是很有效率。我需要一个工具/程序/服务,可以大规模地抓取这些网站,并基于云。
有什么工具可以推荐吗?我听说过很多关于Scrapy、Beautiful Soup和其他需要Python知识的工具。我会花时间学习这些工具,但我不太确定什么是最有效的方法。
我很高兴如果这里有人能给予我一些建议:)
我是一个招聘人员,需要我的候选人的数据。我想刮尽可能多的工作平台,以收集所有的公司谁是招聘。
1条答案
按热度按时间6qqygrtg1#
你需要收获的数据不是来自LinkedIn,而是来自你的候选人,你需要把它们放在属于它们的地方,而不是放在你能最快得到它们的地方。