我们可以用scrapy抓取linkdin/ jobs吗?我在找关于它的教程,但是没有找到?

ar5n3qh5  于 2022-11-09  发布在  其他
关注(0)|答案(1)|浏览(84)

我们可以用Scrapy抓取linkdin/ jobs吗?我在找关于它的教程,但没有找到任何教程?我也在Github上搜索过,但没有找到任何相关的库。
有人能告诉我原因吗?或者可以提供一个简单的scrapy蜘蛛,这样我就可以使用和修改它了。但是只使用SCRAPY

vatpfxk5

vatpfxk51#

你不能使用scrapy抓取linkedin/ jobs,因为scrapy不能渲染JavaScript,但是可以使用scrapy-seleniumRequest抓取linkedin/ jobs,因为Linkedin完全依赖于JavaScript。
selenium 屑文档为here

相关问题