我正在使用scrapy获得https://arcteryx.com/de/de/c/mens/new-arrivals?intcmp=home_t1_c_mens_new-arrivals的产品。然而，当我看页面源没有产品出现（隐藏的JavaScript？？）.因此，自然不能得到任何他们对scrapy壳与response.css('div[class^="LazyProductTile__Wrap"]')
如何绕过它并获取产品列表及其详细信息？这和lazy loading有关系吗？
我正在使用scrapy获得https://arcteryx.com/de/de/c/mens/new-arrivals?intcmp=home_t1_c_mens_new-arrivals的产品。然而，当我看页面源没有产品出现（隐藏的JavaScript？？）.因此，自然不能得到任何他们对scrapy壳与response.css('div[class^="LazyProductTile__Wrap"]')
如何绕过它并获取产品列表及其详细信息？这和lazy loading有关系吗？
1条答案
按热度按时间mw3dktmi1#
我最终使用了Scrapy Spash，它允许获取内容。