Scrapy:在调用之间保存cookie

lf3rwulv  于 2023-10-20  发布在  其他
关注(0)|答案(2)|浏览(141)

有没有一种方法可以在调用scrapy crawler之间保存cookie?目的-该网站需要登录,然后通过cookie保持会话。我宁愿重复使用会话,而不是每次都重新登录。

e3bfsja2

e3bfsja21#

请参阅有关Cookie的文档。
FAQ条目
CookiesMiddleware
或者,您可以发送带有自己管理的cookie的Request对象(您可以从Response对象的头部读取cookie)。
About Request and Response objects

s8vozzvw

s8vozzvw2#

现在(2023年)有一个开源软件包,scrapy-cookies,它可以像你想要的那样保存cookie。

相关问题