有没有一种方法可以在调用scrapy crawler之间保存cookie?目的-该网站需要登录,然后通过cookie保持会话。我宁愿重复使用会话,而不是每次都重新登录。
e3bfsja21#
请参阅有关Cookie的文档。FAQ条目CookiesMiddleware或者,您可以发送带有自己管理的cookie的Request对象(您可以从Response对象的头部读取cookie)。About Request and Response objects
Request
Response
s8vozzvw2#
现在(2023年)有一个开源软件包,scrapy-cookies,它可以像你想要的那样保存cookie。
2条答案
按热度按时间e3bfsja21#
请参阅有关Cookie的文档。
FAQ条目
CookiesMiddleware
或者,您可以发送带有自己管理的cookie的
Request
对象(您可以从Response
对象的头部读取cookie)。About Request and Response objects
s8vozzvw2#
现在(2023年)有一个开源软件包,scrapy-cookies,它可以像你想要的那样保存cookie。