Cookie验证网站抓取规则过了几天不能用了的情况处理

0 讨 论 171 浏览量 常见问题
Cookie一般是网站验证使用的一个参数,这个参数具有一定的时效性。

也就是说创建数据源的时候你是用的cookie在一天或者一小段时间中能够正常使用。

过了一段时间就不能正常使用了。

处理方法:再一次用浏览器打开抓取网页,获取一下当前的cookie内容,替换原来的cookie内容之后再次提交即可。

建议对于这一类网站在短时间内抓取完成,长时间间隔之后的抓取会增加操作量。

Finndy Copyright©2017 | Powered by Q2A

...