想用scrapy shell调试response.xpath提取的标签内容,发现response没有内容,response.status显示521,后来直接从网页进,显示内部服务器错误,貌似ip被封了。。。后来换了几个url,response.status都是521,请问该怎么修改,我看见网上有说修改cookie的,但是不知道在哪里找cookie,改哪里的文件设置??废话有点多,谢谢大神们了
1.4m articles
1.4m replys
5 comments
57.0k users