- 博客(2)
- 收藏
- 关注
RSS订阅原创 关于scrapy的爬虫重新请求的问题
关于scrapy的爬虫重新请求的问题解释器和库的版本问题： 解释器和库的版本 python版本：3.7 scrapy版本：1.6.0 问题： 在进行请求获取响应时，会遇到异常响应，此时如何通过中间件重新发起请求。 ...
2019-12-17 21:52:50
1439
原创 关于scrapy的并行爬虫问题
关于scrapy的并行爬虫的问题解释器和库的版本代码如下问题： 解释器和库的版本 python版本：3.7 scrapy版本：1.6.0 requests库版本：2.22.0 代码如下 使用requests import requests import random from multiprocessing.pool import ThreadPool url = "https://www.mz...
2019-12-16 20:23:26
346
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人