- 博客(3)
- 收藏
- 关注
RSS订阅原创 利用多线程+requests爬取51job网站python岗位信息
首先导入相关应用的库import reimport requestsfrom multiprocessing import Queueimport threading```python编写页码处理类逻辑class Crawl_page(threading.Thread): """处理页码发送请求""" # 请求的url https://search.51job.com/list/000000,000000,0000,00,9,99,python,2,2.html #
2020-09-26 02:56:05
322
原创 Mac OS环境配置chromedriver记录
一、根据chrome版本选择对应的chrome driverselenium之 chromedriver与chrome版本映射表查看自己浏览器的版本再相对应下载二、 chromedriver环境配置将下载后的chromedriver文件解压缩放在“/usr/local/bin”目录下就可以了...
2020-06-27 23:55:53
344
1
原创 连接centos mongo数据库的错误记录与解决方法:pymongo.errors.ServerSelectionTimeoutError: IP地址:27017: timed out
1、修改mongo.conf文件，将原来bindIp:127.0.0.1 修改为0.0.0.0mongodb的配置文件中的bind_ip 默认为127.0.0.1，默认只有本机可以连接。此时，需要将bind_ip配置为0.0.0.0，表示接受任何IP的连接）步骤：1、linux命令：vim /etc/mongod.conf输入 i 进行编辑找到 bindIp:127.0.0.1 将127.0.0.1修改为0.0.0.0按esc键输入 :wq2、重启动mongo服务：service mongod
2020-06-24 18:31:01
4166
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人