- 博客(2)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 selenium篇之性能优化
当我们使用selenium制作爬虫或自动化测试时，往往会消耗更大的资源以及多余的等待页面资源加载时间。基于我上一篇帖子的实际需求，当网页图片过多且不需要完全都将图片加载时，应该停止网页的加载进行下一步操作，这里给出三种可供参考的优化方案。设置页面的最大加载时长browser = webdriver.Chrome() # 打开浏览器browser.set_page_load_timeou...
2019-07-26 13:40:08
2922
1
原创 selenium篇之半自动发帖机
selenium篇之半自动发帖机前言需求分析主要工作0X00 论坛登录0x01 获取论坛帖子的链接并保存到本地0x02 人工浏览感兴趣的帖子并预设评论0x03 随机间隔时间提交评论0x04 最后成果展示改进方向前言selenium不用多说，是一个非常强大的用于爬虫、网页自动化测试的库。在我看来，对比于一般的基于http/https协议的爬虫来说，其优势可以分为以下两点：1.不需要了解协议的具...
2019-07-26 00:26:33
789
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人