DustHeartQi-CSDN博客

原创 selenium对于指定元素截图

selenium验证码指定元素截图并指定截图宽和高# -*- coding: utf-8 -*-'#from __future__ import unicode_literalsimport timeimport reimport requestsfrom selenium import webdriverfrom PIL import Imageimport base64fr...

2019-03-26 18:35:51 1139

转载爬虫与反爬虫之间的战争

编者：本文来自携程酒店研发部研发经理崔广宇在第三期【携程技术微分享】上的分享，以下为整理的内容概要。墙裂建议点击视频回放，“现场”围观段子手攻城狮大崔，如何高智商&高情商地完美碾压爬虫。。。

2017-08-27 20:21:25 483

原创 python使用scrapy爬取qq音乐（二）

qq音乐url分析

2017-08-21 00:18:33 5761

原创 python使用scrapy爬取qq音乐（一）

爬取qq音乐，第一步，分析请求，拿到url

2017-08-20 20:13:03 4098

原创工具------随机获取User-Agent

调用方法： - User_Agent.get_user_agent() //默认version为‘pc’ - User_Agent.get_user_agent(version=’pc’) - User_Agent.get_user_agent(version=’phone’)import randomclass User_Agent: @staticmeth

2017-08-17 15:35:43 1168

原创工具------获取最新的代理ip（66网）

爬取66代理网的代理ip使用技术： - python3 - request - xpathimport userAgentimport requestsfrom lxml import etreeclass Proxies: """ 爬取66免费代理网的代理 proDicList = Proxies.get_proxies(4) """ url = '

2017-08-17 15:29:11 1680 1

转载 django-QuerySet

querySet

2017-07-20 20:33:56 264

原创 Redis读书笔记

Redis入门指南前三章读书笔记此笔记的参照书籍为Redis入门指南，笔记只整理了前三章的内容。重点为redis的五中数据类型及其命令。数据类型字符串类型散列类型列表类型集合类型有序集合类型

2017-07-14 01:13:13 333

原创 urllib2和requests的基本使用

urllib2 和requests的基本使用不是完整的代码，仅供记忆和查询

2017-07-14 01:10:05 1150

原创关于yilia主题模块缺失问题

今天在使用github中使用主题yilia发现有模块缺失问题。 npm i hexo-generator-json-content –save 命令失败于是尝试命令：npm i hexo-generator-json-content 然后再npm i hexo-generator-json-content –save成功。也许是巧合-_-

2017-07-08 11:02:10 713

python框架爬取音乐

使用scrapy框架爬取音乐，里面有保存歌曲信息到数据库（mongodb）的代码

2017-08-20

python入门

python基础语法，python入门学习

2017-08-17

HTML5与CSS3实战指南.pdf

html5 css3

2017-06-28

Redis入门指南.pdf

redis数据库入门指南

2017-06-28

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人