Aaaron.-CSDN博客

原创 WebSocket + mitmproxy另类爬虫

WebSocket ，通过websocket可以实现浏览器与服务器进行双向通信，浏览器客户端可以给服务端发送数据，服务端能给浏览器客户端发送数据。我们可以利用这一点让服务端将要加密的参数发送给浏览器客户端，浏览器将接收到的参数传入目标加密函数并运行，就能得到加密结果，最后返回给服务器，实现间接的调用浏览器JS函数。关于websocket：http://www.ruanyifeng.com/blog/2017/05/websocket.htmlTornado框架的websocket服务参考：

2020-06-05 11:34:52 2478

原创 pip 安装问题系列

1.pip 安装总是出现超时失败解决办法更换下载网址这里使用豆瓣的 pip install -i https://pypi.doubanio.com/simple/ 包名 pip install -i https://pypi.doubanio.com/simple/ flask2.Windows 下：ModuleNotFoundError: No module named '...

2019-09-03 14:45:32 379

原创 'scipy.misc.imsave

module 'scipy.misc' has no attribute 'imsave'scipy.misc 是需要安装了pillow库下才拥有imsave模块，若是安装了pillow还是报错has no attribute 'imsave'，那么就是scipy 的版本是新版本，退回1.2.1版本的scipy即可...

2019-08-28 17:08:07 1454

原创 seo ua

百度“Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)”百度图片“Baiduspider-image+(+http://www.baidu.com/search/spider.htm)”百度最新UA如下：PC：Mozilla/5.0 (compatible; B...

2019-08-28 17:05:46 314

原创 HEXO 搭建个人博客

初见HexoHexo用来搭建个人blog简直是各行各业小白福音.你以为需要掌握HTML，JS，CSS以及各种后端程序吗？按”步”就”搬”就能轻松实现！名词解析Hexo：一种常用的博客框架。可以认为它是一种博客模板，高度的自定义性，只要你愿意花时间，你可以建立出各种高大上的博客来Hexo官方网站https://hexo.io/zh-cn/docs/Github：一个全世界...

2019-08-28 17:01:12 182

原创字体反爬详解

目前网页的字体多样化完全可以自定义，常见有eot，woff，ttf格式类型本次爬虫就针对以woff格式的字体而言：先看看不做措施造成的影响：http://maoyan.com/ 以猫*票房信息为例调试模式下票房数字是乱码的，在源代码中则是“&#xxxxx”的一窜字符故，不做措施直接爬取的数据是乱码的，就是调试模式中看的内容怎么做在...

2019-05-17 10:05:09 642

转载 Python多线程和多进程

1 概念梳理：1.1 线程1.1.1 什么是线程线程是操作系统能够进行运算调度的最小单位。它被包含在进程之中，是进程中的实际运作单位。一条线程指的是进程中一个单一顺序的控制流，一个进程中可以并发多个线程，每条线程并行执行不同的任务。一个线程是一个execution context（执行上下文），即一个cpu执行时所需要的一串指令。1.1.2 线程的工作方式假设你正在读一本书，没...

2019-04-10 16:50:35 146

原创 Redis安装

Windows 安装Github 下载地址：https://github.com/MicrosoftArchive/redis/tags下载 msi 安装文件安装即可redis-server.exe redis.windows.conf 启动服务，也可在windows的服务管理中启动可视化图形管理安装 redis-desktop-manager https://...

2019-03-08 09:49:50 259

原创 Hook案例

Hook案例——以某音作为案例参考：xposed模块开发步骤总结 https://blog.csdn.net/csdn_lqr/article/details/52245132魅族手机Xposed框架安装真的艰险，显示降Android版本至6.0后自带的root还是不完整，只能凑合着用了，安装Xposed Installed，安装框架在eclipse中创建安卓项目...

2019-03-08 09:48:55 614

原创 MySql—ubuntu版

安装mysql1)通过apt-get安装sudo apt-get install mysql-serversudo apt-get install mysql-clientsudo apt-get install libmysqlclient-dev卸载mysql1)删除mysql的数据文件sudo rm /var/lib/mysql/ -R2)删除mqsql的配...

2019-03-08 09:31:50 152