- 博客(4)
- 收藏
- 关注
RSS订阅原创 Scrapy爬虫单元测试神器scrapy_pytest
Scrapy-PytestScrapy-Pytest，是基于pytest的方便为Scrapy框架写的爬虫设计的单元测试工具。其主要基于Scrapy的HTTPCache功能缓存的Request和Response数据，通过HTTP缓存，生产对应的Request和Response对象，可以不重新依赖于网络进行对Scrapy爬虫的测试，目前可以支持自动生产Scrapy爬虫的各个解析函数（内置pars...
2019-06-18 23:38:32
1215
原创 使用Charles和小米手机MIX3进行手机HTTPS抓包
环境准备电脑安装好Charles，并安装好Charles的证书，并在添加SSL ProxyHelp > SSL Proxy > Install Charles Root CertificateProxy > SSL Proxy Settings , 添加 *:443， 即抓取所有HTTPS的包手机安装Chrome浏览器，切勿使用小米自带的浏览器，很坑的环境配置...
2019-06-07 11:22:20
3926
5
原创 使用kubeadm极速搭建Kubernetes集群
前言最近在学习Kubernetes的使用，但其集群搭建颇为复杂，虽然网上有许多搭建的教程，但不是版本久远，相关资源找不到了，便是及其的复杂，对基本的基础设施环境也是一笔带过，在跟随步骤的时候总是出现写莫名其妙的问题。在参考了网上众多教程和自己的实践之后，整理了自己的一套方案，适用于学习使用。Kubernetes部署方案至少三种，使用minikube搭建单机的集群，这个方法可以很快的体验Kube...
2019-05-26 21:01:08
433
原创 Dockerfile - Docker In Practice
在Docker中，创建镜像有4中标准方法docker的手工命令，docker commit 一个容易创建Dockerfile，这次的主题Dockerfile及配置管理工具，与Dockerfile相同，但是将构建的控制权交给配置管理工具在空白的镜像导入tar文件Dockerfile常用命令FROM - 定义基础镜像MAINTAINER - 声明维护人员（可以偷懒不写）RUN - ...
2019-05-18 12:51:27
179
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人