- 博客(11)
- 收藏
- 关注
RSS订阅转载 提高Git工具clone下载速度
改变端口号git config --global http.proxy http://127.0.0.1:1080git config --global https.proxy https://127.0.0.1:1080取消方法git config --global --unset http.proxygit config --global --unset https.proxy...
2020-02-29 11:38:04
211
原创 HTTP和HTTPS
HTTP请求流程一次http请求的基本流程是，有客户端向服务端发起一次请求（request），而服务器在接收到以后返回给客户端一个响应（response）。所以一次完整的http请求包含请求和响应两部分。提供http服务的服务器，会默认监听80端口，也就是服务器上的服务端程序监听的端口为80端口。 &nbs...
2019-04-06 12:21:12
157
原创 爬取百度新闻写入CSV文件——Python爬虫
在开始之前，我们先明确我们本次要爬什么内容：接着，我们大概会用到以下几个知识点：rerequestsxpathcsv第一步，我们先将一些变量准备好import requestsimport urllib.parseimport osfrom lxml import etreeimport randomimport csvimport reword="税"#转...
2019-02-24 19:49:50
4812
8
原创 用Python写一个酷狗爬歌系统
今天我们用Python来写一个简单的酷狗下载程序我将这个程序打包成exe文件，有兴趣的可以看下。链接：https://pan.baidu.com/s/1K2ETIL09-Xwpe4pBtojNiQ提取码：1b1o我们先上代码，看下步骤：import requestsimport jsonimport osimport urllib.parse#j为歌曲标头j=1class K...
2019-02-20 11:09:55
1925
3
原创 通过关键词爬取百度图片——Python爬虫
爬取百度图片在这里我们先列出本次爬虫的步骤（思路很重要）：1、通过requests获取网页信息2、找到图片链接在哪里3、创建文件夹，将图片下载到本地在开始之前，先讲一下百度图片翻页的一个小细节（看图）：这是下滑加载更多的翻页方式（对我们的爬虫造成了干扰）这种是传统的翻页方式（我们爬的是这种网页）那么，我们怎么把网页变成我们想要的呢？在这里教大家一个小技巧：htt...
2019-02-19 18:23:37
4003
7
原创 NumPy库的简单使用
创建数组对象NumPython提供了两种基本的对象：ndarray（下文统一称为数组）：存储单一数据类型的多维数组。ufunc（后面再介绍）：能够对数组进行处理的函数。1、数组属性数组的属性及其说明属性说明ndim返回int。表示数组的维数shape返回tuple。表示数组的尺寸，对于n行m列的矩阵，形状为(n,m)size返回int。表示数组...
2019-02-18 11:55:51
744
原创 用正则表达式爬CBO年度票房
使用正则表达式爬取票房信息还是老样子哈哈，如果对正则不是很了解的同学，在这里推荐一个学习网址： http://www.runoob.com/python3/python3-reg-expressions.html进入正文，这是我们要爬的网址： http://www.cbooo.cn/year?year=2008而这个，就是我们要爬的内容了：第一步，获取网页信息...
2019-02-17 15:08:11
472
原创 爬虫——爬取京东评价
爬京东商品的评价如果同学们对爬虫不是很了解的话，可以先看下爬虫的定义、原理。在这里我给大家推荐一篇文章：  https://www.cnblogs.com/sss4/p/7809821.html首先，我们拿一件商品的链接来作为例子（这是一个2080ti的链接，博主已经沉浸在暴富的粪坑里了）https://item.jd.com/8797490.html#crumb-w...
2019-02-16 17:42:06
8882
9
转载 Python的基本数据类型
Python的基本数据类型基本数据类型一、字符串（String）二、数字（Number）三、列表（List）四、集合（Set）五、元组（Tuple）六、字典（Dictionary）基本数据类型Python中的变量不需要声明。每个变量在使用前都必须赋值，变量赋值以后该变量才会被创建。在Python中变量就是变量，是内存地址指针，它没有类型，我们所说的"类型"是变量所指的内存中对象的类型。类似...
2019-02-16 14:31:55
122
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人