- 博客(2)
- 收藏
- 关注
RSS订阅原创 基于Scrapy的网络爬虫和Sklearn的机器学习算法
本着对网络爬虫的兴趣，在闲来无事时做了一个有关网络爬虫的项目，本项目用的是Scrapy爬虫框架，同时为了有效利用这些数据，用入门的sklearn对这些数据进行预处理并训练除了一个预测模型，下面开始本项目的介绍。1、数据准备与爬虫本项目以房天下网站北京市租房信息为对象，首先确定爬取的房屋属性为：标题、出租方式、户型、建筑面积、朝向、楼层、装修程度等因素。首先我们获取要爬取内容的首页为http://z...
2018-06-03 13:50:19
1310
1
原创 Windows下scrapy安装教程
本人python小白一枚，因为毕业设计要做爬虫，所以学了一下python。想用框架来写爬虫，因此选择了scrapy框架，但是在安装过程中遇到了一些问题，现在就把自己的安装教程分享一下：1.打开Windows自带的终端，首先安装wheel这个包，命令如下：pip install wheel2.安装lxml这个包，pip install lxml3.安装Pyopensssl，pip install p...
2018-03-29 14:15:10
2125
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人