ΔQ-CSDN博客

原创 python 网络爬虫解析方式总结

这次主要是对 XPath、BeautifulSoup 和 re（正则表达式）三种网页解析方式进行总结。XPath表达式首先来看XPath表达式。维基百科中对XPath表达式的解释是，最常见的XPath表达式是路径表达式（XPath这一名称的另一来源）。路径表达式是从一个XML节点（当前的上下文节点）到另一个节点、或一组节点的书面步骤顺序。这里可以以一个树形结构来理解。来查看浏览器网页代码，...

2020-03-23 11:59:55 409 2

原创 python 学习笔记（三）——读写csv文件

python网络爬虫学习第三天几天没写了，但是还是在不断的学习。今天又是周五了，来记录一波。今天的内容主要是python对csv文件进行读写。导入csv包首先导入csv包import csv把下载好的数据放到本地文件夹内，方便读取。我做的是股票的相关数据文件名为 stock.csv，部分数据见下表初始代码名称最新价涨幅% 总手金...

2020-03-20 18:46:30 741

原创 python 学习笔记（二）——Beautifulsoup网络爬虫

python 网络爬虫学习第二天学习 Beautifulsoup 库，进行网络爬虫，项目：中国天气网数据挖掘。安装库首先安装好需要的库 bs4pip install bs4要点记录网页解析遇到的解析方式主要是 lxml 和 html5lib，网页不完整时，可用 html5lib 进行解析，防止出错。下面我就直接上代码bs = BeautifulSoup...

2020-03-14 17:15:48 405

原创 python 学习笔记（一）——Requests 库网络爬虫

学习 python 网络爬虫第一天本博客纯用于学习记录，无其它用途。用到的库requests 库，requests 库是 python 自带库，无需安装。 lxml 库，安装调用 pippip instal lxml案例：电影天堂# encoding: utf-8import requestsfrom lxml import etreeBASE_DO...

2020-03-13 13:39:37 308

原创 DEMATEL算法程序

DEMATEL算法程序写了一个简单对的DEMATEL算法的程序clear;clc;%% 计算直接关联矩阵w=[1,2,3,4,5,6]; %整体权值向量m=length(w);B=zeros(m); %初始化直接关联矩阵for i=1:m for j=1:m B(i,j)=w(i)/w(j); B(i,i)=0 endend%% 归...

2019-01-11 11:23:11 10397 22