- 博客(68)
- 收藏
- 关注
RSS订阅原创 python3.8 安装pyqt5 报错
直接使用pip install PyQt5 -i https://mirrors.aliyun.com/pypi/simple来安装报错如下后来各种补c1文件，科学上网，到官网找wheel没找到3.8版本的。最终，通过指定低版本解决问题
2021-12-23 18:16:35
1407
原创 python 安装包报错Microsoft Visual C++ 14. is required
使用pip install的时候遇到 *** is not a supported wheel on this platform 问题的解决今天在windows系统下安装pymssql的时候遇到了以下问题：在这里插入图片描述一脸懵。。。。找了一圈发现居然是名字的问题。怎么改呢，往下看。1、首先通过pip检查工具检查你电脑的接受安装的标签：这个地方需要根据你的电脑使用命令：AMD64pythonimport pip._internalprint(pip._internal.pep4
2021-09-23 19:34:49
257
原创 Navicat 意外关闭 查询语句找回
1.执行过的sql，可以在历史日志找到2.有保存过的 ，可以找回，其他的暂时没找到办法保存的地址是C:\Users\Administrator\Documents\Navicat\MySQL\servers\localhost\cme 参考文档 :https://blog.csdn.net/MYians/article/details/106951210...
2020-08-17 14:10:46
9505
1
原创 fiddler 配置半天不生效，该安装的证书也没漏
就是多次重复之后，不知道什么原因就配置好了需要最后的日期大于今天makecert.exe -r -ss my -n "CN=DO_NOT_TRUST_FiddlerRoot, O=DO_NOT_TRUST, OU=Created by http://www.fiddler2.com" -sky signature -eku 1.3.6.1.5.5.7.3.1 -h 1 -cy authority -a sha1 -m 120 -b 09/11/2021...
2020-08-05 10:12:36
512
原创 mysql提示Can‘t connect to MySQL server on localhost (10061)解决方法
参考 ： https://blog.csdn.net/m0_37987151/article/details/84316008打开服务的时候，如果有mysql80，等类似的，需要先remove，然后 mysql --install ，就只剩下mysql服务，就可以连接了
2020-07-31 09:47:47
136
转载 【mysql】You must reset your password using ALTER USER statement before executing this statement报错处理
转载于 ：https://blog.csdn.net/muziljx/article/details/81541896解决方式如下：MySQL版本5.7.6版本以前用户可以使用如下命令：mysql> SET PASSWORD = PASSWORD('Xiaoming250'); MySQL版本5.7.6版本开始的用户可以使用如下命令：mysql> ALTER USER USER() IDENTIFIED BY 'Xiaoming250';...
2020-07-31 09:46:10
77
原创 peewee 中没有TimestampField 需要自己定义
使用peewee创建mysql表时 发现的如图，我定义的是 TimestampField 类型，但是给我创建的bigint类型查看文档后 发现定义的确实是bigint然后查看bigint只要修改field_type 就可以定义类型了，那么 ，在自己的文件里，重新定义一下然后删除原表 ，重新创建表 去查看mysql，发现格式已经改回timestamp...
2020-07-23 11:58:24
442
转载 mysql 8.0 使用navicate失败 Client does not support authentication protocol requested by server
来自 ：https://blog.csdn.net/u013700358/article/details/80306560使用workbench 连接没出错，使用navicate就报错，解决方案
2020-07-06 11:26:29
127
原创 mysql 联合唯一索引和null
举个例子 表a中，b，c为联合索引，但是下表这种状态是存在的，而且还可以继续插入1,null 这种数据index,b,c1,1,null2,1,null
2020-06-19 11:21:33
1769
1
原创 xpath 解析后和原网页结构不一致
一下为网页内容， 具体url为http://travel.qunar.com/travelbook/list/23-shanxi-296903/hot_heat/2.htm解析出错的地方是<a href="/youji/6630500">中原礼佛 <span class="colOrange">山西</span>寻神——重走古建</a><p class="icon_r ganhuo"></p></h2>p节点在
2020-05-29 15:44:57
12526
原创 json str 相互转化
str 转json 时，会把“ 转' ，False 转false True 转 true ，所以json转str时，把相应的转回来就好了
2020-05-14 14:29:02
762
转载 xpath 少见常用 兄弟节点 父子节点
<div> <a id="1" href="www.baidu.com">我是第1个a标签</a> <p>我是p标签</p> <a id="2" href="www.baidu.com">我是第2个a标签</a> <a id="3" href="www.baidu.com">我是第3个a标签</a> <a i...
2020-05-13 10:48:10
568
原创 pd.read_json 匪夷所思的替换
先上问题j_index='{"0":{"a":1,"b":2},"1s":{"a":1,"b":2}}'j_index3="{'0':{'a':1,'b':2},'1':{'a':1,'b':2}}"意思差不多就是j_index 和j_index3 是不同的，一定要区分' 和"下面是转载别人记录的read_json 常用用法'records': list like[{column->value},...,{column->value}]...
2020-05-13 10:10:22
1975
原创 超简单app爬虫
爬取（食品招商网）app www.spzs.com 里面的代理信息，web上无法显示，只能下载app爬取流程：1.电脑和手机连接同一个wifi，设置fiddler端口8888，设置手机wifi为手动连接，ip地址同电脑，端口同fiddler2.手机浏览器访问 ip:端口，下载fiddler证书（我刚刚连接的时候可能是操作太快，网络无法访问，下次记得重启一下fiddler或者等待一会）...
2020-05-04 19:33:35
5824
原创 Redirecting (meta refresh) scarapy 重定向
https://www.buyelec.net写京北数据爬取的时候遇到的问题，由于反爬，使用了https://center.abuyun.com/#/cloud/http-proxy/tunnel/lists 阿布云的代理，然后爬不了6页就会出现上面的错误，而且还找不到原因，各种方法都尝试了HTTP_RETRY_CODES = [404, 303, 304, 301,302]RE...
2020-04-08 20:13:51
1065
原创 pyinstaller 报错 AttributeError: 'str' object has no attribute 'decode'
之前用pyinstaller时都没碰上这个问题，今天不知道什么原因就突然报这个错即使我拿之前生成过的py文件，也时同样报错解决方法：上图已经写的很清楚了，D:\anaconda\Lib\site-packages\PyInstaller\compat 的427行报错把427行的 out = out.decode(encoding)改为 out = out ，然后问题就...
2020-01-06 13:12:54
3841
2
转载 fiddler抓包firefox
在学app抓取数据，又看到fiddler，发现无法抓包Firefox抓谷歌浏览器比较简单，无需配置转载自：https://blog.csdn.net/jimmyandrushking/article/details/80819103方法一:1.打开fiddler，选着工具面板中的tools--->options--->HTTPS，勾选菜单中的选项。2...
2019-08-12 16:13:32
425
转载 使用 Vagrant 打造跨平台开发环境
https://segmentfault.com/a/1190000000264347https://blog.csdn.net/ifeng6/article/details/75071800
2019-07-04 16:13:56
105
转载 Ubuntu 忘记开机密码的解决方法
https://blog.csdn.net/horsee/article/details/81149567https://blog.csdn.net/jacke121/article/details/80456046https://blog.csdn.net/zhuifeng_tjy163163/article/details/78401162
2019-07-04 14:43:39
736
转载 《Learning Scrapy》（中文版）
序言第1章 Scrapy介绍第2章 理解HTML和XPath第3章 爬虫基础第4章 从Scrapy到移动应用第5章 快速构建爬虫第6章 Scrapinghub部署第7章 配置和管理第8章 Scrapy编程第9章 使用Pipeline第10章 理解Scrapy的性能第11章（完） Scrapyd分布式抓取和实时分析作者：SeanCheney链接：https://www.jianshu.co...
2019-07-03 17:09:36
527
转载 scarpy 反爬之改ip改useragent
转载自https://www.cnblogs.com/rwxwsblog/p/4575894.html如何让你的scrapy爬虫不再被ban 前面用scrapy编写爬虫抓取了自己博客的内容并保存成json格式的数据（scrapy爬虫成长日记之创建工程-抽取数据-保存为json格式的数据）和写入数据库（scrapy爬虫成长日记之将抓取内容写入mysql数据库）。然而，这个爬虫的功能还是过...
2019-06-06 16:58:07
185
转载 基于python中jieba包的中文分词中详细使用
为了教别人jieba库的使用，顺便自己把这个整理一下，记录下来，省的之后使用又来找资料jieba：中文分词比较好，但是英文分词就用其他的3种分词模式：精确模式，将句子精确地切开，不存在冗余，适合文本分析；全模式，把句子中所有的可以成词的词语都扫描出来，速度非常快，但是不能解决歧义，有冗余；搜索引擎模式，在精确模式的基础上，对长词再次切分，提高召回率，适合用于引擎分词jieba....
2019-05-06 22:45:02
2206
转载 【结合实例】信息增益的计算
转自：https://blog.csdn.net/guomutian911/article/details/78599450 参考文章： https://www.cnblogs.com/qcloud1001/p/6735352.htmlhttp://blog.csdn.net/lixuemei504/article/details/7278748http://blog.csdn...
2019-05-06 00:16:21
5893
原创 金融贷款预测
本数据来源于https://tianchi.aliyun.com/course/courseConsole?spm=5176.12282070.0.0.764c290a2RIpBY&courseId=192&chapterIndex=10§ionIndex=1本是天池的课堂，不过讲的不是太清楚，所以后面的变量控制，清洗数据都是按照自己的想法import p...
2019-04-19 20:58:59
443
原创 二手房房价影响因素分析
数据探索，数据预处理，数据可视化观察数据分布，处理异常值，缺失值# coding: utf-8"""dist-所在区roomnum-室的数量halls-厅的数量AREA-房屋面积floor-楼层subway-是否临近地铁school-是否学区房price-平米单价"""import pandas as pdimport numpy as npimport mat...
2019-04-18 15:35:26
2257
2
转载 pandas map(), apply(), applymap() 区别解析
转自 https://blog.csdn.net/weixin_39791387/article/details/81487549文章目录 基础 map()方法 apply() 方法 背景介绍: applymap() 总结: 基础以下操作基于python 3.6 windows 10 环境下 通过将通过实例来演示三者的区别...
2019-04-11 18:49:56
228
转载 LightGBM——提升机器算法（图解+理论+安装方法+python代码）
转自：https://blog.csdn.net/huacha__/article/details/81057150前言LightGBM是个快速的，分布式的，高性能的基于决策树算法的梯度提升框架。可用于排序，分类，回归以及很多其他的机器学习任务中。在竞赛题中，我们知道XGBoost算法非常热门，它是一种优秀的拉动框架，但是在使用过程中，其训练耗时很长，内存占用比较大。在2017年年1月...
2019-04-10 00:30:11
1029
转载 Python机器学习（六）-XGBoost调参
转自：https://mp.weixin.qq.com/s?__biz=MzI2ODY5NjI2Mg==&mid=2247483759&idx=1&sn=69aefa04b283eba638854993e0384cb4&chksm=eaeaeec6dd9d67d0当了建了一个模型，为了达到最佳性能，通常需要对参数进行调整。这样你的模型，才会像一碗加了辣油精心调制...
2019-04-05 13:36:31
4326
转载 python环境下xgboost的安装与使用
转载自：https://www.cnblogs.com/viczhangyuetao/p/7766940.htmlxgboost是大规模并行boosted tree的工具，它是目前最快最好的开源boosted tree工具包，比常见的工具包快10倍以上。在数据科学方面，有大量kaggle选手选用它进行数据挖掘比赛，其中包括两个以上kaggle比赛的夺冠方案。在工业界规模方面，xgboost的分...
2019-04-05 13:34:06
252
转载 奇异值分解（SVD）原理
转自：https://blog.csdn.net/u013108511/article/details/79016939#commentBox奇异值分解是一个有着很明显的物理意义的一种方法，它可以将一个比较复杂的矩阵用更小更简单的几个子矩阵的相乘来表示，这些小矩阵描述的是矩阵的重要的特性。就像是描述一个人一样，给别人描述说这个人长得浓眉大眼，方脸，络腮胡，而且带个黑框的眼镜，这样寥寥的几个特征...
2019-03-16 16:16:53
273
原创 信用卡客户画像（年龄，性别，收入，支出 和信用卡种的关系）
import osimport pandas as pdos.chdir(r'H:\2019-2-3新华书店笔记以及资料\资料\HW5')card=pd.read_csv(r"card.csv",encoding="gbk") #读取数据disp=pd.read_csv(r"disp.csv",encoding="gbk")clients=pd.read_csv(r"clients....
2019-03-11 15:13:31
5191
1
原创 行车出险客户画像（是否出险和年龄、驾龄、性别、婚姻状态等变量之间的关系）
import osimport pandas as pdos.chdir(r'H:\2019-2-3新华书店笔记以及资料\资料\HW4')au=pd.read_csv(r'auto_ins.csv',encoding='gbk')au.head() #简单查看数据 EngSize Age Gender Marital exp Owner ...
2019-03-11 15:12:27
781
2
原创 二手房房价预测（置信度）
import osos.chdir(r"E:\BaiduNetdiskDownload\6inference")import pandas as pdhouse_price_gr = pd.read_csv(r'house_price_gr.csv', encoding='gbk')house_price_gr.head()#先查看一下数据dis_name rate 0...
2019-02-26 10:36:17
923
原创 个人贷款违约预测模型
import osimport pandas as pdos.chdir('E:\BaiduNetdiskDownload\违约贷款案例')# ## 1.1导入数据loanfile = os.listdir()createVar = locals()for i in loanfile: if i.endswith("csv"): create...
2019-02-25 16:56:40
2151
3
原创 客户精准营销（RFM模型）
# ### 1. 导入数据import osimport pandas as pdtrad_flow=pd.read_csv(r'RFM_TRAD_FLOW.csv',encoding='gbk')trad_flow.head()transID cumid time amount type_label type 0 9407 10001...
2019-02-25 14:56:00
3898
1
转载 python 系统学习笔记（十二）---os os.path os.walk
转载 ：https://blog.csdn.net/ychw365/article/details/8662062得到当前工作目录，即当前Python脚本工作的目录路径: os.getcwd()返回指定目录下的所有文件和目录名:os.listdir()函数用来删除一个文件:os.remove()删除多个目录：os.removedirs（r“c：\python”）检验给出的路径是...
2019-02-20 10:28:44
182
转载 标准差(Standard Deviation) 和 标准误差(Standard Error)
转载自：https://blog.csdn.net/tanzuozhev/article/details/50830928本文摘自Streiner DL.Maintaining standards: differences between the standard deviation and standarderror, and when to use each. Can J Psychi...
2019-02-19 11:14:08
18564
2
转载 Logistic回归-代价函数求导过程 | 内含数学相关基础
转载自：https://blog.csdn.net/JUNJUN_ZHAO/article/details/78564557相关函数求导公式先复习回顾下一些数学基础，帮助推导过程可以更好的理解。下面列举的公式都是，接下来的推导中会用到的，没有涉及到的公式，此处不再列举。 常数项求导 以 e 为底的指数求导公式 对数复合求导公式 幂...
2019-02-14 15:39:24
1820
转载 scikit-learn 线性回归算法库小结
转载自：https://www.cnblogs.com/pinard/p/6026343.htmlscikit-learn对于线性回归提供了比较多的类库，这些类库都可以用来做线性回归分析，本文就对这些类库的使用做一个总结，重点讲述这些线性回归算法库的不同和各自的使用场景。 线性回归的目的是要得到输出向量YY和输入特征XX之间的线性关系，求出线性回归系数θθ,也就是 Y=XθY=Xθ。...
2019-02-14 10:47:29
229
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人