- 博客(35)
- 资源 (7)
- 收藏
- 关注
RSS订阅原创 技术之外——社会体验
1、这个社会太浮躁，总想着一步登天，结果比谁摔得都惨。。。2、风来了，猪都会飞起来，可是没人告诉你下一句，那就是中间的巨大的坑谁来填坑？？3、户口很容易落，一张纸而已，可是人的生活习惯、生活方式，语言沟通、饮食习惯、你都能融入进去吗？...
2019-07-17 11:53:11
136
转载 一文读懂逻辑回归
逻辑回归虽然带有回归字样，但是逻辑回归属于分类算法。逻辑回归可以进行多分类操作，但由逻辑回归算法本身性质决定其更常用于二分类。该函数是一条S形的曲线，并且曲线在中心点附近的增长速度较快，在两段的增长速度较慢。w值越大，曲线中心的增长速度越快。从图上可知，Y的值域为(0,1)，那么就可以将决策函数值大于等于0.5的具有对应x属性的对象归为正样本，决策函数值小于0.5的具有对应x属性的对象归为负样...
2019-05-27 11:43:02
277
原创 sql update语句
update 语句 update 语句中用于修改中的表数据 update 表名称 set 列名称 = 新值 where 列名称 = 某值 SQL delete 语句 delete from 表名称 where 列名称 = 值 delete from person where lastname = 'wilson'delete from person whe...
2018-09-03 15:51:34
3470
原创 SQL 能做什么？
Sql：SQL 面向数据库执行查询SQL可以从数据库取回数据SQL可在数据库中插入新的记录 SQL可更新数据库中的数据SQL可从数据库删除记录SQL可创建新的数据库SQL可在数据库中创建的新的表SQL 可在数据库中创建视图SQL可以设置表、存储过程和视图的权限 select ——从数据库中获取数据 update —— 更新数据库中的数据delete—— ...
2018-09-03 13:46:42
2877
原创 python文件和异常
1、什么是文件？什么是异常？你的程序可以从文件中读取信息，也可以将数据写入文件，读取文件时，可以访问各种信息，把文本写入文件时，也可以把Python结构体（如列表）存储在文件中。异常是帮助程序以适当方式响应错误的特殊对策，如果你的程序尝试打开不存在的文件时，可以使用异常来显示带有提示性的错误消息，而不是让程序崩溃。读取文件要读取文件，程序需要打开文件，然后读取文件的内容，你可以一次...
2018-08-23 14:28:39
610
原创 windows下解决pip安装模块超时的问题
windows 下安装总是出现 time out 超时问题，设置时长也比较麻烦，国外的源 都是很慢，所以 用豆瓣源或者 清华大学的源安装就行了。在电脑上找到pip 文件，文件用记事本打开，修改豆瓣源，保存就可以了下载速度3.7M[global]timeout = 6000index-url = http://pypi.douban.com/simpletrusted-hos...
2018-08-08 11:01:19
1192
原创 解析神器xpath
1、xpath即为xml路径语言，它是一种用来确定XML文档中某部分位置的语言。2、xpath解析网页的流程1、首先通过request 库获取网页数据2、通过网页解析，得到想要的数据或者新的连接1、获取xpath 的方法1、从浏览器直接复制 ：首先在浏览器上定位到需要爬取的数据右键，copy ，copy xpath 完成复制 ...
2018-08-07 17:11:38
448
原创 scrapy 安装指南，中间遇到的坑twisted
突然有一天，爬虫框架 scrapy 不能用了，可能因为重新安装的anaconda ,报错显示 需要安装 c++ 14.0,其实不用安装这个，看上一行 显示twisted 这个文件安装失败，所以 只要重新安装这个文件就可以了，https://www.lfd.uci.edu/~gohlke/pythonlibs/然后下载 对应的Python 版本啊 ，2.7就下2.7， 3.6就下载3.6...
2018-07-25 21:14:14
2165
3
原创 使用numpy库和matplotlib绘制散点图
import numpy as npimport matplotlib as mplimport matplotlib.pyplot as pltimport random# 通过rcParams设置全局横纵轴字体大小mpl.rcParams['xtick.labelsize'] = 24mpl.rcParams['ytick.labelsize'] = 24np.random....
2018-06-11 10:42:28
5158
原创 python基础学习（一）
乘法、除法 取余、指数运算、整除：x//y = 2向最近的整数向下取整）取余：x%y = 1 ( 当 5除以2 时 得到的余数） 指数：x**y = 25 （5的2次方）二、Python中的数据类型 1、数据类型：整数、浮点数、字符串Python 中的三种高级数据类型：列表、 元组 和字典。1、整数是没有小数部分的数字，Python中声名一个整型，variablename = initial v...
2018-06-10 14:38:28
145
原创 SQL ORDER BY 关键字
ORDER BY 关键字用于对结果集按照一个列或者多个列进行排序。关键字用于对结果按照一个列或者多个列进行排序。ORDER BY 关键字默认按照升序对记录进行排序。如果需要按照降序对记录进行排序，您可以使用 DESC 关键字。SQL INSERT INTO 语句INSERT INTO 语句用于向表中插入新记录。insert into sql update 语句 update 语句用于更新表中已存...
2018-05-08 20:11:25
468
原创 SQL SELECT DISTINCT 语句
在表中，一个列可能会包含多个重复值，有时也许希望只列出不同distinct 的值。distinct 关键词用于返回唯一不同的值。select distinct column_name,column_name from table_name:下面的 SQL 语句仅从 "Websites" 表的 "country" 列中选取唯一不同的值，也就是去掉 "country" 列重复值：select dist...
2018-05-08 14:02:04
283
转载 数据分析——标签
1. 标签的分类标签按照生成规则不同，可以分为统计类标签、预测类标签。统计类标签只需要利用现有的数据，通过简单的逻辑计算，即可得到。统计类标签按照标签的内容又可以划分为基本属性标签、行为类标签。《大数据时代》的作者维克托·迈尔-舍恩伯格在其著作中说，大数据的简单算法比小数据的复杂算法更有效。统计类标签就是这种依托于大数据的简单算法的结果，在实际生产中，因其靠谱性，使用价值要比预测类标签更...
2018-05-03 17:04:10
4696
原创 SQL学习之路（三）
SQL SELECT TOP 子句SELECT TOP 子句用于规定要返回的记录的数目。SELECT TOP 子句对于拥有数千条记录的大型表来说，是非常有用的。select top SQL Server / MS Access 语法SELECT TOP number|percent column_name(s)FROM table_name;mysql语法select column_name(s)...
2018-05-03 14:19:15
149
原创 Tableau（入门）
用于可视化分析数据的商业智能工具，用户可以创建和分发交互式和可共享的仪表板，以图形和图表的形式描绘数据的趋势，变化和密度。Tableau可以连接到文件，关系数据源和大数据源来获取和处理数据。该软件允许数据混合和实时协作，这使它非常独特。它被企业，学术研究人员和许多政府用来进行视觉数据分析。它还被定位为Gartner魔力象限中的领导者商业智能和分析平台。1、连接到数据源2、选择尺寸和度量3、应用可视...
2018-05-02 19:50:58
1144
原创 SQL select 语句
SQL select 语句 用于从数据库 中选取数据 select 语句 用于 从数控库中选取数据。。select * from table_name；select column实例 select name ，country from websites;...
2018-04-24 14:50:36
170
原创 SQL学习之路（二）
SQL 是用于访问和处理数据库的标准的计算机语言。在本教程中，您将学到如何使用 SQL 访问和处理数据系统中的数据，这类数据库包括：MySQL、SQL Server、Access、Oracle、Sybase、DB2 等等。sql是什么？SQL ，是指结构化查询语言。SQL，让你可以访问和处理数据库。SQL能做什么？1、面向数据库执行查询、可以从数据库取回数据、可以在数据库中插入新的记录、可以更新数...
2018-04-24 14:38:55
94
原创 SQL——学习之路
1、首先建库、搭建表，搭建练习的环境。1、建库建表--create database companycreate database companyuse company2、创建表--部门表 create table dept(deptno int(3) primary key,danme varchar (14) ,loc varchar(13));--往部门表中查数据 insert into d...
2018-04-24 14:12:01
222
原创 《利用Python进行数据分析·第2版》第1章
1.3 重要的Python库考虑到那些还不太了解Python科学计算生态系统和库的读者，下面我先对各个库做一个简单的介绍。快速高效的多维数组对象ndarray。用于对数组执行元素级计算以及直接对数组执行数学运算的函数。用于读写硬盘上基于数组的数据集的工具。线性代数运算、傅里叶变换，以及随机数生成。-成熟的C API， 用于Python插件和原生C、C++、Fortran代码访问NumPy的数据结构...
2018-04-24 11:24:48
416
原创 简单设置jupyter服务器的密码
一开始使用Jupyter还挺好用的，感觉不错，某天发现点过之后退出了，再次登陆需要输入密码 ，哪里的密码？没有设置过啊 。。。1、from notebook.auth import passwd2、passwd(）3、输入密码4、验证密码5、out：哈希值6、结束...
2018-04-24 11:21:29
1675
2
原创 区块链——哈希（hash）
1、什么叫哈希（hash）散列函数（或散列算法，又称哈希函数，英语：Hash Function）是一种从任何一种数据中创建小的数字“指纹”的方法。散列函数把消息或数据压缩成摘要，使得数据量变小，将数据的格式固定下来。该函数将数据打乱混合，重新创建一个叫做散列值（hash values，hash codes，hash sums，或hashes）的指纹。散列值通常用一个短的随机字母和数字组成的字符串来...
2018-04-23 19:54:06
10405
原创 Python 数据处理库 pandas
import pandas as pdimport numpy as np series1 = pd.Series([1, 2, 3, 4])print("series1:\n{}\n".format(series1))入门介绍：pandas适合许多不同类型的数据，包括：具有异构类型的表格数据，例如SQL表格和EXCEL数据有序和无序时间序列数据具有行列标签的任意矩阵数据任何其他形式的观测...
2018-04-23 19:20:23
199
原创 数据分析的基本模型——迭代决策树
迭代决策树案例：广告点击率预估和影响因素分析解读：通过实际值和预测值的对比可直观看出预测的准确程度不同影响因素的广告效果不同。原理：迭代决策树迭代决策树(Gradient Boosting Decision Tree)是将决策树作为基本学习器迭代学习的算法，它将每次迭代的决策树加权得到最终的近似函数...
2018-04-20 14:46:15
754
原创 数据分析的基本模型——K均值聚类
场景：客户生命周期价值聚类相似人群聚类案例：客户生命周期价值聚类解读：利用客户最近购买时间，购买总金额、购买频次等特征，利用聚类算法，将相似的客户划分为K个不同价值的客户，进行精准营销，或个性化服务。原理：K均值聚类（是一种无监督学习算法，以空间中随机的K个点为中心信息聚类，对最靠近他们的对象归类。...
2018-04-20 14:41:08
1914
原创 数据分析的基本模型——时间序列回归
场景：节日客流量预测季节销量预测实时股价预测案例：客流量预测解读：通过实际值和预测值的对比可直观看出预测的准确程度原理：时间序列回归（TSR）是一种动态数据处理的统计方法，研究随机时间序列数据遵循的统计规律，本模型使用ARIMA方法。...
2018-04-20 14:33:40
14844
原创 数据分析的基本模型——二元逻辑回归
场景：预测客户的二分类属性（如性别、是否流失，是否购买等），给客户打标签。案例：预测客户是否流失解读：红色代表客户流失可能性超过50%。绿色代表客户留存超过50%原理：二元逻辑回归（BLR）是因变量为二分类的广义线性回归算法。...
2018-04-20 14:27:52
9235
原创 数据分析的基本模型——线性回归
场景：1、销量影响因素分析和预测。2、访客量影响因素分析和预测。3、社交互动量影响因素分析和预测。4、资金流入流出影响因素分析和预测。解读：访客数对销量有正影响，影响程度较大。汇率对销量有正影响，影响程度较小。价格对销量有负影响，影响程度中等。模型结果，回归方程可应用于销量预测。原理线性回归(Linear Regression)是利用线性回归方程，对因变量与自变量关系进行建模的一种回归算法，可应用...
2018-04-20 14:22:00
1526
原创 豆瓣小王子短评抓取——学习笔记（一）
# -*-coding:utf-8-*-import requestsr = requests.get('https://book.douban.com/subject/1084336/comments/').textfrom bs4 import BeautifulSoupsoup = BeautifulSoup(r,'lxml')pattern = soup.find_all('...
2018-03-04 01:01:17
1097
1
原创 爬取转转网站
import requestsfrom bs4 import BeautifulSoupdef get_time_info(url): url = "http://zhuanzhuan.58.com/detail/926455279137210889z.shtml?fullCate=&fullLocal=&zzfrom=NaN&zhuanzhuanSourc...
2018-02-21 22:42:08
1437
1
转载 抓取大学排名
import requestsfrom bs4 import BeautifulSoupalluniv = []def getHTMLText(url): try: r = requests.get(url,timeout=30) r.raise_for_status()#提高状态。 r.encoding = 'utf-8' ...
2018-02-21 16:43:50
307
原创 Python 学习之路（一）
#coding:utf-8import requests #引入库from bs4 import BeautifulSoupurl = 'http://news.qq.com'wbdata = requests.get(url).textsoup = BeautifulSoup(wbdata,'lxml') #BS4库解析news_titles = soup.select('d...
2018-02-21 15:53:26
150
转载 python学习之路
import randomsecret = random.randint(1,10)print("我爱小甲鱼")temp = input('猜猜是哪个数字')guess = int(temp)while guess != 8: temp = input("哎呀,没猜错啦") guess = int(temp) if guess == 8:
2017-05-30 22:00:19
164
Wireshark 3.2.2 Intel 64.dmg
2020-03-22
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人