- 博客(18)
- 收藏
- 关注
RSS订阅原创 qlik入门笔记
文章目录常用概念加载数据面板介绍**APP面板****分析面板**Qlik 常用可视化图表主条目成果共享及应用故事基本语法集合分析注释转换数据数据清洗层次结构存储常用概念维度确定数据在可视化中的分组方式，维度通常指时间、地点或者分类度量是指某些类别的计算结果，通常是聚合的集合加载数据以下截图为加载数据的基本步骤：新建APP之后打开数据加载编辑器在数据加载编辑器中创建数据链接如...
2019-06-14 13:18:02
6407
原创 关于SQLSERVER创建代理job的一些问题
最近在部署服务器数据库脚本自动化的时候，摸索出了一些小问题，主要是跟在SQLserver中运行SSIS包，运行sql语句，运行cmd和powershell的一些问题和解决方案，用这篇笔记来做备忘执行SSIS包提示密码错误我这里遇到的问题是，在VS里面跑SSIS包没有任何问题，能够跑通，但是到了SQLserver中创建代理跑的时候老是报下面的错误。这里找到了网上的解决方案。参考这篇博文：点击跳...
2019-06-03 16:01:14
992
原创 Python处理数据库插入和查询的一些问题及解决方案
文章目录Python连接DB2使用ibm_db和ibm_db_sa两个包使用ibm_db_sa和sqlalchemy两个包Python处理插入数据库报数据类型不一致问题Python执行SQL语句成功但是数据库没有数据Python插入大体量数据时到一定数量崩溃Python连接DB2IBM的DB2数据库用python做连接真的不是一般的麻烦，一个是因为这个数据库并不是现在主流的数据库，另一方面是因...
2019-05-01 11:26:46
1602
原创 关于selenium和requests结合使用的一个项目案例
文章目录绪论爬虫思路实践代码结语绪论很久没有做爬虫了，最近在公司做数据的时候整合某个数据时发现给的数据是从网站上进行下载的，但是领导的要求是定时从网站上下载做更新，这就需要我重新把爬虫的知识捡起来了。简单的记录一下处理的思路：要爬取的网站是需要登录的，而且内部html代码有很多的JavaScript脚本，登录授权跨越了好几个网站，想要靠requests直接找到登录链接，基本上没可能登录界面...
2019-05-01 11:25:02
7762
1
原创 Excel VBA编程
文章目录如何创建VBAVBA语法规则声明变量给变量赋值让变量存储的数据参与运算关于声明变量的其他知识变量的作用域特殊的变量——数组声明多维数组声明动态数组其他创建数组的方法数组函数利用UBound求数组的最大索引号利用LBound函数求最小索引号求多维数组的最大和最小索引号用join函数将一维数组合并成字符串将数组内容写入工作表中数组的存取特殊数据的专用容器——常量对象，集合及对象的属性和方法VB...
2019-04-11 16:45:51
21859
4
原创 Tabular学习笔记
文章目录Tableau简介功能支持的数据类型运算符及优先级算数运算符逻辑运算符运算符优先级Tableau基础界面Tableau基础操作维度和度量工作区介绍数据窗格分析窗格案列演示数据和图像文件导出导出图形中的数据导出数据源数据导出交叉表数据导出access数据导出图形文件导出为PDF文件创建图表单变量图形条形图饼图直方图折线图多变量图形散点图甘特图Tableau函数数字函数字符串函数日期函数Tab...
2019-04-11 16:40:44
12119
4
原创 数据科学读书笔记
文章目录数据预处理数据质量关于数据质量的一些统计学规律第一数字定律小概率定理探索性数据分析（EDA）数据审计预定义审计自定义审计可视化审计数据清洗处理缺失值冗余数据处理噪声数据处理数据变换数据集成基本类型主要问题其他预处理方法数据脱敏数据规约数据统计概率分布正态分布卡方分布t分布F分布参数估计点估计区间估计假设检验基本分析方法元分析方法加权平均法优化方法机器学习基本概念机器学习活动训练经验的选择目...
2019-04-11 16:37:22
2306
原创 离散数学-图论相关
文章目录图的基本概念无向图和有向图无向图有向图关联和度关联度握手定理简单图与完全图简单图通路、回路和图的连通性通路回路一些关于通路和回路的定理定理1定理2连通性割集二部图定义二部图判定Hall定理欧拉图欧拉图的判定欧拉图的求解哈密顿图定义性质哈密顿图的判定树无向树定义性质基本回路和基本割集基本回路基本割集最小生成树最小生成树的解法——避圈法生成树的计数图的矩阵表示无向图的关联矩阵定义性质无向图基本...
2019-04-11 16:25:29
3130
原创 白话算法
文章目录决策时什么是决策树决策树需要知道的一些知识举个例子决策树的优化策略决策树的优点：决策树的缺点：模型的评价模型的训练模型的评价朴素贝叶斯基本概念算法流程应用的时候需要注意的点：朴素贝叶斯与文本挖掘总结回归问题简单线性回归多元线性回归逻辑回归其他回归问题回归问题的求解集成监督学习与无监督学习无监督学习关联规则挖掘Apriori算法聚类定义聚类算法的应用距离K-means算法社会网络分析三种中心...
2019-04-11 16:23:05
541
原创 D3JS可视化入门
文章目录安装和配置安装d3js本地服务器调试基本操作数据加载数据绑定数据SVG条形图散点图定义坐标轴更新视图增加数据字典绑定事件监听自动排序提示条布局饼图堆叠柱状图力图地图安装和配置安装d3js在d3js的官网上可以直接下载d3js的文件，其中包含一个完整版和mini版，差别并不是很大。调试的时候可以使用完整版，发布的时候可以使用mini版，提高加载速度本地服务器调试可以利用python...
2019-04-11 16:17:52
26037
2
原创 如何迁移FaceNet到自己的数据集
文章目录概述如何迁移对齐你的图片分割修改源代码注释掉人脸检测模块训练模型测试模型后记概述FaceNet是人脸检测中一个比较出名的框架，其主要特色是应用了tripletloss一个三元组的方式，能够比较好的区分正例和负例。通过 CNN 将人脸映射到欧式空间的特征向量上，计算不同图片人脸特征的距离，通过相同个体的人脸的距离，总是小于不同个体的人脸这一先验知识训练网络。 测试时只需要计算...
2019-04-11 16:15:07
4770
9
原创 使用pandas连接数据库和输出数据库的常见问题
使用哪个包连接数据库在使用pandas读取和写入数据库的时候，最好不要用pymssql直接去连服务器，读取数据可能不会出问题，但是在写入的时候，会出现一系列的问题。推荐使用sqlalchemy库import pandas as pdimport pymssqlimport numpy as npimport matplotlib.pyplot as pltfrom sqlalchemy...
2019-04-11 16:13:16
911
原创 数据分析入门-机器学习部分
机器学习1——分类问题为建模准备数据在时间场景中，我们一般会另设一个Dev数据集作为开发数据集（测试集），我们在成功建模后用它对模型调优。模型是从训练集中训练出来的，然后用Dev数据来度量它的指标准确度等，基于上述过程的结果，如果需要进一步提高，模型会被更深入的调优。from sklearn.cross_validation import train_test_splitfr...
2018-07-01 10:49:31
3075
1
原创 Python数据分析入门——无监督学习部分
基础知识准备使用字典进行词频统计s="We tend to imagine that lightning looks like the zigzag you find in the emoji. It’s rarely that simple"dic={}for word in s.split(): if word not in dic: dic[wor...
2018-07-01 10:37:40
2969
原创 Scipy笔记
常数和特殊函数物理常量from scipy import constants as Cprint("光速：",C.c)print('普朗克常数：',C.h)光速： 299792458.0普朗克常数： 6.62607004e-34常用单位print('一英里：',C.mile)print('一英寸',C.inch)一英里： 1609.34399999...
2018-07-01 10:26:45
2302
原创 pandas 笔记
# Pandas中的数据对象## series对象Series是pandas中最基本的数据对象，它定义了Numpy的ndarray对象的接口__array__(),因此可以用numpy的数组处理函数直接对series对象进行处理，**series对象除了支持使用位置作为下标存取元素之外，还可以使用索引标签作为下标存取元素。每个series对象实际都是由两个数组组成：**- ind...
2018-07-01 10:23:32
5576
原创 matplotlib-绘制精美的图表
快速绘图为了将matplotlib绘制的图形嵌入notebook中，需要执行下面的命令 %matplotlib inline使用inline模式在notebook中绘制的图表会自动关闭，为了在notebook的多个单元格内操作同一幅图表，需要使用一下魔法命令 %config InlineBackend.close_figures=False%config Inl...
2018-07-01 09:45:39
2082
原创 Numpy笔记
基础操作<div class="burk">import numpy as np%matplotlib inline </div><i class="fa fa-lightbulb-o "></i>%matplotlib inline 使matplotlib图表在notebook中直接显示定义数组a=np.array(...
2018-06-30 23:33:52
971
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人