- 博客(2)
- 收藏
- 关注
RSS订阅原创 201807 相关性度量的几种方法-卡方检验、相关系数、信息增益...
在做数据分析时，为了提炼观点，相关性分析是必不可少，而且尤为重要的一个环节。但是，对于不同类型的数据，相关性分析的方法都各不相同。本文，主要按照不同的数据类型，来对各种相关性分析方法进行梳理总结。相关性分析是指对两个或多个具备相关性的变量元素进行分析，相关性不等于因果性。一、离散与离散变量之间的相关性1、卡方检验卡方检验是一种用途很广的计数资料的假设检验方法。它属于非参数检验的范畴...
2018-07-27 15:19:24
32928
原创 201806 数据处理 SQL、python、shell 哪家强...速度PK（上篇）
最近在工作中，进行大量的数据处理，使用的是mysql5.7.22，发现当数据量级达到几十万之后，SQL执行速度明显变慢。尤其是当多个表join时，于是就尝试用python pandas进行数据处理，发现运行速度明显比SQL运行速度快。于是，决定比较一下千万数据量级之下，SQL、pandas、shell在数据处理上的优劣势。配置：ubuntu系统64位，8G内存，intel i7处理器软件环...
2018-06-30 21:50:53
4090
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人