eesnake-CSDN博客

原创 php与mysql中文乱码问题

使用mysql数据库时，有时会出现中文乱码问题，一般是以下几种情况造成的，遇到时可以依次进行排除mysql数据库编码问题php文件编码问题，使用php程序向mysql数据库插入数据时，若php文件编码与mysql编码不一致，也会造成中文数据插入数据库后乱码。客户端显示问题，mysql和php编码都没问题时，可能是因为xshell、secretcrt这类客户端显示编码问题，造成显示中文时始终乱码

2017-02-05 16:09:27 597

翻译 Spark：DataFrame 与 RDD

spark中的DataFrame和RDD对于初学者来说是很容易产生混淆的概念。下面内容是berkeley的spark课程学习笔记，记录了 DataFrame与RDD的相同点及区别。首先看一下官网的解释：DataFrame：在Spark中，DataFrame是一个以命名列方式组织的分布式数据集，等同于关系型数据库中的一个表，也相当于R/Python中的data frames（但是

2016-10-25 09:58:00 2541

原创 hadoop3.0 分布式搭建/安装

最近打算尝试在服务器上安装hadoop3.0，由于服务器上本来搭建好hadoop2.6，并且是用root用户安装。我不打算删除原来的hadoop2.6，所以准备新建两个用户，hadoop2.6及hadoop3.0；将位于/usr/local/hadoop/目录下的hadoop2.6移到hadoop2.6用户目录下，并且将原本在/etc/profile中配置的环境变量删除，然后在hadoop

2016-10-21 20:30:42 17899 1

原创 defaultdict与｛｝创建字典时的区别

最近在做spark教程中的lab3时，发现教程中有个语句使用了defaultdict(lambda: None)创建字典，那么defaultdict()与｛｝有什么区别呢defaultdict众所周知，在字典中访问不存在的键时，将会报错sample_one = [(0, 'mouse'), (1, 'black')]a = {} a.update(sam

2016-08-22 11:43:46 619

原创 cannot create temp file for here-document: No space left on device

今天在master服务器上输入命令时，系统报错cannot create temp file for here-document: No space left on device猜测是硬盘容量已满，使用命令df -h 查看硬盘空间果然根目录已经爆满，随后用命令top查看cpu及内存进程rsysload、systemd－journal、phddns服务严重占用cpu资源，判断可能是日志服务

2016-08-17 16:36:27 77129 1

翻译 Lab2:Distribute Machine Learning: Computer and Storage

本节介绍了Least Squares Regression(LSR)算法的时间和空间复杂度。下面是LSR的求解过程。首先定义：XϵRn×dX\;\epsilon \;{R^{n\times d}}yϵRny \;\epsilon\;{R^{n}}ŷ ϵRn\hat{y}\;\epsilon\;{R^{n}}wϵRnw\;\epsilon\;{R^{n}}根据第一节介绍的Linear

2016-08-07 10:50:44 495

u010499619的博客