- 博客(7)
- 资源 (4)
- 问答 (1)
- 收藏
- 关注
原创 Kylin报找不到hive-site.xml的问题
在使用Kylin的过程中,由于在配置文件kylin.properties中,默认的配置项:kylin.env.hadoop-conf-dir=/etc/hadoop/conf我们使用的CDH的环境,在/etc/hadoop/conf中只有yarn、hdfs等相关的配置文件,没有hive-site.xml 的文件,所以在Kylin中读取hive数据时,会报如下的错误: 后来发现,hi...
2018-06-04 18:09:42 3105
原创 Spark中HiveContext大小写敏感问题
熟悉Spark编程的朋友们应该知道,Spark中有SqlContext与HiveContext,其中SqlContext默认是大小写敏感,如果DataFrame中有字段相同只是大小写不同,在使用字段的时候不会引发歧义;HiveContext提供了更多的Hive预置函数,可以更高效的进行数据开发,但是默认为大小不敏感,也就是说当数据中存在类似name和NAME两个字段时,这个时候如果编写代码:l...
2018-06-04 12:47:29 3229
原创 CDH环境中如何修改HUE导出文件限制
今天开放了HUE账户给了第三方研发人员,用于查看我们服务器hive上部分数据。但是对方反应,在下载查询出来的结果数据时,每次下载下来的文件都只有100万行,问我们是不是哪里做了限制。 起初我们以为是不是excel文件本身的行数限制问题,因为导出的excel文件为xlsx格式的,而excel07以上版本最大的行列分别是1,048,576和16,384但是导出的结果集正好是100万,而非1,...
2018-06-01 19:15:14 4082 1
原创 MySQL定时任务
本篇文章简单介绍如何在MySQL中新建定时任务新建定时任务主要分为以下几步:修改MySQL配置新建存储过程新建事件修改MySQL配置首先需要打开新建存储过程和事件的权限:赋予用户创建、删改以及执行存储过程的权限GRANT CREATE ROUTINE ON `user`.* TO 'username'@'%';GRANT ALTER ROUT...
2018-06-01 18:54:08 200
原创 Java生成MD5的坑
前同事离职,鄙人接手维护之前的代码。本来一切都风平浪静,今天接口调用方突然在群里艾特我,说调接口的时候返回鉴权失败。我赶紧打开代码,发现调用接口的时候,会进行md5加密验证,接口调用方式如下: http://xxx/xxx/xx/getSnInfo?dnum=abcd&r=110749&t=1525850838&sign=a99efdb110a25af103...
2018-05-22 17:09:16 4169 1
转载 PHP提高编程效率的方法
PHP提高编程效率的方法用单引号代替双引号来包含字符串,这样做会更快一些。因为PHP会在双引号包围的字符串中搜寻变量,单引号则不会,注意:只有echo能这么做,它是一种可以把多个字符串当作参数的“函数”(译注:PHP手册中说echo是语言结构,不是真正的函数,故把函数加上了双引号)。1、如果能将类的方法定义成static,就尽量定义成static,它的速度会提升将近
2013-04-23 22:04:04 481 1
软件工程-学生成绩管理系统 软件工程课程设计
2012-02-22
基于Web的学生成绩网上查询系统 oracle课程设计
2012-02-22
w3school(2.0).CHM 绝对好用!
2012-02-22
CDH中ZK是否有内存泄露的问题
2017-08-09
TA创建的收藏夹 TA关注的收藏夹
TA关注的人