pandana-CSDN博客

原创 hive中order by 和sort by与distribute by

hive order by 与SQL中的order by一致，都是做全局排序。order by的排序是做全局排序，只会有一个reducer进行排序，多个reducer无法保证全局有序，这样导致大数据量时，reducer排序压力大，运算慢，可能造成内存溢出危险。sort by 与order by的不同之处在于sort by限定在单机范围内进行排序。且数据能够被分发到多个reducer中处理，现假

2015-01-06 16:56:46 518

原创 ubuntu14.04 搭建hadoop2.5.1环境

一、在Ubuntu下创建hadoop组和hadoop用户增加hadoop用户组，同时在该组里增加hadoop用户，后续在涉及到hadoop操作时，我们使用该用户。1、创建hadoop用户组 2、创建hadoop用户 sudo adduser -ingroup

2014-10-26 13:06:47 1059

原创 ubuntu 14.04安装jdk 1.8.0_25

第一步、下载jdk;网址如下：http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html点击上方的的Accept ，选择第二个tar.gz，也可以选择第一个第二步、解压jdk-7u45-linux-i586.tar.gz，如下图所示。第三步、设置j

2014-10-24 22:43:47 1357

原创 latex编写论文

写给像我这样需要使用latex编写论文的小菜鸟，给出demo和注释，高级部分自己参透（默认你已经搭好环境）。1.搭论文架子demo1\documentclass[10pt,a4paper]{article}\usepackage[left=2cm,right=2cm,top=2cm,bottom=2cm]{geometry}\title{Count User

2013-07-21 13:09:01 2710

原创 Texmaker错误文件不能保存，请检查你是否拥有写权限

最近安装了Ctex+Texmaker来编写论文，发现在保存文件时报如下错误，纠结了许久。今天无意试了一下，成功解决了。问题很简单在保存文件时不要只是填写文件的名称，在名称后面要加上文件后缀名。加上后缀名后就能使用了，现在想想这个软件很坑爹……

2013-06-16 20:57:56 4769

原创人人网error:invalid_request,error_description:Invalid redirect_uri解决方案

在开发网站接入人人网时，需要与人人网连接。人人网采用OAuth 2.0的验证授权流程。在http://wiki.dev.renren.com/wiki/SDK中下载相应的SDK文档，可以直接下载其demo来改写代码。本文就是下载了demo来改写代码。1.环境软件环境：java1.6+myeclipse 8.5+mysqlsdk版本：renren-sdk-java-2.02.部署de

2013-06-05 21:13:38 9107 1

原创新手1小时搞定python基础

Lesson 1 准备好学习Python的环境下载的地址是：http://www.python.org/getit/这是python下载的官方网址，建议大家软件下载去官网下载linux版本的我就不说了，因为如果你能够使用linux并安装好说明你可以一切自己搞定的。运行环境可以是linux或者是windows：1、linuxredhat的linux安装上去之后一定会有

2013-01-05 22:33:26 1000

原创 2012年南邮计算机专业复试总结

2012年4月10日匆匆来到南京，下午就去找老师答疑。呵呵，老师有点娘不过人还挺好的。他讲的要注意的我认真听了，考试还是有点用的。下面我对复试情况做以下总结。（1）选择一门总结擅长的课，南邮默认选择微机原理（微机简单）我没有学过微机原理，所以我选了编译原理。其实编译原理难，大部分人都去考微机了。不过成绩出来时还好，不管你选择了哪门课都要好好准备。（2）本校的期末试卷和真题卷是

2012-04-24 09:57:40 4782 3

原创 spss clementine安装

最近在学着用这款统计软件，对安装做了一下整理。SPSS CLEMENTINE12.0下载地址：http://www.verycd.com/topics/2768317/1)下载虚拟光驱，并安装虚拟光驱（这个简单就不讲了）2）使用虚拟光驱安装TLF-SOFT-SPSS_Clementine_v12.0-CYGiSO.bin安装过程：改变安装路径：

2012-04-23 16:47:10 4658 2

原创 myeclipse连接SQL2005以及碰到TCP/IP端口连接错误解决方案

最近在用myeclipse连接SQL2005进行开发，碰到了TCP/IP端口连接失败问题。原先我以为是SQL2005驱动包下载错误，导致数据库服务未开启。后来在网上找了资料，原来架包没有错。只是我的SQL2005的服务器有些服务没有开启。现在我把我解决问题的步骤整理如下：（1）先在网上下载一个SQL2005连接myeclipse的驱动包。（2）在myecli

2012-03-31 16:11:52 1949

原创 MATLAB2009A实现Kmeans实例

本人刚学习数据挖掘没有多久，数据挖掘中要用不少聚类算法。Kmeans作为其中常用的一种算法，聚类效果还行。下面是我做了几个简单的MATLAB实现Kmeans的小实例100*2列矩阵聚类成3类 Matlab代码如下： data=rand(100,2);>> opts=statset('Display','final');>>[idx,ctrs]=kmeans(data

2012-03-31 15:45:44 3263 2

[摘要]：第三次科技革命是人类文明史上继蒸汽技术革命和电力技术革命之后科技领域里的又一次重大飞跃。随着第三次科技革命的广泛传播，人类由工业社会进入信息社会。信息技术在第三次科技革命的带动下，信息技术有了长足的发展。电子计算机和通信技术紧密结合，给人们的工作和生活带来了极大的便利，人类进入了数字信息化时代。本文将介绍信息技术发展史，分析信息技术的发展趋势。 [关键字]：信息技术，信息化，发展趋势，发展史

2011-05-26 09:46:00 29424

原创一个有趣的编程题

编程求:S=-(2! / 1!) + [4! / (1! - 3!)] - [6! / (1! - 3! + 5!)] + [8! / (1! - 3! + 5! -7!)] -……。项数N的值由键盘输入，且1<=N<=20. 代码：#include<iostream> using namespace std; int main() { int n,i,j,m,k=1,p=0; long int l=1;<b

2011-03-10 17:13:00 653

原创 struts 2报错

严重: Dispatcher initialization failed Unable to load configuration. - bean - jar:file:/D:/Program%20Files/Apache%20Software%20Foundation/Tomcat%206.0/webapps/test/WEB-INF/lib/struts2-core-2.2.1.jar!/struts-default.xml:29:72 at com.opensymph

2010-11-24 00:02:00 1166 3

原创 Eclipse 中导入已存在的工程

我从老师那里拷贝了一个程序，我将程序导入Eclipse中。工程是导入成功了，但是却发现它不能再其中运行。这个问题一直困扰着我们，在网上找了一些材料。问题出现的原因可能是因为两题机器配置的路径不同。下面我来介绍解决的方法：（1）首先确认tomcat和Eclipse的配置路径的正确性，这个你可以在网上查到相应的配置路径的博客。（2）将要导入的的工程剪切到tomcat中的we

2010-04-22 14:09:00 955

原创方向

已经大二下学期的我，突然对自己的方向感觉很迷茫。之前的自己对自己的方向很清晰，现在发现自己真的有点糊涂了。下学期我就得面对考研的准备了，可是我对自己的考研方向还是很迷茫。老师给我的建议是很多，方向也很多。可是我不知道我擅长哪一个方面，对于软件方面来说。我觉得自己缺乏一种自信，我怕自己不能在最短的时间内写出好的软件。虽然我很喜欢写程序，可是我的效率不高，花费的时间比别人要多。而信息安全

2010-03-12 09:56:00 440

原创 Java的安装

寒假到来想在家学点东西，我就从网站下了jdk1.6。下软件是很简单在安装时又重现之前安装的问题，环境变量修改不对。在那耗费了一个多小时没搞好，很郁闷。别人装的那么简单，我怎么弄起来那么费事呢。我在网上就去搜索结果都不匹配，真的把弄火了。还被师兄和老师说了，回到寝室我拿起书一看，先按书上的写不对。然后我仔细看了书上的路径，终于懂了。现在我将Java的安装路径写一下，先点击我的电脑的

2010-01-06 08:48:00 531

原创哈夫曼树的课程设计

摘要在计算机信息处理中，“哈夫曼编码”是一种一致性编码法（又称"熵编码法"），用于数据的无损耗压缩。我们会发现一些数据经常出现的频率高，有些出现的频率低。我们利用哈夫曼算法建立一棵哈夫曼树(最优二叉树)，同时将数据出现的频率作为权值赋给哈夫曼树中的结点。根据建立好的哈夫曼树我们进行编码，从根结点出发在左子树则标为0，右则标为1。直到到指定的叶子结点，然后将遍历过程中标记的0，1代码存在一个

2009-12-27 09:59:00 5548 13