自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(132)
  • 资源 (3)
  • 收藏
  • 关注

转载 hive jdbc use custome dbname

https://cwiki.apache.org/confluence/display/Hive/HiveClientFor embedded mode, uri is just "jdbc:hive://". For standalone server, uri is "jdbc:hive://host:port/dbname" where host and port are det

2012-04-24 16:44:58 1353

转载 hive安装配置与hive的JDBC (hadoop-0.20.2 + hive-0.7.0)

hive安装安装hive的时候参考了http://yp.oss.org.cn/software/show_resource.php?resource_id=270 和http://www.cnblogs.com/flying5/archive/2011/05/23/2078399.html具体步骤大概是:1)安装hadoop2)jdk3)下载hive上面这些都可以从网上找到很多

2012-04-24 16:12:24 1897

转载 Hadoop Hive与Hbase整合

用hbase做数据库,但由于hbase没有类sql查询方式,所以操作和计算数据非常不方便,于是整合hive,让hive支撑在hbase数据库层面 的 hql查询.hive也即 做数据仓库1. 基于Hadoop+Hive架构对海量数据进行查询:http://blog.csdn.net/kunshan_shenbin/article/details/71053192. HBase 0.90

2012-04-16 09:39:16 1102

转载 Hive安装

hive 安装    http://www.open-open.com/lib/view/open1330908496483.htmlhive安装配置可安装集群任意节点上tar -xf hive-x.y.z.tar.gz(本次安装为hive-0.8.1.tar.gz)将解压后的hive-0.8.1文件放在系统的/opt/soft/hive中。在/etc/pr

2012-04-13 10:26:46 1717

转载 几篇关于Hadoop+Hive数据仓库的入门文章

Hadoop计算平台和Hadoop数据仓库的区别http://datasearch.ruc.edu.cn/~boliangfeng/blog/?tag=%E6%95%B0%E6%8D%AE%E4%BB%93%E5%BA%93Hive 随谈(三)– Hive 和数据库的异同http://www.tbdata.org/archives/551Hadoop Ecosystem解决

2012-04-11 13:54:46 757

转载 Hive doc

https://cwiki.apache.org/confluence/display/Hive/GettingStartedTable of ContentsHive introduction videos From ClouderaInstallation and ConfigurationRequirementsInstalling Hiv

2012-04-11 13:22:42 1030

转载 hbase基本概念和hbase shell常用命令用法

转自:http://www.jaywong.org/?p=1321. 简介HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable:一个结构化数据的分布式存储系统》。HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase中的海量数据,利用Zo

2012-03-30 10:21:09 786

原创 Hadoop-HBase-Zookeeper安装记录

一.jdk 安装及配置 (所有机器)路径:/opt/soft/jdk环境变量 vi /etc/profile  修改JAVA_HOME=/opt/soft/jdk,并添加PATH、CLASSPATH二.hadoop 集群安装HD1211:namenode, jobtracker, HmasterHD1212:secondarynamenode, datanode, tasktr

2012-03-22 17:13:14 835

转载 Java 线程池学习

Reference: 《创建Java线程池》[1],《Java线程:新特征-线程池》[2], 《Java线程池学习》[3],《线程池ThreadPoolExecutor使用简介》[4],《Java5中的线程池实例讲解》[5],《ThreadPoolExecutor使用和思考》[6][1]中博主自己通过ThreadGroup实现一个线程池(挺方便理解的),使用的是jdk1.4版本,Jdk

2012-03-14 16:45:00 511

转载 zookeeper理解

zookeeper的部署和使用1.1 zookeeper的部署和使用1.1.1系统描述ZooKeeper是一个高可用、高可靠的协同工作系统,分布式程序可以用ZooKeeper保存并更新关键共享状态。Katta使用zookeeper保证主节点和搜索节点的有效性,指派索引文件给搜索节点,察觉搜索节点的失效等。1.1.2 安装和配置安装zookeeper也很简单,下载zookee

2012-03-12 13:37:39 3647

转载 Hadoop+Hbase+ZooKeeper 安装配置及需要注意的事项

转自:http://blog.csdn.net/FranklySun/article/details/6443027本文重点讲解Hbase的安装、配置、问题解决关于hadoop和zookeeper的安装配置及相关问题,可以参考:hadoop:http://blog.csdn.net/FranklySun/archive/2011/05/13/6417984.aspx

2012-03-07 11:22:50 655

转载 HBase 学习

最近有一段时间没有写文章和学习技术,主要是在弄一个项目的需求调研和概要设计。通过一个多月来的项目需求、概要设计,明白了一些道理,软件工程部只是写代码。说这话可能有人会觉得很搞笑,到现在才知道,但是我想说的是:知道不等于明白,知道不等于领悟到。有时间,等任务完成将项目带回公司后,好好的说一下这次调研的感受和学习。       今天主要是将项目要用的一个技术来阐述一下。hadoop项目中的hb

2012-03-07 11:19:30 1581 1

转载 hadoop、hbase、zookeeper环境搭建(详细)

一 机器192.168.0.203 hd203: hadoop namenode & hbase HMaster192.168.0.204 hd204: hadoop datanode & hbase HRegionServer & zookeeper192.168.0.205 hd205: hadoop datanode & hbase HRegionServer & zookeep

2012-03-07 11:05:25 967

转载 正则分析apache log

/* * Copyright (c) Ian F. Darwin, http://www.darwinsys.com/, 1996-2002. * All rights reserved. Software written by Ian F. Darwin and others. * $Id: LICENSE,v 1.8 2004/02/09 03:33:38 ian Exp $ * *

2012-03-06 17:27:23 770

转载 Linux下crontab命令的用法

任务调度的crond常驻命令crond 是linux用来定期执行程序的命令。当安装完成操作系统之后,默认便会启动此任务调度命令。crond命令每分锺会定期检查是否有要执行的工作,如果有要执行的工作便会自动执行该工作。而linux任务调度的工作主要分为以下两类:1、系统执行的工作:系统周期性所要执行的工作,如备份系统数据、清理缓存2、个人执行的工作:某个用户定期要做的工作,例如每隔10分

2012-03-01 14:52:08 392

转载 linux的mount命令详解

转自:http://blog.chinaunix.net/space.php?uid=12814440&do=blog&id=2914612linux是一个优秀的开放源码的操作系统,可以运行在大到巨型小到掌上型各类计算机系统上,随着 linux系统的日渐成熟和稳定以及它开放源代码特有的优越性,linux在全世界得到了越来越广泛的应用。现在许多企业的计算机系统都是由UNIX系 统、Linux系统

2012-03-01 11:20:09 406

转载 hadoop hbase 博客推荐,文章不错

http://www.javabloger.com/article/category/hadoophttp://www.javabloger.com/article/category/hbase

2012-02-23 13:55:14 416

转载 hadoop 集群大版本切换之保存数据和日志的方法

转自:http://www.cnblogs.com/editice/archive/2012/01/13/2322069.html注:将版本从0.21.0 切换到 0.20.205.0 ,或者反过来切换,没有办法用自带的upgrade命令(文中的许多操作最好能够写成脚本,手动操作过于麻烦)转载请注明出处,谢谢,实现出来确实挺累的测试之前的情况测试采用三台机器作为测试

2012-01-16 17:51:17 673

转载 Java SE 6 新特性: 编译器 API

新 API 功能简介JDK 6 提供了在运行时调用编译器的 API,后面我们将假设把此 API 应用在 JSP 技术中。在传统的 JSP 技术中,服务器处理 JSP 通常需要进行下面 6 个步骤:分析 JSP 代码;生成 Java 代码;将 Java 代码写入存储器;启动另外一个进程并运行编译器编译 Java 代码;将类文件写入存储器;服务器读入类文件并运行;但 如果采用运

2012-01-14 12:58:13 581

转载 Linux下JavaWeb环境搭建教程

一、系统约定软件源代码包存放位置:/usr/local源码包编译安装位置(prefix):/usr/local/software_name脚本以及维护程序存放位置:/usr/local/sbinMySQL 数据库位置: /var/lib/MySQL(可按情况设置)二、系统环境部署及调整1. 检查系统是否正常# more /var/lo

2012-01-12 14:49:34 789

转载 linux下mysql安装配置

Linux环境下MySQL5.1安装步骤:1、下载MySQL免安装版/二进制版软件(不用编译)文件格式:MYSQL-VERSION-OS.tar.gz2、创建MySQL组,建立MySQL用户并加入到mysql组中(不同版本的Unix中,groupadd和useradd的语法可能会稍有不同。)#groupadd mysql#useradd -g mys

2012-01-12 14:48:12 406

转载 hadoop 博客推荐

http://dongxicheng.org/category/mapreduce/

2012-01-04 09:45:17 378

转载 手工搭建注解方式的spring3+struts2.2+hibernate3.6+maven2

转自:手工搭建注解方式的spring3+struts2.2+hibernate3.6+maven2 http://doujiang327.iteye.com/blog/1238767这段时间不是很忙,头给我说了个事儿:让我把公司的网站给整整,想起来公司好多技术都该换新版本了,这正好是个机会,于是就搭了一套最新的开发框架。      IDE:myeclipse8.6

2011-12-31 13:23:29 1629

转载 java annotation

http://www.blogjava.net/mlh123caoer/archive/2007/09/06/143260.htmlhttp://www.blogjava.net/ericwang/archive/2005/12/13/23743.html

2011-12-31 10:12:59 415

转载 《Java Annotation详解》

转载自:http://william750214.javaeye.com/blog/298104元数据的作用如果要对于元数据的作用进行分类,目前还没有明确的定义,不过我们可以根据它所起的作用,大致可分为三类:l         编写文档:通过代码里标识的元数据生成文档。l         代码分析:通过代码里标识的元数据对代码进行分析。l         编

2011-12-31 10:12:16 355

原创 appfuse

http://appfuse.org/display/APF/AppFuse+QuickStart+-+Chinese 中文quickstarthttp://appfuse.org/display/APF/Home homepage

2011-12-30 12:38:54 346

转载 hadoop 开发

如何在Hadoop上编写MapReduce程序 http://dongxicheng.org/mapreduce/writing-hadoop-programes/http://dongxicheng.org/category/mapreduce/

2011-12-30 12:28:52 387

转载 当Maven遇上MyEclipse

转自:http://www.cnblogs.com/yan5lang/archive/2009/07/15/1524343.htmlMaven有自己的一套约定目录规则,与MyEclipse的有冲突,其实结合也很简单,因为MyEclipse的目录可配置。1 用maven创建一个web project mvn archetype:create   -DgroupId=com.lif

2011-12-30 12:18:26 593

转载 hadoop 文章

http://61.153.44.88/apache/hadoop/yahoo-sds.pdf Scalable Computing with Hadoophttp://hadoop.apache.org/common/docs/r0.20.2/mapred_tutorial.html#Mapper  Map/Reduce Tutorialhttp://calvin.iteye.c

2011-12-27 09:31:24 378

转载 SSH2 整合

转自:http://www.cnblogs.com/flyoung2008/archive/2011/09/03/2165833.html网上的教程很多,参考了一些,自己再总结一下。版本:Struts2.2.3  Spring3.0 Hibernate3.3myeclipse8.6整合步骤如下:1、新建web工程2、添加spring3、添加h

2011-12-23 10:46:22 477

转载 在Linux里设置环境变量的方法(export PATH)

一般来说,配置交叉编译工具链的时候需要指定编译工具的路径,此时就需要设置环境变量。例如我的mips-linux-gcc编译器在“/opt/au1200_rm/build_tools/bin”目录下,build_tools就是我的编译工具,则有如下三种方法来设置环境变量:1、直接用export命令:#export PATH=$PATH:/opt/au1200_rm/build_too

2011-12-21 13:46:04 359

转载 hadoop on windows with eclipse

http://ebiquity.umbc.edu/Tutorials/Hadoop/00%20-%20Intro.html

2011-12-21 12:58:50 320

转载 Hadoop资料收集

hadoop官方网站hadoop.apache.org最权威的官方资源之一dev.yahoo.hadoophadoop.cn(偶尔有一些有用信息)www.hadoop.org.cnhadoopchina手册hdfs命令行指南http://hadoop.apache.org/core/docs/current/commands_

2011-12-21 12:57:36 920

转载 hadoop-0.20.203.0 eclipse 插件连接问题

转自:http://hi.baidu.com/wangyucao1989/blog/item/279cef87c4b37c34c75cc315.html对于Hadoop开发者来讲,通过JAVA API编程是进入Map-Reduce分布式开发的第一步。由于Eclipse本身并没有提供对MapReduce编程模式的支持,所以需要一些简单的步骤来实现。1. 安装Hadoop。本文

2011-12-21 09:36:00 1409

转载 eclipse插件不显示的解决方法

有时启动Eclipse未加载插件,解决方法很多,总结一下: a 、 删除整个目录/eclipse/configuration/org.eclipse.update/,(eclipse3.4 全新推出的更新管理器,如果我们想清空eclipse的配置信息,需要保留configuration目录下的config.ini和org.eclipse.equinox.simpleconfigurator

2011-12-21 09:31:24 928

转载 基于Eclipse的Hadoop应用开发环境配置

转自:http://www.cnblogs.com/flyoung2008/archive/2011/12/09/2281400.html我的开发环境:操作系统centos5.5 一个namenode 两个datanodeHadoop版本:hadoop-0.20.203.0Eclipse版本:eclipse-java-helios-SR2-linux-gtk.tar

2011-12-20 17:08:47 770

转载 Hadoop完全分布式配置

转自:http://www.cnblogs.com/flyoung2008/archive/2011/11/29/2268302.html环境:CentOs5、hadoop0.20.203、jdk1.6.0_29namenode:centos1(ip:192.168.1.101)datanode:centos2(ip:192.168.1.103)、centos3(ip:

2011-12-20 17:07:16 602

转载 JDK Self-Extracting Binary Installation for Linux (32-bit)

System RequirementsSystem ConfigurationsInstallation InstructionsThis procedure installs the Java Development Kit (JDK) for 32-bit Linux, using a self-extracting

2011-12-19 17:33:51 836

转载 .bash_profile和.bashrc的什么区别

/etc/profile:此文件为系统的每个用户设置环境信息,当用户第一次登录时,该文件被执行.并从/etc/profile.d目录的配置文件中搜集shell的设置./etc/bashrc:为每一个运行bash shell的用户执行此文件.当bash shell被打开时,该文件被读取.~/.bash_profile:每个用户都可使用该文件输入专用于自己使用的shell信息,当用户登

2011-12-19 17:15:45 329

原创 linux下vi命令大全

转自:http://www.cnblogs.com/88999660/articles/1581524.html进入vi的命令 vi filename :打开或新建文件,并将光标置于第一行首 vi +n filename :打开文件,并将光标置于第n行首 vi + filename :打开文件,并将光标置于最后一行首 vi +/pattern filename:打开文件,并将光

2011-12-19 17:02:00 352

修改后的hadoop-eclipse-plugin-0.20.203.0

hadoop-eclipse-plugin-0.20.203.0 插件无法连接 问题,重新布到eclipse/plugin后启动eclipse需要 -clean一下

2011-12-21

jco(sap java connector)

jco(sap java connector)帮助文档和jar包

2008-09-03

mfc42.dll

fedora下用wine安装QQ,试过几个版本的mfc42.dll都不行,这个可以,其他需要的dll有 mfc42.dll,msvcp60.dll,riched20.dll,riched32.dll

2008-07-08

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除