xhy的技术专栏

原创 mysql获取中文字段内容

############################################################create table test(id int,info varchar(255));insert into test values(1,'abc中国123');insert into test values(1,'abc123韩国');inse

原创 mysql 的 decode 函数实现

select   ELT(FIND_IN_SET('a','a,b,c,d,e,f,g')+1,'默认','a1','b2','c3','d4','e5','f6','g7')

转载 Hadoop集群中增加新节点

Hadoop集群中增加新节点向一个正在运行的Hadoop集群中增加几个新的Nodes1. 新节点上部署java/hadoop程序，配置相应的环境变量2. 新节点上增加用户，从master上拷贝id_rsa.pub并配置authorized_keys3. 新节点上设置host，需要有集群中各节点的host对应4. 新节点上建立相关的目录，并修改属主

转载 在Hive中创建索引

create table TBL_FACT_SYMBIAN_PACKET(PROVICE_FK  INT,DATE_FK  INT,MODEL_FK  INT,COUNTRY_FK  INT,NETWORK_FK  INT,OSLAG_FK  INT,OS_FK  INT,NQ_SOFTWARE_VER  INT,SUBCOOP_FK  INT,NQ_SOFTWARE_TYPE_FK  INT

转载 Hive 中的日志

日志记录了程序运行的过程，是一种查找问题的利器。Hive中的日志分为两种1. 系统日志，记录了hive的运行情况，错误状况。2. Job 日志，记录了Hive 中job的执行的历史过程。系统日志存储在什么地方呢 ？在hive/conf/ hive-log4j.properties 文件中记录了Hive日志的存储情况，默认的存储情况：hive.root.log

转载 Hive中的数据分区

首先认识什么是分区Hive 中的分区就是分目录，把一个大的数据集根据业务需要分割成更下的数据集。1. 如何定义分区，创建分区 hive> create table test(name string,sex int) partitioned by (birth string, age string);Time tak

转载 hadoop数据迁入到hive

由于很多数据在hadoop平台，当从hadoop平台的数据迁移到hive目录下时，由于hive默认的分隔符是\,为了平滑迁移，需要在创建表格时指定数据的分割符号，语法如下：  create table test(uid string,name string)row format delimited fields terminated by '\t'；通过这种方式，完成分隔符的指定。

转载 hive使用mysql保存metastore

Hive 将元数据存储在 RDBMS 中，有三种模式可以连接到数据库： 1）ingle User Mode： 此模式连接到一个 In-memory 的数据库 Derby，一般用于 Unit Test。 2）Multi User Mode：通过网络连接到一个数据库中，是最经常使用到的模式。 3）Remote Server Mode：用于非 Java 客户端访问元数据库，在服务器端启动一个

转载 Scribe+HDFS日志收集系统安装方法

1、概述Scribe是facebook开源的日志收集系统，可用于搜索引擎中进行大规模日志分析处理。其通常与Hadoop结合使用，scribe用于向HDFS中push日志，而Hadoop通过MapReduce作业进行定期处理，具体可参见日文日志：http://d.hatena.ne.jp/tagomoris/touch/20110202/1296621133其安装非常复杂，主

转载 oracle中去重复记录 不用distinct

用distinct关键字只能过滤查询字段中所有记录相同的（记录集相同），而如果要指定一个字段却没有效果，另外distinct关键字会排序，效率很低 。select distinct name from t1 能消除重复记录，但只能取一个字段，现在要同时取id,name这2个字段的值。select distinct id,name from t1 可以取多个字段，但只能消除这2个字段

转载 Oracle排序过滤重复数据，取最新的数据

问题：在项目中有一张设备检测信息表DEVICE_INFO_TBL, 每个设备每天都会产生一条检测信息，现在需要从该表中检索出每个设备的最新检测信息。也就是device_id字段不能重复，消除device_id字段重复的记录，而且device_id对应的检测信息test_result是最新的。 解决思路：用Oracle的row_number() over函数来解决该问题。解决

转载 IBM InfoSphere DataStage 集群配置管理与应用实践

http://www.ibm.com/developerworks/cn/data/library/techarticle/dm-1111sunch/IBM InfoSphere DataStage 集群配置管理与应用实践跳转到主要内容登录 (或注册)中文技术主题软件下载社区技术讲座

转载 学习网站

转载于 ：  http://blog.sina.com.cn/robertlizhiqiang┣▇▇▇═─ 一个十天教PHP的教程网页/里面也提供AppServ的下载─═▇▇▇┫http://www.cmstong.com/edu/show/148.shtml┣▇▇▇═─ 如何将IIS配成能运行PHP的服务器http://np-gz2.pconline.com.cn/p

原创 Oracle 删除用户下所有表

declarebegin  for tab in (select table_name from user_tables) loop    execute immediate 'truncate table ' || tab.table_name;    execute immediate 'drop table ' || tab.table_name;  end loop;

原创 oracle全文检索

测试环境oracle11gBEGIN  CTX_DDL.CREATE_PREFERENCE('TEST_LEXER', 'CHINESE_VGRAM_LEXER'); --ctx_ddl.create_preference ('SMS_ADDRESS_LEXER', 'CHINESE_LEXER');END;/CREATE  INDEX   IND_T_DZ

原创 myeclipse 读取数据内存不足问题

在JRE 编辑时候，在Default VM Arguments处添加set JAVA_OPTS=-Xms256m -Xmx1024m -XX:MaxNewSize=256m -XX:MaxPermSize=256m如果单独以tomcat启动需要在catalina.bat中 添加如下红字部分rem ----- Execute The Requested Command

原创 ORACLE的DDL语句与已是提交的关系

DDL --  DDL语句是数据定义语句，包括各种数据对象的创建、修改和删除，以及授权等操作。在同一个会话中，DDL执行之前的DML语句会隐式进行commit操作，无论DDL执行成功或者不成功都会提交（DDL语句语法有问题的情况除外）

原创 DATASTAGE:客服端dscc命令使用

编译任务：dscc  /u user_name /p passowrd project_name /j  dir\*======================================stage.bat======================================@echo offcd    "C:\IBM\Informatio

原创 DATASTAGE: oracle_connector控件中PL/SQL的应用

DATASTAGE: oracle_connector控件中PL/SQL的应用oracle connector 控件 选择 PL/SQL mode 时候使用merge的方法：Example:begin  merge into table_name a  using (select orchestrate.id id,orchestrate.name name from dual

转载 windows 命令

gpedit.msc－－－－－--------------------组策略 sndrec32－－－－－－－------------------录音机 nslookup－－－－－－－------------------ip地址侦测器 explorer－－－－－－－------------------打开资源管理器 logoff－－－－－－－－------------------注销

转载 char varchar varchar2 的区别

(以下内容只作个人笔记 !)1：char      CHAR的长度是固定的,最长2000个字符。char的长度是固定的，比如说，你定义了char(20),即使你你插入abc，不足二十个字节，数据库也会在         abc后面自动加上17个空格，以补足二十个字节；

转载 指定tomcat使用的jdk

直接在catalina.bat中添加set JAVA_HOME=C:\Program Files\Java\jdk1.61，修改bin文件夹下面的catalina.bat文件，把如下内容   rem ----- Execute The Reques

原创 MyEclipse7.5 SVN插件安装详细步骤--带图(转)

最近刚装过SVN插件，可算是累死我了，装了N长时间啊，网上也没见有好的步骤介绍，所以就想着自己写写，其实装起来挺简单的啊，只是我没耐心了点才会那么折腾，呵呵! 我使用的是MyEclipse7.5 Blue版本，但是7.5以上的跟这个Blue版本应该是差不多的吧，大家就根据自己的情

原创 MDX（Multi Dimensional Expression-SQL Server 2005

MDX（Multi Dimensional Expression）多维表达式是支持SQL SERVER 2005 Analysis Services（SSAS）的脚本语言。要学习MDX，首先应该了解SSAS中多维数据集的一些基本概念，下面我就主要给大家介绍一下MDX的一些基础 概

转载 深入探讨数据仓库建模与ETL的实践技巧(转)

深入探讨数据仓库建模与ETL的实践技巧这篇论坛文章深入探讨了搭建数据仓库过程中应当遵循的方法和原则，更多内容请参考下文：　　一、数据仓库的架构　　数据仓库（Data Warehouse DW）是为了便于多维分析和多角度展现而将数据按特定的模式进行存储所建立起来的关系型数据库，它的

原创 windows 7 下出现 Microsoft .NET Framework 相关未能初始化的信息

（以下内容只做个人笔记！）前两天一直纠结在windows 7 下出现 Microsoft .NET Framework 相关未能初始化的信息之后查看 C:\Windows\Microsoft.NET\Framework\v2.0.50727\CONFIG\machine.conf

原创 oracle存储过程中调用java

加载jar包loadjava  -u xhy/xhy@xhy -r -f  D:/workspace/lib/commons-io-1.4.jar--------------------------------------------------------create or replace and compile java source named sp_exp_blobtostr aspackage  util;import  java.io.IOExcetion;import  java.sql.SQ

原创 Oracle 物化视图

以下内容只作个人笔记 ！  物化视图(定时刷新)1：在源库上创建物化视图日志      create materialized view logon 源库表 with primarykey（注意:源库表一定要有主键） 2：在中间库上创建物化视图    CREATE MATERIALIZED VIEW MV_WHST_SJ   REFRESH FAST ON

原创 Oracle 系统函数

个人笔记(!) 1.decode(var,var1,var1_1,var2,var2_2,.....,var_n) 函数   select decode(substr('abcd',1,1),'a','1','b','2','0') from dual; = >1   select decode(substr('abcd',3,1),'a','1','b','2','0') fro

原创 Oracle 和 mysql 的一些简单命令对比参照

 Oraclemysql对比版本Personal Oracle7 Release 7.3.4.0.0mysql 3.23.58-nt默认安装目录C:ORAWIN95F:MySQL各种实用程序所在目录C:ORAWIN95BINF:MySQLBIN控制台工具SVRMGR.EXESVRMGR23.EXE

原创 工具-基本控件

原创 js-日历

                                                   ____________________________________________jsp: var oCalendarEn=new PopupCalendar("oCalendarEn");    //初始化控件时,请给出实例名称如:oCalendar

原创 org.apache.commons.collections.ArrayStack ----- ssh 框架报错

javax.servlet.UnavailableException: class "org.apache.commons.collections.ArrayStack"s signer information does not match signer information of other classes in the same package at org.apache.struts.a

原创 无线你的电池　Splashpower推出充电板

现在越来越多东西使用内置电池如手机、PDA、随身听等等。这些设别通常都会随机附送一条充电线给用户。如果用户的设别比较多的话这些充电线就很可能给用户带来不必要的麻烦，如果能将这些电线全部变成无线那该有多好啊。    Splashpower就是这样一种无线充电的解决方案。这种无线充电技术有相当多的方便之处：它可以在一张鼠标垫大小的板上给你的PDA手机等设别充电；板与设备之间没有物理连线，电力是用过