- 博客(14)
- 资源 (56)
- 收藏
- 关注
RSS订阅
原创 关于使用ETL工具Kettle的简单介绍（三）
该篇将介绍多表关联转换的ETL流程这里说到的多表关联转换是特指一个表的一条记录到多个表的多条记录和多个表的多条记录到一个表的一条记录。这里没有涉及横转纵和纵转横，这两种情况在最后会略做说明。环境描述：该业务逻辑的转换是基于一张主表、多张辅表进行设计的。比如一张股票信息表，源端中该表关于机构的仅仅包含机构编号，没有机构名称。而在目的端中该表包含有机构名称。在处理该过程中，需要将源端的股票
2011-12-24 16:52:17
1732
原创 关于使用ETL工具Kettle的简单介绍（二）
该篇主要描述已实现的一种ETL过程：环境描述：由于源端的表结构和正式库的表结构大部分是一一对应的，所以对于这大部分表进行设计了一套通用的过程进行转换。现在先来描述该套设计，对于一对多和多对一的过程下章进行描述。设计概述：主要需要设计几个所需的表，TB_MAPPING TB_TRANSCONF TB_ETL_ERROR_LOGn 第一个表：该表是用来配置源端表结构与目的端表结构
2011-12-24 16:44:24
2489
原创 关于使用ETL工具Kettle的简单介绍（一）
好久没有来这里写东西了，这几天把这一年来使用ETL工具--Kettle的情况跟各位分享一下。接下来将这一年来实现的功能脚本粘上来跟各位分享一下吧。今天说的是我设计的整个ETL架构，这个也是最主要的一块。不知是否正确，如果不对还望各位牛人指正！就献丑了。。。在说到具体之前，我个人认为要想设计好ETL架构必须处理好以下条件：当源头发生数据的增删改时，后面的所有过程必须可以捕获到对应数据
2011-12-24 16:25:55
4113
1
原创 linux系统 tomcat启动正常 访问不到主页面
<br />环境：<br /> linux系统<br /> tomcat 6.0.24<br /> jdk 1.6<br /> <br />防火墙的问题<br />查看防火墙命令：chkconfig --list | grep -i iptables<br />关闭防火墙命令：/sbin/service iptables stop<br /> <br />[root@etl01 bin]# ./shutdown.sh ======
2011-01-21 16:23:00
12166
原创 用ETL工具kettle实现的一个需求
<br />通过最近一段时间的学习，对kettle有了大致的了解，也通过该工具实现需要的需求。<br />我介绍下我的需求：<br /> 数据流程：源(外购数据，网页抓取，人工采集)<br /> 源和目的端的表结构完全不一样，这里就包含了三种情况：一对一、一对多、多对一。其中一对多包含两种情况：一个表的一条数据到一个表的多条数据，即横转纵。这个插件在kettle中有。第二种是一个表的一条数据到多个表的多条数据，这种情况就相当于是多个一对一的情况。多对一就是反过来了。除了这些其实还有一个特
2010-12-29 09:36:00
2050
原创 Firefox 常用web开发插件
Firefox常用web开发插件<br />Debugging工具<br />1、 Firebug<br /><br /> Firebug是firefox下的一个插件,能够调试所有网站语言,如Html,Css等，但FireBug最吸引我的就是javascript调试功 能，使用起来非常方便，而且在各种浏览器下都能使用（IE,Firefox,Opera, Safari），简直难以置信。除此之外，其他功能还很强大。比如html,css,dom的察看与调试，网站整体分析等等。总之就是一
2010-07-26 16:46:00
571
原创 js-window对象
熟练window对象的open、close、alert、confirm、prompt、setTimeout、clearTimeout、setInterval、clearInterval、moveBy、resizeBy、scrollBy方法的使用 掌握window对象的moveTo、resizeTo、scrollTo、print方法的使用 熟练掌握window对象的status、location、name、self、opener属性的使用Window对象是客户端javascript最高层对象之
2010-07-22 15:45:00
529
原创 用Javascript获取Iframe中的内容(兼容IE&firefox)
<br />在IE下操作IFrame内容的代码: <br /><br />document.frames["MyIFrame"].document.getElementById("s").style.color="blue"; <br /><br />但是这在Firefox下无效。 <br />所以，想到在Firefox下用FireBug来调试。经过调试发现在Firefox下可用以下代码来实现: <br /><br />document.getElementById("MyIFrame").contentD
2010-07-22 14:47:00
1003
原创 JS操作table
<br />虽然现在前台已经很少用table来布局了，但是有的地方还是会难免的用到table，比如表单，或者其他的列表，用table肯定比div来的方便，那么，用table的话要加上js来实现一些效果，比如删除一行，添加一行，所以，有必要好好熟悉一下js对table的操作，<br />首先要获得table对象，有很多方法，<br />通过ID，table = document.getElementById()来获得<br />通过CLASS，table = document.getElementsByCla
2010-07-22 14:22:00
13021
原创 postgreSQL自学篇一
<br />系统表：<br />pg_shadow存放用户信息<br />pg_group 用户组的信息<br /><br />1、create user username option <br />{with password ''<br /> createdb | nocreatedb<br /> createuser | nocreateuser<br /> in group groupname<br /> valid utill '2005-01-01'}<br />alter user user
2010-07-22 08:41:00
893
原创 linux自学篇-------------压缩文件命令
l 压缩文件的命令1. 原始的：compress，压缩后的后缀名为.Z。（现在用的频率很小！） 范例： 注意：与上反之，压缩文件被取代。2. gzip, zcatgzip 是用来压缩与解压缩附档名为 *.gz 的指令！所以看到 *.gz 的档案时，就应该要知道他是经由 gzip这个程序压缩的呦！另外， gzip 也提供压缩比的服务！ -1 是最差的压缩比，但是压缩速度最快，而 -9 虽然可以达到较佳的压缩比 (经过压缩之后，档案比较小一些！) ，但是却会损失一些速度！预设是 -6
2010-07-20 16:05:00
405
原创 关于四种XML解析方案的比较：DOM,SAX,JDOM,DOM4J
<br />执行时间解析名称10k100k1000k10000kDOM4j1097810931.00 297359172312.00 2281235923442460.00 20938199222003100000.00 SAX1104710978.00 344406375422.00 3234328136883310.00 3257834313317970000000000.00 jdom1256218794.00 704625640766.00 27984307502785900000.00 OutOf
2010-07-19 10:48:00
726
原创 myEclipse8.0或者8.5 svn插件配置
1、先下载svnmyeclipse插件；2、装好myEclipse8.0或者8.5；3、在myEclipse安装目录下，（我的为D:/Program Files/Genuitec/）有两个文件夹MyEclipse 8.x Latest和Common，在D:/Program Files/Genuitec下创建一个文件夹，名字叫做myPlugin；4、在myPlugin下面再创建一个文件夹eclipse；5、把刚才下载的svn插件features和plugins复制到eclipse文件夹下；6、在D:/Prog
2010-07-12 11:33:00
590
原创 postgreSQL在linux中安装详解
<br />这里安装8.4.4版本，首先下载postgresql-8.4.4-1-linux.bin。<br />（http://www.postgresql.org/download/）下载linux32版本的<br />1. 如果该文件不在linux系统中，将其从Windows拖到linux系统中，放到任意一个目录下，最好放在/opt或者/home。推荐一个Windows文件转到linux的工具：WinSCP3<br />2. [root@william ~]# /postgre
2010-07-12 10:37:00
2464
Spoon_3_0_0_User_Guide.pdf官方详细帮助文档
2011-01-27
json jar包 所有的
2010-08-02
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人