自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(20)
  • 资源 (3)
  • 收藏
  • 关注

原创 miniconda3 PackagesNotFoundError

miniconda PackagesNotFoundError

2024-01-09 21:37:10 359

原创 vscode+svn的配置和简单使用

vs code + svn 的配置和简单使用介绍

2022-08-11 11:21:21 29810 1

原创 centos6-vault的yum源

yum源镜像

2022-07-14 16:36:53 516

原创 oracle 复制表

1、只复制表结构的sqlcreatetablebasselect*fromawhere1<>12、即复制表结构又复制表中数据的sqlcreatetablebasselect*froma3、Oracle复制表的制定字段的sqlcreatetablebasselectrow_id,name,agefromawhere1<>1前提是row_id,name,age都是a表的列4、复制表的指定字段及这些指定字段...

2021-08-24 16:27:15 612

原创 centos上oracle设置开机自启动

1、开启数据库允许开机自启vi /etc/oratab#Y允许,N不允许dlfx:/u01/app/oracle/product/11.2.0/db_1:Y2、配置centos开机执行start命令vi/etc/rc.d/rc.local#oracle开机自启su oracle -lc 'dbstart'su oracle -lc 'lsnrctl start'...

2021-07-15 15:55:19 521

原创 linux 删除所有kettle进程

kill -s 9 `ps aux | grep java | grep pentaho | awk '{print $2}'`

2021-05-01 15:53:34 1147

原创 centos7扩展根目录空间

文章来源https://zhidao.baidu.com/question/1993977780089581747.html把/home内容备份,然后将/home文件系统所在的逻辑卷删除,扩大/root文件系统,新建/home:tar cvf /tmp/home.tar /home#备份/homeumount /home#卸载/home,如果无法卸载,先终止使用/home文件系统的进程lvremove/dev/centos/home #删除/home所在的lvlvextend-...

2021-04-29 11:31:48 106

原创 kettle组件javaScript脚本案例3 生成新行

该案例是kettle自带例子,位置在安装目录下的data-integration\samples\transformations\JavaScript - create new rows.ktr转换作用说明:把一行数据Group1, Group2, Group3, Group4转换成四行数据Group1Group2Group3Group4组件Generate Rows,输入组件,生成测试数据组件Dummy (do nothing),空操作,拼接数据流,...

2020-12-04 10:45:11 1240

原创 kettle扩大运行内存

机器内存大,kettle却还是报错内存溢出,这时候可以尝试调整kettle的运行内存在windows中运行修改Spoon.bat文件中的参数PENTAHO_DI_JAVA_OPTIONS-Xms最小运行内存,-Xmx为最大运行内存,m为内存单位,也可以直接设置g为单位在linux中修改spoon.sh的参数PENTAHO_DI_JAVA_OPTIONS-XX:MaxPermSize=256mJVM最大允许分配的非堆内存,java8以上中已经移除了该参数,如果使用的jdk8以上可以把.

2020-12-04 09:42:07 5525 1

原创 centos下python3安装

1.安装依赖 yum install -y gcc patch libffi-devel python-devel zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel2.下载源...

2020-01-02 10:45:22 103

原创 kettle自定义拼接json格式输出,arcgis的json格式为例子

先上图,速度的话我跑了20万数据,16个字段,14000条/秒,机器是自己笔记本i5处理器,kettle给了4g内存1.源数据如下,field01字段可能有特殊字符,需要把字段field05的经度和纬度截取出来2.目标数据是arcgis的json格式数据,最后的拼接结果是一行数据并没有格式化,这里为了方便看{ "displayFieldName": "", "fiel...

2019-12-10 11:48:34 4616

原创 kettle循环解决连接oracle数据库报错Connection reset

介绍两种循环方式,一种是官方自带例子,通过job组件执行每一行来循环,第二种通过javaScript脚本组件循环1.kettle8官方案例文件位置:$KETTLE_HOME/samples/jobs/process all tables这个例子是先获取数据库中的所有表名,统计表格表的数据条数,最后输出到txt上包含文件和作用:流程控制总jobtransformati...

2019-07-04 11:15:33 3085 3

原创 kettle组件javaScript脚本案例2 设置变量和获取变量

文件位置:$KETTLE_HOME/samples/transformations/data-generator/JavaScript - Access environment variables.ktr组件1:Generate Rows生成10行,没有列组件2:Java Script ValuegetVariable(strVarName, "")和setVariable...

2019-07-01 12:17:53 7204

原创 vmware克隆虚拟机、我已复制、我已移动

使用vmware12、centos7克隆虚拟机:ip地址没变,mac地址变化拷贝虚拟机后开机选项:我已移动该虚拟机:ip地址和mac地址不变我已复制该虚拟机:ip地址和mac地址变化...

2019-06-28 11:40:49 1406

原创 kettle组件javaScript脚本案例1

javaScript脚本这个组件用处还是很方便的,比如:js脚本写起来很方便,不用像java脚本要有固定的代码块,输出字段也要写两遍;创建新行,一行变多行;使用java类;封装好了很多方法,字符串、日期、数字、文件操作相关常用的方法都封装好了;可以写多个javaScript脚本,自定义function,定义js全局变量;案例1:生成随机字符串.文件位置:$KETTL...

2019-06-26 16:36:45 7458

原创 centos6,centos7离线升级openssh到最新版本

打包下载:以下用到的所有安装包和依赖包1.安装telnet服务和客户端 1.1按顺序执行 cd ~/package/telnet rpm -ivh xinetd-2.3.14-40.el6.x86_64.rpm rpm -ivh telnet-server-0.17-48.el6.x86_64.rpm...

2019-05-28 19:35:47 3792 2

原创 windows下kettle环境搭建

1.安装软件准备pdi-ce-8.2.0.0-342.zip,jdk-8u161-windows-x64.exe不同kettle需要不同版本的jdk支持,kettle8必须使用jdk8以上版本pdi-ce-8.2.0.0-342.zip下载https://sourceforge.net/projects/pentaho/files/Pentaho%208.2/client-too...

2019-04-03 11:17:33 3356

原创 Linux下Oracle图形界面安装、静默安装和卸载总结

Linux带图形界面安装oraclelinux下安装oracle还是比较麻烦,官方在线文档1.详细安装步骤,有步骤解释和截图参考博客2.安装完后配置listener.ora和tnsnames.ora两个文件,把主机名修改成本机ip才能远程连接数据库listener.ora参考配置# listener.ora Network Configuration File: /u01...

2018-07-31 19:41:25 1454

原创 Linux下kettle安装和crontab定时任务

运行./pan.sh 后 .kettle目录会再配置的KETTLE_HOME目录下面生成,如果没有配置KETTLE_HOME这个目录会在当前用户家目录生成,.kettle目录下会生成kettle.properties,这个文件是用来配置kettle全局变量的,一般数据库连接ip地址,用户,密码都可以配置在这个文件,另外还可以覆盖kettle一些自带的变量值。crontab需要注意的一个是:比如设置每22分钟运行一次,那么会在每个小时0分钟,22分钟,44分钟运行,并不是每加22分钟运行一次。

2018-07-07 23:34:38 1962 1

原创 Windows下Oracle安装

1.安装软件 Windows:https://www.cnblogs.com/hoobey/p/6010804.html2.配置监听器和本地网络服务名 在Windows下可以使用Oracle自带的工具Net Configuration Assistant配置监听器和本地网络服务名 配置完后的两个文件listener.oraSID_LIST_LIS...

2018-03-06 11:45:41 328 1

telnet+vsftp+openssh+centos6-7.rar

telnet+vsftp+openssh,centos的离线rpm安装包和依赖包,离线升级openssh教程

2020-04-30

connection_reset.rar

解决oracle数据库发生'Connection reset by peer' or 'Connection reset'的错误 这边的数据库连接是kettle自带的h2数据库,只要有kettle就有这个数据库,目录位于data-integration\samples\db\,连接方式是 SampleData/type=javax.sql.DataSource SampleData/driver=org.h2.Driver SampleData/url=jdbc:h2:file:samples/db/sampledb;IFEXISTS=TRUE SampleData/user=PENTAHO_USER SampleData/password=PASSWORD 连接不上的话url写成全路径试试,测试循环的话可以把密码改了再运行

2019-12-10

output-json.ktr

kettle自定义拼接json格式输出,arcgis的json格式为例子,速度的话我跑了20万数据,16个字段,14000条/秒,机器是自己笔记本i5处理器,kettle给了4g内存

2019-12-10

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除