GE12-CSDN博客

原创达梦常用命令

SELECT username FROM all_users;

2024-03-14 17:29:06 392

在多源校核的过程中，需要对多个数据源进行比对，从而得出数据的准确性，保证数据的可靠性。在一数一源的校核过程中，只需通过比对，就能够判断数据的准确性，从而避免数据的错误导致的经济损失和其他问题。数据的准确性和可靠性不仅关系到企业的经济效益，还关系到政府的决策和公共安全。在数据校核中，一数一源和多源校核是两种常见的方式。数据校核的重要性不言而喻，但是在实际应用中，数据的准确性和可靠性往往会受到各种因素的影响。比如，对于企业的财务数据，可以先使用一数一源的方式进行初步校核，再使用多源校核的方式进行进一步的验证。

2023-12-15 17:48:35 495

原创 python 对比数据库，生成sql

【代码】python 对比数据库，生成sql。

2023-11-21 12:01:52 255

原创 MySql生成随机时间

【代码】MySql生成随机时间。

2023-01-10 11:59:36 286

原创 ES 查询并更新命令

【代码】ES常用命令。

2023-01-06 14:28:19 805

原创存储过程遍历更新

- code放在这里表示没遍历一次重新生成一次。-- 将游标中的值再赋值给变量，供下次循环使用。-- 当s不等于1，也就是未遍历完时，会一直循环。-- 当s等于1时表明遍历以完成，退出循环。-- 定义游标，并将sql结果集赋值到游标中。-- 声明当游标遍历完后将标志变量置成某个值。

2022-11-25 12:01:59 680

原创 SQL：不存在则 insert, 存在则 update

注意，除非表有一个PRIMARY KEY或UNIQUE索引，否则，使用一个REPLACE语句没有意义。该语句会与INSERT相同，因为没有索引被用于确定是否新行复制了其它的行。条件进行过滤数据的操作，它可以跟一个子查询然后返回查询结果是否为空。在给定条件下可以返回一个空的子查询，使得插入的。如果表中有一个自增的主键，那么就要出问题了。，则在新记录被插入之前，旧记录被。所以还需要你有删除数据的权限。这条记录是不存在的，那么执行。在数据库中是存在的，那么执行。子句返回的是一个空的结果。

2022-11-25 10:49:37 667

转载常用SQL语句大全

1基础1、说明：创建数据库2、说明：删除数据库3、说明：备份sql server— 创建备份数据的 deviceUSE master— 开始备份4、说明：创建新表根据已有的表创建新表：A：create table tab_new like tab_old (使用旧表创建新表)5、说明：删除新表6、说明：增加一个列注：列增加后将不能删除。DB2中列加上后数据类型也不能改变，唯一能改变的是增加varchar类型的长度。

2022-11-21 10:57:05 2946

原创去除空格，水平制表符：CHAR(9)、换行符：CHAR(10)、回车符：CHAR(13)

水平制表符：CHAR(9)、换行符：CHAR(10)、回车符：CHAR(13)

2022-10-17 16:01:47 511

原创数据治理的方法

数据治理的目的是使用，对于一个大型的数据仓库来说，数据使用的场景和需求是多变的，那么可以使用 BI 类的产品快速获取需要的数据，并分析形成报表，比较知名的产品有 Microsoft Power BI，QlikView，Tableau，帆软等。：数据治理的第一个步骤是从业务的视角厘清组织的数据资源环境和数据资源清单，包含组织机构、业务事项、信息系统，以及以数据库、网页、文件和 API 接口形式存在的数据项资源，本步骤的输出物为分门别类的数据资源清单。

2022-10-10 16:07:57 301

转载领域建模常用方法

领域建模常用的方法有用例分析法、四色建模法以及事件风暴法。这里主要讲讲常用的用例分析法。

2022-09-19 14:32:27 681

原创 python调用接口脚本

!import sys#接口请求地址#请求头headers={}"sqlId":9}#转换成json#构造发送请求#打印响应数据"exit(0)

2022-09-07 15:58:51 1107

原创 MySQL加密解密

SELECTHEX(aes_encrypt('password你啊','salt'))

2022-07-22 17:35:55 166

原创 Datax跨时区

源库与目标库时区不同时，执行datax.py命令时需要添加如下参数。"-Duser.timezone=xx时区"例如，DataX导入PostgreSQL中的数据，源库是UTC时间，在dataX启动时加上参数"-Duser.timezone=GMT+0"。

2022-04-02 11:20:39 1124

原创 es match、match_phrase、query_string和term的区别

一）text字段和keyword字段的区别以下给出一个例子：首先建立一个索引和类型，引入一个keywork的字段：PUT my_index{ "mappings": { "products": { "properties": { "name": { "type": "keyword" } } } }}然后查询是否有索引：GET _cluster/state可以看到已经创建成功：

2022-03-31 15:59:35 353

转载非结构化数据怎么存？——开源对象存储方案介绍

过去的相当长的一段时间里，商用对象存储占据了市场上的大量的份额。国外的Amazon S3，国内的阿里云OSS都成为了大多数公司的选择。但是构建一个企业级的数据湖（包括结构化和非结构化数据）已经成为了越来越多公司的目标。那么Hadoop还能满足我们的要求吗？还是我们需要更多的选择？存储方案如图所示，底层存储大体可以分为四类。对象存储（Object Storage），NoSQL 数据库（NoSQL Sources），关系型数据库（RDBMS Storage），大数据（Hadoop）。对于大量的数

2021-11-12 11:26:46 931

转载 docker 安装

The wicked map keeps getting lost for you Introduction Download the Docker source package of the ARM architecture Configure Docker Verify configuration IntroductionAbout the operating systemView the kernel version numberuname -rV..

2021-07-31 17:53:10 223

原创 mysql 导出表结构

SELECT "表名", "ads_company_talent_pulish", "", "", "", "", " "UNIONSELECT "列名", "数据类型", "字段类型", "长度", "是否为空", "默认值", "备注 "UNIONSELECT COLUMN_NAME 列名, COLUMN_TYPE 数据类型, DATA_TYPE 字段类型, CHARACTER_.

2021-05-21 19:30:46 1614

原创 ES常用命令

启动：/etc/init.d/mysql start停止：/usr/bin/mysqladmin -u root -p shutdown重新启动：sudo/etc/init.d/mysqlrestart

2021-04-25 18:10:41 138

原创使用 keepalived 设置虚拟 IP 环境

使用 keepalived 设置虚拟 IP 环境准备准备两个机器，IP地址信息如下：host1： 192.168.56.103host2： 192.168.56.104为了测试需要，分别在两个机器上安装apache并启动httpd服务，使下面两个url均可访问- http://192.168.56.103- http://192.168.56.104安装 keepalived在两台机器上分别安装 keepalived$ sudo yum install -y keepalived

2021-03-12 11:30:45 1955

原创 java.util.concurrent 之Condition类

http://nginx.org/en/docs/

2021-03-10 11:53:18 156

原创 hadoop web 端口安全认证

Hadoop集群配置完成，web监控界面的50070和50030端口不需用户验证即可访问，对生产环境是不容许的，需要加上安全机制。1、修改core-site.xml，增加如下内容，配置完成后拷贝到其他节点上。 <property> <name>hadoop.http.filter.initializers</name> <value>org.apache.hadoop.security.AuthenticationFilterInit...

2021-01-29 16:53:53 841

原创 linux服务器内网磁盘映射、文件夹共享存储

linux服务器内网磁盘映射、文件夹共享存储1、当前局域网两台服务器：服务器1：192.168.1.2服务器2：192.168.1.3如果是虚拟机或者云主机需要在安全组增加允许tcp 任何端口访问 192.168.1.0/24想把服务器2：192.168.1.3的某个文件夹或某块磁盘挂载到服务器1：192.168.1.2的/home/share路径进行文件同步存储2、开始设置2.1 服务器1：192.168.1.2 设置$yum install nfs-utils.x86_64$

2020-12-25 17:50:59 1535

原创 sqoop 导入中文乱码

1.更改数据库编码show variables like 'character%';set character_set_client = utf8;set character_set_connection = utf8;set character_set_database = utf8;set character_set_server = utf8;set character_set_server = utf8;2.导出命令sqoop import --connect "jd

2020-12-11 10:27:31 660

原创 yarn cgroups介绍及安装

1.要在较新版本的CentOS上使用cgroup，您需要安装 libcgroup 以及 libcgroup-工具： $ sudo yum install libcgroup $ sudo yum install libcgroup-tools 2.查看运行状态，并启动服务[root@localhost ~]# service cgconfig statusStopped[root@localhost ~]# service cgconfig startStarting cgco.

2020-11-25 10:28:54 655

原创 CentOS7中使用yum安装Nginx的方法

1、添加源　　默认情况Centos7中无Nginx的源，最近发现Nginx官网提供了Centos的源地址。因此可以如下执行命令添加源：sudo rpm -Uvh http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch.rpm2、安装Nginx　　通过yum search nginx看看是否已经添加源成功。如果成功则执行下列命令安装Nginx。sudo yum i.

2020-11-20 15:47:42 459

原创 Elasticsearch分片、副本与路由(shard replica routing)

1、预备知识1）分片（shard）Elasticsearch集群允许系统存储的数据量超过单机容量，实现这一目标引入分片策略shard。在一个索引index中，数据（document）被分片处理（sharding）到多个分片上。Elasticsearch屏蔽了管理分片的复杂性，使得多个分片呈现出一个大索引的样子。2）副本（replica）为了提升访问压力过大是单机无法处理所有请求的问题，Elasticsearch集群引入了副本策略replica。副本策略对index中的每个分片创建冗余的.

2020-06-17 11:58:25 564

原创 ELK日志分析系统

官网地址:https://www.elastic.co/cn/官网权威指南:https://www.elastic.co/guide/cn/elasticsearch/guide/current/index.html安装指南：https://www.elastic.co/guide/en/elasticsearch/reference/5.x/rpm.htmlELK是Elasticsearch、Logstash、Kibana的简称，这三者是核心套件，但并非全部。Elasticsearch是实

2020-06-17 10:17:00 266

原创 Spring Boot 之@Component、@configuration

Spring 2.5 中除了提供 @Component 注释外，还定义了几个拥有特殊语义的注释，它们分别是：@Repository、@Service 和 @Controller。在目前的 Spring 版本中，这 3 个注释和 @Component 是等效的，但是从注释类的命名上，很容易看出这 3 个注释分别和持久层、业务层和控制层（Web 层）相对应。虽然目前这 3 个注释和 @Component 相比没有什么新意，但 Spring 将在以后的版本中为它们添加特殊的功能。所以，如果 Web 应用程序采用了

2020-06-05 18:29:13 686

docker-install.rar

perl-centos7.rar

perl-centos6.rar

Google三大论文_中文版

hive-jdbc-2.1.0-standalone.jar

spring-data-redis-1.6.0.RELEASE.jar

jedis-2.9.0.jar

空空如也