weixin_43864336的博客

原创 Hive 动态分区向表插入数据报错 GC overhead limit exceeded （分区过多场景）

hive 报错 动态分区 数据量很小，但是分区比较多的情况可以适用下面参数–启用自动排序参数，强制产生reduce任务。

原创 mysql启动时报错：Starting MySQL... ERROR The server quit without updating PID file (/opt/mysql/data/mysql

该报错需要结合mysqlerr日志看，err日志目录在mysql的my.cnf文件中查找。通过查看日志报错2022-02-11T06:46:13.661051Z 0 [Note] --secure-file-priv is set to NULL. Operations related to importing and exporting data are disabled2022-02-11T06:46:13.661154Z 0 [Note] /usr/local/mysql/bin/mysqld

原创 error: src refspec dev does not match any. git报错 && idea上传项目至gitlab教程 && .ignore生效方式

原因git push时选取的本地分支进行推送，如果推送的分支在本地分支中不存在，就会产生报错src refspec dev does not match any注意推送的分支名一定要和本地的分支名一样解决创建一个对应的dev branch：git checkout -b (分支名-要和远程分支名一样才行)...

原创 oracle mysql SqlServer 元数据查询sql

oracle mysql SqlServer 元数据查询sqlSqlserver:查询所有表名 和表信息如下：SELECT 表名 = d.name,--case when a.colorder=1 then d.name else '' end, 表说明 = case when a.colorder=1 then isnull(f.value,'') else '' end, 字段序号 = a.colorder, 字段名 = a.na

原创 mysql，oracle 一键转hive建表语句、oracle转hive表结构转换脚本 、mysql转hive、oracle转hive

**mysql转hive转换脚本：**SET SESSION group_concat_max_len = 102400;SELECT a.TABLE_NAME , b.TABLE_COMMENT , concat('DROP TABLE IF EXISTS hive库名.hive表名前缀ods_',a.TABLE_NAME,';CREATE EXTERNAL TABLE IF NOT EXISTS hive库名.hive表名前缀ods_',a.TABLE_NAME ,' (

原创 plsql远程连接oracle数据库及报ORA-12514错误解决

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Markdown编辑器你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar

原创 scala实现类似java的break和continue

8.3 break和continue在scala中，类似Java和C++的break/continue关键字被移除了如果一定要使用break/continue，就需要使用scala.util.control包的Break类的breable和break方法。8.3.1 实现break用法导入Breaks包 import scala.util.control.Breaks._使用breakable将for表达式包起来for表达式中需要退出循环的地方，添加 break() 方法调用示例使用fo

原创 关于flink基于事件时间窗口 不处理末尾窗口数据 或者数据不够一个窗口的时间时 ，一直等待不处理

https://juejin.cn/post/6850418110010179597BoundedOutOfOrdernessTimestampExtractor 的实现中必须要根据新消息中的时间戳来产生水印然后触发窗口计算，我代码中数据源发出10条消息后不够窗口时间的3秒，并且再不产生消息，所以窗口不触发。还有就是末尾窗口剩只够2s的数据 ，不触发最后一个窗口的计算解决方案覆写BoundedOutOfOrdernessTimestampExtractor的getCurrentWatermark方法

原创 scala 不是内部命令或外部命令 解决

scala 不是内部命令或外部命令 解决新电脑安装scala时，先安装的scala，配置好环境变量后，再安装的jdk，结果第一次cmd可以运行scala，关机后再次运行scala不可以，原因是需要先安装jdk再安装scala，如以安装，调整下环境变量的顺序即可，将scala的环境变量放在java的后边![在这里插入图片描述](https://img-blog.csdnimg.cn/20210518092805902.png?x-oss-process=image/watermark,type_ZmFu

原创 虚拟机克隆后无法联网

问题：centos-6.9 虚拟机克隆后，修改ip，修改MAC地址，并删除rm -rf /etc/udev/rules.d/70-persistent-net.rules文件后，执行了reboot重启命令。这时可以联网，ifconfig也有eth0和IP，但是，当我关机后再次重启，ifconfig没有eth0只有io。也ping不了百度（nat模式联网）解决：再次删除了rm -rf /etc/udev/rules.d/70-persistent-net.rules文件，然后reboot，发现可以ping百

原创 Java两个对象的HashCode相等但这两个对象不一定相同------hash算法

Java两个对象的HashCode相等但这两个对象不一定相同------hash算法hash算法是一种思想，例如最简单的哈希函数：求余运算。例如有不同的整数通过对指定数（如2）的求余运算得到余数就那么几个。不同的整数可可以得到相同的余数即hash值HashCode就是将对象的内存地址转化为整数后进行hash运算后得到的hash值。所以两个对象的HashCode相同但内存地址不一定相同。HashMap的底层也是这样实现的。数组加链表（如下图），当我们往HashMap中put元素的时候，先根据key

原创 抽象类的抽象方法自己能不能调用

原创 mybatis分页插件，数据重复问题

使用mybatis分页插件时，页面点击下一页会有数据重复问题解决方案: SQL上加上order by排序，唯一排序

原创 ireport在Linux打印报错

需在打印类中开启支持图形化参数

原创 Linux命令总结

原创 linux下tomcat的shutdown命令杀不死进程

我用#CSDN#这个app发现了有技术含量的博客，小伙伴们求同去《linux下tomcat的shutdown命令杀不死进程》, 一起来围观吧 https://blog.csdn.net/weixin_30321709/article/details/95792330?utm_source=app

原创 bootstraptable设置列的宽度width无效解决方案

给table标签设置style=＂table-layout: fixed;＂然后再在JS中设置

原创 关于微服务通过网关zuul调不到解决

今天项目中，之前一直好好的一个微服务突然调不到自己使用postman直接掉微服务可以调到，通过网关zuul调微服务调不到，分析是网关映射配置问题，查看网关配置文件提交记录都是一个月前了，上周还是可以调到的。既然是映射问题，指定是配置，于是重名了该服务，重新配置了一下，好了。就是将服务名renewal改为renewal-policy就好了。后来发现问题所在，在网关配置文件中renewal微服务下边新增了一个微服务policydetail，但是这个serviceID也为renewal，访问网关的/act

原创 bootstrap文件上传 关于删除按钮失效或 上传后再次上传点击删除无效解决方案

点击上传按钮时初始化上传,既下述代码$("#file-1").fileinput({language: ‘zh’,// 语言，需要汉化js,引入js……})

原创 serialVersionUID是用来

总结serialVersionUID是用来验证版本一致性的。所以在做兼容性升级的时候，不要改变类中serialVersionUID的值。特别说明一下，由于本文标题并不完全能表达本文的全部内容，这里再强调一下：serialVersionUID 既然是验证版本一致性的，在做版本升级的时候（非兼容性升级），记得要修改这个字段的值哦，这样可以避免序列化混乱。如果一个类实现了Serializable接口，一定要记得定义serialVersionUID，否则会发生异常。可以在IDE中通过设置，让他帮忙提示，并且可

原创 Excel导入时，double转string不丢失小数点位数

操作Excel的poi//操作Excel的poidouble value = cell.getnumericCellValue()int bits =100；DecimalFormat df = new DecimalFormat();// 设置小数点位数df.setMaximumFractionDigits(bits);// 避免千分位的时候又出现","df.setGroupingUsed(false);df.setDecimalSeparatorAlwaysShown(false)

原创 oracle索引碎片

每次更新和删除索引字段都会增加索引碎片，目前项目中更新日志表是查出来vo后，更新某几个字段后在通过vo来更新，若索引字段并没有变化，就会生成无用索引碎片，方案，只更新要更新的字段。...

原创 手续费总结

整个重构过程贯穿了"走时比来时更干净"的约定分交易针对犹退等延时生效的交易，如晚上同步后才可计算的交易，通过同步插入轨迹表后才计算通过数据库控制计算哪些交易修改后: 将抽数权限下发到每个交易，每个交易的抽数逻辑可能不一样之前计算代理手续费通过交易日志vo贯穿所有计算方法，改变取数方式时发现改动太大，是因为对交易日志vo依赖过大导致，解决方案:通过统计计算手续费所需信息反推出一个vo，这样各个交易取数后build这个vo传递即可，达到了共用的目的...

原创 关于IE开发工具打开不显示原因

找到底部开发工具快捷窗口按住shift加右键选择最大化

原创 关于Oracle批量插入

mybatis＋oracle批量插入时 循环里的获取字段必须用item.字段名来获取，否则获取不到

原创 关于上传文件注意事项

上传文件最好上传到一个文件服务器生成的临时文件不要放在项目中，时间长了会拖慢项目启动速度，总会有些垃圾文件没删掉，放在项目外

原创 非spring管理员的类的事物

目前项目不让用spring多实例，重构代码时把变量提为全局变量，如果并发则会出现问题，所以决定不使用spring控制，每次都new一个这个类，可是要用到spring事物，spring事物对非spring管理的类不生效，这就没办法了，，只能降为局部变量，如果用spring多实例的话，就可以了。。下边是spring事物不生效的情况原文链接:https://blog.csdn.net/wxwsfl/article/details/104058809...

原创 代码整洁之道学习总结

函数要短小注释要少todo注释的使用:指要去做的事，包括未来要删除或者恢复某块代码

原创 关于git忽略文件不生效

网上找到git文件不生效的解决办法:git rm -r --cached .git add .git commit -m “update gitignore”输入上述三个命令后，最后一步是提交到本地仓库，但是发现还需要提交到远程仓库才行，这样的话所有人都得拉下代码，虽然不会报错，但也很麻烦，如果每个人修改本地代码，拉代码时都会有冲突，他人提交我这拉也会有冲突，所以需要赶紧推送到远程，，但...

原创 微服务本地运行可以放服务器上404

微服务本地运行可以放服务器上404问题情况：本地启动微服务可以访问，放到服务器上后，访问报404，查看Eurka服务器已经注册，并且服务器正常启动，就是访问404解决：需要到网关zuul服务的配置文件中添加对应服务的路由映射，#自定义路由映射zuul:routes:order-service: /apigateway/order/**product-service: /apigate...

原创 easyui-ie8-1.输入框改变时隐藏和展示div出问题；2.bootstrap按钮点击恢复原始状态

1.把.hide和.hide和.hide和.show div单独写一个方法然后引用即可2.使用settimeout

原创 eclipse包变成白色，包里嵌套包

一种情况是包里嵌套了包会变成白色，不影响

原创 导入项目总结

导入项目问题总结1.导入maven项目时，先远程拉取（按已有项目拉去）到本地，然后在eclipse中假删除，找到该项目所在真实位置，import maven项目找到该项目导入即可。2.修改jdk版本先在windows 下的首选项修改jdk版本，在检查项目中的jdk版本是否修改，没有则需修改删除，右键项目修改buildpath，修改项目首选项中的compile及projectpouduct（好像...

原创 Oracle数据库安装总结

oracle数据库安装总结安装64位oracle11g数据库后，安装plsql时需要安装一个32位的oracle客户端，plsql没有64位的安装完数据库后需要先创建一个用户，分配权限，然后用这个用户去登陆创建表...

原创 发送json字符串，后台接收不到

发送json字符串，后台接收不到，报applicant/www－什么什么的错误解决，在ajax请求处指定contentType: 'applicantion/Jason;charset=UTF-8

原创 注入bean注入不进来找不到的报错

在@component注解下引用@autowired注解注入时发现注入不进来，找不到bean，结果是注解的包导错了

原创 autowired注解bean后 调用该bean时为null

错误总结autowired注解bean后调用该bean时为null原因 调用该bean的方法为private，改为public即可

原创 rpc和resultful 区别

rpc面向方法 feign组件就是类似resultful面向资源 通过http就可以访问

原创 request和jsp

httpRequest类时javaEE运行库里的一个类，只要配置好了tomcat运行环境就有它了，它就是jsp里的内置对象jsp九大内置对象：session request response，application，page，config，pagecontext，exception，out。没有cookie。cookie是从request里获取的，page代表当前jsp，pagecontext...

原创 为什么Java文件要在src目录下

因为eclipse要编译java文件问class文件，默认去src目录下找这些文件编译，你可以更改buid path source folder 到你自定义的放java文件的目录，你还可以指定class文件输出到那个目录下...