自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(22)
  • 资源 (7)
  • 问答 (1)
  • 收藏
  • 关注

原创 kafka 常用非基础的核心设置项

Topic(s) [……] is/are not present and missingTopicsFatal is true;latest: 消费最新的消息。 earliest:( 表示当没有初始偏移量或者偏移量无效时,)消费者会从最早的可用消息开始消费

2024-04-02 17:42:58 376 3

原创 JVM 查看配置 jinfo 及使用 jstat,查看堆栈jstack及GC

JVM 查看配置 jinfo 及使用 jstat,查看堆栈jstack及GC

2023-08-10 13:37:49 1106

转载 CompletableFuture 笔记

这个方法等待第一个阶段的完成(大写转换), 它的结果传给一个指定的返回CompletableFuture函数,它的结果就是返回的CompletableFuture的结果。它的结果传给一个指定的返回CompletableFuture函数,它的结果就是返回的CompletableFuture的结果,入参为两个任务结果,不返回新结果。其中任一任务完成后,执行Function,结果转换,入参为已完成的任务结果。一任务合并另外一个任务,两个任务都完成后,执行BiFunction,入参为两个任务结果,返回新结果。

2023-08-02 16:18:28 172

原创 【精华】maven 生命周期 + 依赖传递+ scope【依赖范围】 + 排除依赖 可选依赖

【精华】maven 生命周期 + 依赖传递+ scope【依赖范围】 + 排除依赖 可选依赖

2023-07-19 17:49:19 1222

原创 【源码+个人总结】Spring 的 三级缓存 解决 循环依赖

看三级缓存源码,确认解决循环依赖的过程

2023-05-07 23:33:50 931

原创 Spark 超大数据量下OOM的解决

Spark 超大数据量下OOM的解决

2023-02-21 18:02:44 1944

转载 hive创建分区表 hive添加分区 hive删除分区

省流: add if not exists partition

2022-12-20 10:16:05 1047

转载 Spring注解 @Configuration 和 @Component 区别

注解 @Configuration 和 @Component 区别

2022-12-01 20:19:37 121

原创 spark-sql处理json字符串的常用函数

spark-sql处理json字符串的几个常用函数

2022-11-01 16:44:58 5085

原创 解决maven版本冲突——maven-shade

maven中依赖的某个jar包存在依赖多版本时,Could not initialize class的解决方案——maven-shade

2022-10-25 17:45:12 4008 1

原创 Linux运行shell脚本,报错 line x: 某变量: command not found 问题解决

1. 权限问题如果报错 -bash: ./test.sh: Permission denied可以通过下面的命令添加权限:chmod u+x test.sh或chmod a+x test.sh2. 文件格式问题如果报错 command not found按照如下命令,依次输入,三步修改格式:vi test.sh:set ff=unix(改格式):wq(保存)3. 文件问题【大坑】如果报错 line x: 某变量:command not found这里

2022-05-25 17:10:28 2853

原创 No FileSystem for scheme:hdfs and Class org.apache.hadoop.DistributedFileSystem not found

在获取 Hadoop 文件系统对象时,如下所示 FileSystem fs = FileSystem.get(hdfsUrl,configuration);错误一如果收到以下错误:"No FileSystem for scheme:hdfs"可以通过在配置中设置以下 2 个属性来解决它configuration.set("fs.hdfs.impl","org.apache.hadoop.hdfs.DistributedFileSystem");configuration.s

2022-04-21 16:12:16 2902

原创 Java开发Apollo的动态配置

前提添加maven依赖 <!-- apollo --> <dependency> <groupId>com.ctrip.framework.apollo</groupId> <artifactId>apollo-client</artifactId> <version>0.11.0-panther</version> </dependency>方式一

2022-04-21 12:09:34 2384

原创 spark踩坑记录 (一) group by

mysql与sparksql语法大致相通。但是会有一些坑存在。比如groupby需求场景:在视屏表中,取每个作者最新的一条数据。即, 筛选出所有user_id对应的最新的(通过create_time倒序取)一条数据。mysql中:select user_id,site,create_timefrom ( select user_id, site, create_time from tv_push_video w......

2021-09-14 16:20:32 2545 1

原创 idea2020+ 设置maven默认仓库

2019 以及之前的可以参考这篇文章:【IDEA】解决新版IDEA一导入新项目就更改为默认maven路径 但是我的版本, 1 没有目录下没有File >>Other Settings,2 欢迎页面没有设置按钮。网上再查发现都是复制粘贴,重复而无效的内容,贼烦 - - 还好有官网 : 按照官方文档的指引,去如图位置进入设置区域 进入熟悉的设置页面: 搞定,收工...

2021-06-28 14:58:56 212

原创 HBase是怎样找到某个rowkey

【摘要】 本文介绍HBase根据时间戳和查询列信息对HFile做一次过滤,缩小查询范围,查找rowkey的处理过程。 1 定位到某个region内的store HBase的 Hmaster会处理并分配region分区(根据rowKwy),相应的元数据都会存在Zookeeper里面。其中每个region的元数据中 都会存储两个属性:start-key 和 end-key,根据这个区间就能查到rowKey对应在哪个region。 region里再根据不同的列族(C...

2021-06-25 12:06:25 2870 2

原创 idea2020.1版本的试用期过期问题的解决【mac版本】

“有能力的”还是支持正版吧~序首先吐槽一下,网上各种粘贴复制的帖子,真是害人不浅。下载jar包,修改如下图的内容:结果,一顿骚操作之后,点击idea,闪退????真是欲哭无泪。所以现在专门整理一篇博文,避免再躺坑。话不多说,现在开始。1.前期工作-IntelliJIdea如果还没下载,先去官网下载:https://www.jetbrains.com/idea/download,然后,点击安装。(如果idea正常,还没有踩坑,直接看2)如果踩坑了,就

2020-06-03 15:00:40 43851 16

原创 Java反射 Field类的setAccessible() 方法

首先看看源码:/** * Set the {@code accessible} flag for this object to * the indicated boolean value. A value of {@code true} indicates that * the reflected object should suppress Java lan...

2019-10-29 18:05:28 1195

原创 Mybatis 参数 useGeneratedKeys="true" keyProperty="id"的用法

应用背景在开发过程中,可能一次对多个表进行操作。比如现在有两个表:用户表和订单表,主键id都是自增的。应用场景:一个新用户添加了一个新的订单。操作过程:在用户表中插入一条新纪录, 获取这个用户的id, 再在订单表中插入订单的相关信息(比如商品名称、价格……,以及用户的id)。分成三步,就太浪费与数据库链接的资源了。为什么不直接在插入用户记录后,将新用户的主键与插入的结果一起返...

2019-08-22 15:42:21 14557 8

原创 Mac 关闭双空格插入句号、自动大写首字母、拼写纠正

最近做笔记发现mac为了拉开间距,双击空格时突然蹦出个句号,瞎浪费时间。还去软件中反馈了意见。最近想关闭碍事的自动首字母大写,意外找到了“祸根”。不多说了,上图:方法:系统偏好设置>>键盘>>文本搞定~~...

2019-07-31 14:41:13 7134 2

原创 python 字符串格式化时注意

1 . 字符串格式化 时,注意今天,在写多线程爬虫时,想在最后一小部分做尝试时, 犯了个低级错误:uid = 2350000sqli = 'select url,bookid from book_list where bookid between %d and %d +20' %uid然后网上查了,各种妖魔鬼怪。最后看没用教程时候,灵光一闪。虽然我知道是两处插入

2017-07-21 11:01:09 356

原创 win10 pycharm安装使用 MySQLdb

首先 MySQLdb是pycharm的外部模块,不能够直接import导入使用。其次,pycharm自动化做的比较好,只要 Python 及相关的配好了,就能直接调用。下面以我 配的Python2.7 为例。 之前在mac系统中下载安装,磕磕碰碰,当时恨不得不再用os x系统,结果今天换win10安装以后,也是欲仙欲死。。。究其原因,网上浮现的资源大多是某一两篇资源...

2017-06-16 16:22:07 8443

jar包反编译阅读器,简单版(只可看单个文件)

(只可看单个java文件)

2022-06-20

jar包反编译阅读器jd-gui

(只能反编译java,scala不行)

2022-06-20

Studio 3T Mac版本

方便大家下载,官网下载的安装包,好不容易才下载下来,避免大家等待

2019-04-15

yolo.weights to V2(yolo v2版)

官方正版下载,from海外,童叟无欺。您已经在cfg/子目录中拥有YOLO的配置文件。您必须在此下载预先训练的权重文件,就是这个哦

2018-03-21

tesseract-ocr中文识别语言库

tesseract-ocr的语言库识别库文件。下载后解压到tesseract-ocr安装目录下的tessdata 目录里,存放的是语言字库文件,和在命令行界面中可能用到的参数所对应的文件. 其中安装程序默认包含了英文字库。 tesseract code.jpg result -l chi_sim -psm 7 nobatch -l chi_sim 表示用简体中文字库(需要下载中文字库文件,解压后,存放到tessdata目录下去,字库文件扩展名为 .raineddata 简体中文字库文件名为: chi_sim.traineddata) -psm 7 表示告诉tesseract code.jpg图片是一行文本 这个参数可以减少识别错误率. 默认为 3

2016-09-10

C++绘图类,可以绘制折线图,饼状图,条形图等

我一直想如果VC++能像MATLAB一样方便的绘图就好了,后来学习了混合编程,实现了这一想法,但这样的程序不能脱离MATLAB环境。现在我在网上找到了这个绘图类,非常好使,完美实现了MATLAB一样绘图功能,可绘制折线图、饼状图、条形图等。内部有类的源码和演示例程,我调试通过了,大家放心使用!感谢原作者!

2016-04-05

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除