- 博客(43)
- 收藏
- 关注
原创 spark集群搭建
虚拟机配置bigdata-hmaster 192.168.135.112 4核心 32GBbigdata-hnode1 192.168.135.113 4核心 16GBbigdata-hnode2 192.168.135.114 4核心 16GBspark常用端口:8081:主界面18080:历史服务,该配置在配置文件中指定hosts配置,且三台机器中master节点能够通过ssh免密登录其它两台机器。
2023-10-05 17:37:49 314
原创 flink的状态和容错
RocksDB状态量受限于本地磁盘的大小,但是rocksdb支持增量的快照,对于大量变化的缓慢状态应用来说是很好的。假设存在一个序列,序列中的元素是具有不同颜色与形状的图形,我们希望在序列里相同颜色的图形中寻找满足一定顺序模式的图形对(比如在红色的图形里,有一个长方形跟着一个三角形)。因为flink不具备跨task的通信,所以给予了广播流的读写权限,这样在所有task中都能够看到,并且要求对这些元素的处理是一致的,那么所有的task得到的broadcast sate是一致的。
2023-09-25 11:42:21 86
原创 java-ThreadLocal
ThreadLocal用来创建线程局部变量。线程局部变量是每个线程都有自己独立的一个变量副本,而这个副本对其他线程是不可见的。这意味着每一个线程都可以在不影响其他线程的情况下,修改自己线程的副本值。ThreadLocal的实例通常是在类中以静态字段的方式存在的。ThreadLocal的主要用途是解决多线程环境下的数据同步问题,使得每个线程都拥有独立的数据副本。因此,ThreadLocal通常用于在一个线程中保存信息,而在其他线程中不需要或者不应该访问这些信息。// 创建一个线程局部变量。
2023-09-22 07:29:10 36
原创 centos7安装redis
centos7安装redis文章目录centos7安装redis一、创建安装目录二、需要用到的总命令三、修改配置文件四、指定配置文件运行并查看进程五、测试一、创建安装目录mkdir /mydata/app/redis 二、需要用到的总命令 1. cd /mydata/app/redis 2. wget http://download.redis.io/releases/redis-5.0.0.tar.gz 3. tar -zxvf redis-5.0.0 4. cd redis
2021-09-26 11:33:09 99
原创 springboot+spring-data-jpa并实现分页
1.项目的整个结构2.需要引入的spring-data-jpa的依赖为<!-- 版本为2.4.5最新版本--> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-jpa</artifactId>
2021-04-29 23:15:18 434
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人