自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(269)
  • 收藏
  • 关注

原创 【大模型应用极简开发入门(2)】GPT模型简史:从GPT-1到GPT-4:从小数据量的微调到大数据量的强化学习不断优化模型

【大模型应用极简开发入门(2)】GPT模型简史:从GPT-1到GPT-4:从小数据量的微调到大数据量的强化学习不断优化模型

2024-04-21 18:10:05 810

原创 【大模型应用极简开发入门(1)】LLM概述:LLM在AI中所处位置、NLP技术的演变、Transformer与GPT、以及GPT模型文本生成逻辑

【大模型应用极简开发入门(1)】LLM概述:LLM在AI中所处位置、NLP技术的演变、Transformer与GPT、以及GPT模型文本生成逻辑

2024-04-20 22:13:04 965

原创 【flink报错】flink cdc无主键时的操作

flink cdc无主键的问题

2024-04-17 22:15:17 517

原创 【设计模式之美】快速地改善代码质量的几条编程规范(上)

超实用的改善代码质量的编程规范

2024-04-17 22:09:14 323

原创 【架构方法论(一)】架构的定义与架构要解决的问题

【架构方法论(一)】架构的定义与架构要解决的问题

2024-04-17 21:10:33 1053

原创 【JVM】避免java内存泄漏、溢出的几种方法

【JVM】避免java内存泄漏、溢出的几种方法

2024-04-12 00:24:58 389

原创 【MYSQL】字符串存储类型该怎么选:mysql中char、varchar、text的区别

【MYSQL】字符串存储类型该怎么选:mysql中char、varchar、text的区别

2024-04-12 00:12:40 563

原创 【JVM】JVM堆占用情况分析(频繁创建的对象、内存泄露等问题)、jmap+jhat、jvisualvm工具使用

【JVM】JVM堆占用情况分析(频繁创建的对象、内存泄露等问题)、jmap+jhat、jvisualvm工具使用

2024-04-12 00:02:19 854

原创 【nginx运维】[emerg]: bind() to 0.0.0.0:80 failed (98: Address already in use)

# [emerg]: bind() to 0.0.0.0:80 failed (98: Address already in use)

2024-04-10 21:12:52 235

原创 JVM内存性能调优思路之:通过GC log、Thread Dump 、Heap Dump分析内存使用说明

JVM内存性能调优思路之:通过GC log、Thread Dump 、Heap Dump分析内存使用说明

2024-04-07 20:47:42 808

原创 数据湖概述:大数据演进阶段-数据湖

数据湖概述:大数据演进阶段-数据湖

2024-04-04 19:57:23 1042 3

原创 【YARN运维】Yarn常见任务shell运维命令:集群状态、查看任务、任务日志

【YARN运维】Yarn常见任务shell运维命令:集群状态、查看任务、任务日志

2024-03-30 15:23:11 353

原创 【大数据运维】Hbase shell 常见操作

【大数据运维】Hbase shell 常见操作

2024-03-30 14:39:25 526

原创 【大数据运维】minio 常见shell操作

【大数据运维】minio 常见shell操作

2024-03-28 17:54:42 432

原创 【Flink架构】关于FLink BLOB的组织架构:FLIP-19: Improved BLOB storage architecture:官网解读

【Flink架构】关于FLink BLOB的组织架构:FLIP-19: Improved BLOB storage architecture:官网解读

2024-03-27 18:40:20 911

原创 【Flink connector】文件系统 SQL 连接器:实时写文件系统以及(kafka到hive)实战举例

【Flink connector】文件系统 SQL 连接器:实时写文件系统以及(kafka到hive)实战举例

2024-03-26 23:34:37 1306 1

原创 【Flink实战】Flink hint更灵活、更细粒度的设置Flink sql行为与简化hive连接器参数设置

【Flink实战】Flink hint更灵活、更细粒度的设置Flink sql行为与简化hive连接器参数设置

2024-03-26 22:21:26 1222

原创 【mysql基础】mysql 四种类型语句常见操作

【mysql基础】mysql 四种类型语句常见操作

2024-03-22 11:18:17 340

原创 【运维】StarRocks数据迁移到新集群(针对于集群互通、不互通的情况)

【运维】StarRocks数据迁移到新集群(针对于集群互通、不互通的情况)

2024-03-16 17:29:26 2357

原创 【Flink网络传输】ShuffleMaster与ShuffleEnvironment创建细节与提供的能力

【Flink网络传输】ShuffleMaster与ShuffleEnvironment创建细节与提供的能力

2024-03-07 16:26:47 1242

原创 【Flink网络数据传输(4)】RecordWriter(下)封装数据并发送到网络的过程

【Flink网络数据传输(4)】RecordWriter封装数据并发送到网络的过程

2024-03-06 18:04:54 1356

原创 【Flink网络数据传输(3)】RecordWriter的能力:实现数据分发策略或广播到下游InputChannel

【Flink网络数据传输】RecordWriter的能力:实现数据分发策略或广播到下游InputChannel

2024-03-06 17:45:12 1057

原创 【Flink网络数据传输】OperatorChain的设计与实现

【Flink网络数据传输】OperatorChain的设计与实现

2024-03-06 11:04:40 1172

原创 StreamTask数据流:StreamTask能力概述、Flink处理网络数据逻辑

StreamTask数据流:StreamTask能力概述、Flink处理网络数据逻辑

2024-03-05 21:45:11 1161

原创 【大数据运维】大数据常见shell命令

【大数据运维】大数据常见shell命令

2024-03-05 16:42:03 483

原创 数据迁移方法论

【大数据】数据迁移方法论

2024-03-01 16:38:33 987

原创 【大数据架构(3)】Lambda vs. Kappa Architecture-选择你需要的架构

【大数据架构(3)】Lambda vs. Kappa Architecture-选择你需要的架构

2024-02-28 23:39:32 1260

原创 【大数据架构(2)】kappa架构介绍

【大数据架构(2)】kappa架构介绍

2024-02-28 23:07:21 1168

原创 【大数据架构(1)】Lambda Architecture – Realtime Data Processing 论文重点翻译

【大数据架构】Lambda Architecture – Realtime Data Processing 论文重点翻译

2024-02-28 22:40:19 1016

原创 【Flink CDC(一)】实现mysql整表与增量读取

【Flink CDC(一)】实现mysql整表与增量读取

2024-02-26 14:58:47 1638

原创 【Flink数据传输(一)】NetworkStack架构概述:实现tm之间的数据交换

【Flink数据传输(一)】NetworkStack架构概述:实现tm之间的数据交换

2024-02-23 13:37:52 1448

原创 【Flink集群RPC通讯机制(四)】集群组件(tm、jm与rm)之间的RPC通信

【Flink集群RPC通讯机制(四)】集群组件(tm、jm与rm)之间的RPC通信

2024-02-22 13:09:32 1219

原创 【Flink集群RPC通讯机制(三)】AkkaRpcActor设计与实现:接收RPC消息以及处理逻辑

【Flink集群RPC通讯机制(三)】AkkaRpcActor设计与实现:接收RPC消息以及处理逻辑

2024-02-22 11:22:03 1141

原创 【Flink集群RPC通讯机制(二)】创建AkkaRpcService、启动RPC服务、实现相互通信

【Flink集群RPC通讯机制(二)】创建AkkaRpcService、启动RPC服务、实现相互通信

2024-02-21 17:06:11 1190

原创 【Flink网络通讯(一)】Flink RPC框架的整体设计

【Flink网络通讯(一)】Flink RPC框架的整体设计

2024-02-20 23:55:22 1537

原创 【Flink状态管理(八)】Checkpoint:CheckpointBarrier对齐后Checkpoint的完成、通知与对学习状态管理源码的思考

【Flink状态管理(八)】Checkpoint:CheckpointBarrier对齐后Checkpoint完成、通知

2024-02-20 18:31:50 1113

原创 【Flink状态管理(七)】Checkpoint的触发:2. CheckpointBarrier触发算子Checkpoint操作之CheckpointBarrier的对齐操作

【Flink状态管理(七)】Checkpoint的触发:2. CheckpointBarrier触发算子Checkpoint操作之CheckpointBarrier的对齐操作

2024-02-20 18:17:06 943

原创 【Flink状态管理(六)】Checkpoint的触发方式(1)通过CheckpointCoordinator触发算子的Checkpoint操作

【Flink状态管理(六)】Checkpoint的触发方式(1)通过CheckpointCoordinator触发算子的Checkpoint操作

2024-02-20 13:19:15 1342

原创 【Flink状态管理五】Checkpoint的设计与实现

【Flink状态管理五】Checkpoint的设计与实现

2024-02-20 11:40:32 1062

原创 【flink状态管理(四)】MemoryStateBackend的实现

【flink状态管理(四)】MemoryStateBackend的实现

2024-02-08 16:08:25 1597

Lambda Architecture – Realtime Data Processing paper

Lambda Architecture 论文

2024-02-27

适用于linux的oracle 客户端包

适用于linux的oracle 客户端包

2023-08-24

flink on yarn 模式下,flink 1.12.5版本运行所需完整lib包

flink on yarn 模式下 flink 1.12.5版本 运行所需完整lib包 操作步骤:解压lib,上传jar到HDFS上,提交yarn任务时会加载这些lib包

2022-08-30

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除