自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

ConradJam

分享日常大数据生活

  • 博客(11)
  • 收藏
  • 关注

原创 Flink1.15 即将发布,FlinkSQL往批流一体更加靠近

Flink1.15即将发布,大家先来看看有什么新特性吧~

2022-03-22 11:28:05 4855

原创 Flink 1.14 前言预览

本文由我进行整理,整理后发布至开源社区。内容源自阿里巴巴技术专家宋辛童 (五藏) 在 8 月 7 日线上 Flink Meetup 分享的《Flink 1.14 新特性预览》。主要内容为:简介 流批一体 Checkpoint 机制 性能与效率 Table / SQL / Python API 总结GitHub 地址https://github.com/apache/flink社区文章仓库整理地址https://github.com/czy006/FlinkClub欢迎大家给.

2021-09-03 17:52:49 280

原创 CarbonData集成 Presto(Trino)(1)- 介绍 & 环境篇

个人介绍有幸在开源之夏选上课题基于CarbonData 之 Presto 优化课题,这个课题主要是针对Presto使用CarbonData查询上做更多的一些优化。这个课题对于我来说十分有挑战点,涉及大数据领域的组件十分多,首先CarbonData作为大数据的一种文件存储格式,在OLAP计算引擎上的查询加速实现有助于数据更快的查询和产出;其次大数据涉及的组件和版本比较广泛,在测试、兼容各种方面带来的挑战会很多,例如Hadoop、Spark、Presto(Trino)、Hive等多个开源大数据组件的协同运行和

2021-07-28 22:20:57 693

原创 Flink CDC 2.0 设计方案

文章介绍:如何将数据库中的数据接入数据仓库/数据湖是数仓建设需要考虑的关键一环。今天就由来自阿里的徐榜江(雪尽)老师带来的分享Flink-CDC 2.0 设计方案。徐榜江(雪尽)老师就职于阿里巴巴,目前主要担任FlinkSQL的研发工作。今天带来的Flink-CDC 2.0 设计方案,首先先会对CDC进行简单的概述和解决场景描述,相对比于传统数据同步方案,Flink-CDC 数据同步方案的优缺点进行简单概括,同时分析 Flink-CDC 架构的优势详细解读无锁设计和全量阶段并发设计以及CDC后续的一些规划本

2021-07-25 10:35:53 3716 2

原创 深入解读 Flink SQL 1.13

深入解读 Flink SQL 1.13文章介绍:Flink1.13版本于最近发布了,里面有比较多新的Feature和特性,今天就由我和徐榜江老师带着大家一起去探寻这些新特性,还有一些改进。徐榜江老师目前就职于阿里巴巴 Flink-SQL引擎团队,主要负责社区的SQL引擎模块开发。这篇文章一共会分为4个部分,首先我们会先给大家介绍Flink-SQL在1.13版本上面整体的一个改动,还有一些核心Feature的解读和重要改进,最后就是总结以及Flink1.14一些功能提前和大家剧透。作者:徐榜江 (Apac

2021-07-12 15:53:44 2422 1

原创 MongoDB与Spark整合的环境搭建

Spark介绍         Spark是加州大学伯克利分校AMP实验室(Algorithms, Machines, and People Lab)开发通用内存并行计算框架。Spark在2013年6月进入Apache成为孵化项目,8个月后成为Apache顶级项目,速度之快足见过人之处,Spark以其先进的设计理念,迅速成为社区的热门项目,围绕着Spark推出了Spark SQL、Spark...

2018-09-12 11:00:43 9190

原创 MongoDB-4.0.2 安装 From Centos7

最近自己折腾了一下MongoDB,在此记录在安装MongoDB遇到的各种坑和一些配置问题,希望能帮助到大家获取最新MongoDBhttps://www.mongodb.com/download-center?jmp=nav#community 前往下载自己对应版本的安装包其实这种方式是自己手动编译,我感觉就很麻烦了,还要自己配置很多东西,那么官方有没提供更加简便的方法,如yum安装...

2018-09-04 14:34:30 540

原创 为什么要学习SpringBoot和微服务?

独家整理SpringBoot最新教程(今年2月)为什要学习SpringBoot:JavaEE仅仅使用Spring逐渐变得笨重起来,大量的XML文件存在与项目中,繁琐的配置,整合第三方框架的配置问题,低下的开发效率和部署效率等等问题。Spring Boot解决的问题(1) Spring Boot使编码变简单(2) Spring Boot使配置变简单(3) Sp

2018-05-01 22:50:30 738

原创 【游戏后端】游戏服务器端开发的一些建议(转载)

因为最近开始要做游戏后端开发,游戏后端开发在我看来要求和技术含量也是最高的,所以现在已经准备开始知识存储备了准备入职的新公司是英雄互娱,公司旗下开发产品包括全民枪战,一起来飞车等,产品还是比较有名的 然后广州简称是网易达(不是网易下面的),广州易渡信息科技。虽然网上有些传闻公司内部运作问题(知乎有)而且经常加班【游戏公司常态】但是前几天去参观一下还是挺不错,

2018-03-22 22:40:59 4649 2

原创 JAVA多态知识【扩展与复习】

面向对象编程有三大特性:封装、继承、多态。封装隐藏了类的内部实现机制,可以在不影响使用的情况下改变类的内部结构,同时也保护了数据。对外界而已它的内部细节是隐藏的,暴露给外界的只是它的访问方法。继承是为了重用父类代码。两个类若存在IS-A的关系就可以使用继承。所谓多态就是指程序中定义的引用变量所指向的具体类型和通过该引用变量发出的方法调用在编程时并不确定,而是在程序运行期间才

2018-03-19 10:46:27 278

原创 流程引擎配置类以及流程引擎类的5种创建方式以及注意事项

流程引擎配置类以及流程引擎类的5种创建方式以及注意事项1.手工方式创建流程引擎配置类以及流程引擎类创建代码:public class CreateActivitiTable{ @Test public void createTable() { ProcessEngineConfiguration processEngineConfiguration

2018-03-01 14:22:52 722

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除