自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(64)
  • 资源 (11)
  • 收藏
  • 关注

原创 快速上手 | Datavines两表值比对规则用法

使用两表值比对的规则,通过编写 SQL 语句来统计今天和昨天的数据量,然后比较两个值,如果今天的值大于昨天的值则为真,否则为假。

2023-07-14 23:28:17 466

原创 教程 | Datavines 自定义数据质量检查规则(Metric)

Metric 是 Datavines 中一个核心概念,一个 Metric 表示一个数据质量检查规则,比如空值检查和表行数检查都是一个规则。Metric 采用插件化设计,用户可以根据自己的需求来实现一个 Metric。下面我们来详细讲解一下如何自定义Metric。

2023-06-27 07:02:28 364

原创 一站式数据可观测性平台 Datavines 正式开源啦

Datavines是一站式开源数据可观测性平台,提供元数据管理、数据概览报告、数据质量管理,数据分布查询、数据趋势洞察等核心能力,致力于帮助用户全面地了解和掌管数据,让您做到心中有数,目前作为Datavane开源组织的重点推荐项目,正式开源,欢迎大家使用。

2023-06-22 16:32:41 1480

原创 SparkSteaming运行流程分析以及CheckPoint操作

本文主要通过源码来了解SparkStreaming程序从任务生成到任务完成整个执行流程以及中间伴随的checkpoint操作注:下面源码只贴出跟分析内容有关的代码,其他省略1 分析流程应用程序入口:val sparkConf = new SparkConf().setAppName("SparkStreaming")val sc = new SparkContext(spar...

2018-02-23 19:34:38 854

原创 HashSet和CopyOnWriteArraySet

HashSet是如何保证元素的不重复和无序HashSet的增删(改查?)原理CopyOnWriteArraySet支持并发的原理CopyOnWriteArraySet的增删(改查?)原理

2017-08-27 15:14:44 649 1

原创 ArrayList和CopyOnWriteArrayList

了解一下ArrayList和CopyOnWriteArrayList的增删改查实现原理看看为什么说ArrayList查询快而增删慢?CopyOnWriteArrayList为什么并发安全且性能比Vector

2017-08-27 11:26:40 1113

原创 Hive调优实践

Hive调优实践

2017-08-25 20:35:45 6090

原创 Spark Core 调优指南

Spark Core 调优指南

2017-08-19 16:00:31 441

原创 Spark Streaming 调优指南

SparkStreaming调优

2017-07-20 23:01:50 375

原创 SparkSQL实战之Youtube数据集

使用Youtube数据集进行SparkSQL实战演练

2017-07-20 22:59:12 6344

原创 Hive实战之Youtube数据集

使用Youtube视频数据集进行Hive实战演练

2017-07-19 22:13:09 23009 5

原创 Spark内部机制学习笔记

spark 内部机制学习笔记

2017-05-19 20:41:32 504

原创 Spark操作HBase问题:java.io.IOException: Non-increasing Bloom keys

Spark操作HBase问题:java.io.IOException: Non-increasing Bloom keys解决方法

2017-05-19 20:38:11 1083

原创 SparkSQL实战

SparkSQL实战

2017-05-19 19:37:32 997

原创 Spark实战之读写HBase

Spark实战之Hbase读写

2017-05-19 19:18:06 17487 2

原创 SQL简记(一)

简单地记录SQL相关知识点,用于备忘

2017-03-18 17:38:00 321

原创 【Hadoop】OpenTSDB部署

简单地介绍OpenTSDB的安装部署

2017-03-18 17:36:21 2024

原创 【Hadoop】MapReduce输入输出格式之输入格式

MapReduce输入输出格式之输入格式

2017-03-18 17:34:08 3648

原创 【Hadoop】Flume-ng源码解析之Source组件

通过研读Flume源码来稍微深入地研究Source组件,了解它的来龙去脉

2017-03-10 19:37:33 674

原创 【Hadoop】Flume-ng源码解析之Sink组件

通过解读flume源码来稍微深入理解Sink组件的细节,更多得了解它的来龙去脉

2017-03-10 19:04:33 829

原创 【Hadoop】Flume-ng源码解析之Channel组件

通过源码来解读flume三大组件的channel组件

2017-03-08 21:53:42 1176

原创 【Hadoop】Flume-ng源码解析之启动流程

通过源码解读了Flume-ng的启动流程

2017-03-08 19:45:24 1881 1

原创 【Hadoop】ZooKeeper的简单理解

对ZooKeeper的设计目标、顺序一致性、系统模型、ZAB、数据模型、服务器角色和搭建要点进行简单地总结

2017-03-04 20:44:52 573

原创 【Hadoop】HBase、HDFS和MapReduce架构异同简解

简单地比较了HBase、HDFS和MapRedeuce架构的异同

2017-03-04 20:41:02 2158

原创 【Hadoop】HBase框架学习之路

本文从HBase的设计背景、组件、流程、机制、实操等方面对HBase进行较为详细地分析,希望能够帮助大家更好地学习HBase

2016-12-30 17:09:54 1091

原创 在Maven Repository下载Jar

本文简单讲解了如何从Maven Repository上下载Jar包

2016-12-30 16:49:04 6785 1

原创 【Hadoop】使用MapReduce操作HBase

本文是使用WordCount作为基础例子实现MapReduce与HBase的配合使用

2016-12-30 16:46:55 7480 1

原创 【Hadoop】RegionServer详解

RegionServer是HBase中最主要的组件,本文对RegionServer中的组件和机制进行较为详细地讲解

2016-12-30 16:44:28 19407 6

原创 【Hadoop】Region详解

对Region的层级结构、重要成员进行较详细的讲解

2016-12-30 16:38:59 4499

原创 【Hadoop】HBase部署入门指南

HBase部署入门指南

2016-12-30 16:08:24 655

原创 【Hadoop】HBase Shell 练习

HBase Shell 练习

2016-12-30 16:03:29 649

原创 【Hadoop】HBase Java API 练习

HBase Java API 练习

2016-12-30 16:00:35 1028

原创 【Hadoop】Sqoop部署入门指南

Sqoop部署入门指南

2016-12-30 13:51:07 516

翻译 【Hadoop】HBase 数据模型(Data Model)

本篇是关于HBase数据模型的官方文档翻译,希望能够帮助大家更好地学习HBase

2016-12-20 09:44:05 2725

翻译 【Hadoop】HBase Getting Started(HBase 入门指南)

本片是HBse入门指南翻译,希望能帮助大家学习HBase

2016-12-16 17:10:34 1007

原创 Hive创建表格报【Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException】引发的血案

成功启动Hive,创建表格时Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException的解决方案

2016-12-15 19:51:15 17079

翻译 【Hadoop】Apache Sqoop - Overview——Sqoop 概述

本篇主要简单地介绍Sqoop的使用操作

2016-12-14 18:52:15 883

翻译 【Hadoop】Hive官方文档翻译——Hive Tutorial(上)(Hive 入门指导)

官方文档是程序员最好的学习资料,本篇是Hive Tutorial(上),希望能帮助大家更好地学习Hive!

2016-12-13 19:26:38 5208

翻译 【Hadoop】Flume NG Getting Started(Flume NG 新手入门指南)翻译

本篇是FLume NG Getting Started (新手入门指南),希望能够帮助大家更好地使用Flume NG

2016-12-08 18:42:50 922

原创 【Hadoop】ZooKeeper集群搭建中的Connection refused而导致的启动失败

ZooKeeper集群搭建中的Connection refused而导致的启动失败时我的解决方案

2016-12-08 07:18:58 2852 1

多线程例子

Java多线程开发例子,包含线程同步、线程死锁、生产者消费者模式

2016-03-01

多线程基础知识

多线程知识思维导图,图片和XMind格式文件

2016-03-01

IPC_AIDLDemo

AIDL Demo,来自Android开发艺术探索

2016-02-27

IPC机制之AIDL

IPC机制之AIDL思维导图图片和Xmind格式文件

2016-02-27

IIPC机制基础知识

IPC机制基础知识思维导图并有XMind格式文件

2016-02-27

栈——经典面试题(2)

题目:定义栈的数据结构,请在该类型中实现一个能够得到栈的最小元素的min函数,在该栈中,调用min、push和pop的时间复杂度为O(1);

2015-10-21

栈——经典面试题(1)

题目:输入两个整数序列,第一个表示栈的压入顺序,请判断第二序列是否为该栈的弹出序列,假设压入栈的所有数字均不相等。--java实现

2015-10-17

栈——经典面试题

题目:两个栈模拟一个队列,剑指offer书中的题目,用java写的

2015-10-14

can总线技术

介绍CAN总线技术,基础知识,有利于了解CAN知识

2014-01-03

labview程序

labview索引字符串程序,输入字符串,输出字符串中你想要的部分字符串

2013-10-03

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除