自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(41)
  • 资源 (1)
  • 收藏
  • 关注

原创 flink cdc实践

flink cdc实践

2021-10-11 15:06:14 833

原创 flink写clickhouse

flink写clickhouse

2020-12-13 15:14:05 3332 5

原创 Flink-to-Hive实现

Flink to Hive实现

2020-05-07 18:02:27 2501 7

原创 hadoop集群有些datanode没跑起来

hadoop集群有些datanode没跑起来

2020-05-06 11:01:37 381

原创 ERROR 2003 (HY000): Can't connect to MySQL server on '192.168.1.108' (111)

ERROR 2003 (HY000): Can't connect to MySQL server on '192.168.1.108' (111)

2020-05-02 19:49:51 912

原创 Flink SQL中Timestamp使用的坑

Flink SQL中Timestamp转换的坑

2020-04-27 18:47:53 29359 8

原创 Flink使用Hive Metastore管理元数据

Flink使用Hive Metastore管理元数据

2020-04-17 16:56:55 3068

原创 flink sql去重

flink sql去重

2020-04-14 16:18:49 2136 1

原创 flink连接hbase

flink1.9之前没有hbase连接器的实现,写hbase需要自定义sink。实现一个通用的hbaseSink.

2020-03-07 23:05:37 2549

原创 hadoop put: Permission denied: user=zhdan, access=WRITE, inode="/":hdfs:supergroup:drwxr-xr-x

hadoop put: Permission denied: user=zhdan, access=WRITE, inode="/":hdfs:supergroup:drwxr-xr-x

2020-02-05 15:49:49 875

原创 CDH6.3添加flink服务

准备工作到 https://archive.cloudera.com/csa/1.0.0.0/csd/,https://archive.cloudera.com/csa/1.0.0.0/parcels/下载相应的csd文件和parcels文件到本地。FLINK-1.9.0-csa1.0.0.0-cdh6.3.0.jarFLINK-1.9.0-csa1.0.0.0-cdh6.3.0-bioni...

2020-02-02 22:17:36 6748 6

原创 ubuntu18安装CDH6.3.1

ubuntu18安装CDH6.3.1

2020-02-02 15:33:41 3310 10

原创 ubuntu18设置静态IP

ubuntu18设置静态IP

2020-01-15 21:41:00 472 1

原创 基于 Flink 的实时数仓平台

基于 Flink 的实时数仓平台

2020-01-12 19:17:26 4080

原创 ubuntu升级后,virtualbox打开失败

Kernel driver not installed (rc=-1908)

2020-01-09 16:39:11 323

原创 Ubuntu输入正确密码,点击登陆后又跳回登陆界面

今天升级了Ubuntu到16版本,界面输入正确密码后,屏幕一闪却又跳回登陆页面。百度后找到解决办法。原因:主目录下.Xauthority文件拥有者变成了root,而以用户登陆(比如user用户)时无法读取.Xauthority文件说明:Xauthority是startx脚本记录文件。解决办法:按下shift+ctrl+F1跳到tty命令终端,修改X.authority文件拥有者为user...

2020-01-09 14:01:36 2330

原创 单链表反转

单链表反转

2019-12-23 18:12:40 105

原创 二叉树的前、中、后序遍历

二叉树的前、中、后序遍历

2019-12-11 17:32:11 79

原创 ubuntu安装k8s

ubuntu18.04安装k8s

2019-12-09 22:09:34 2512

原创 ubuntu设置sudo免密

这里使用的是没有Desk的ubuntu。#step1 sudo vim /etc/sudoers#step2 修改%sudo那一行为:%sudo ALL=(ALL:ALL) NOPASSWD: ALL#step3 保存退出#step4 reboot带有Desk还需要新增需要免密sudo的用户为:user ALL=(ALL:ALL) NOPASSWD: ALL...

2019-12-01 17:02:41 1192

原创 win10上Hyper-V安装ubuntu18.04

Hyper-V安装ubuntu18.04

2019-12-01 16:22:36 9788

原创 执行jar包的脚本

执行jar的shell脚本

2019-11-22 14:41:35 870

原创 docker国内镜像库

\docker.exe: Error response from daemon: Get https://registry-1.docker.io/v2

2019-11-17 14:16:44 460

原创 win10上修改docker镜像存储位置

安装win for docker时发现似乎只能安装在C盘,可能pull 镜像时会存在C盘,那C盘空间会越来越小。怎么修改镜像默认的安装路径?原因分析:windows上安装的docker其实本质上还是借助与windows平台的hyper-v技术来创建一个linux虚拟机,你执行的所有命令其实都是在这个虚拟机里执行的,所以所有pull到本地的image都会在虚拟机的Virtual hard dis...

2019-11-17 13:55:47 3187

原创 kafka设置起止时间消费消息

消费kafka消息时,有时可能需要消费某个时间段的消息

2019-11-07 11:12:18 6194 7

原创 linux上替换修改jar包重新打包方法

linux上替换修改jar包重新打包方法

2019-10-30 17:06:36 2404

原创 flink 根据时间消费kafka

flink 根据时间消费kafka

2019-10-25 10:11:51 4301

转载 Hbase表设计策略

Hbase表设计策略

2019-10-23 17:14:29 239

原创 flink sql脚本

flink sql client不支持CREATE TABLE的DDL语句,Table api是支持的。可以自己写一个提交sql的jar包运行flink作业

2019-10-23 16:57:57 2184 2

原创 NoMatchingTableFactoryException

org.apache.flink.table.api.NoMatchingTableFactoryException: Could not find a suitable table factory for 'org.apache.flink.table.factories.TableSourceFactory' inthe classpath.

2019-10-22 12:08:34 3807 7

原创 kafka消息是否会丢失?为什么?

apache kafka实战笔记

2019-09-22 15:33:51 1402

原创 kafka节点之间如何复制备份的?

apache kafka实战笔记

2019-09-22 12:25:10 612

原创 kafka单机部署

kafka本地搭建

2019-08-19 18:12:39 141

转载 IDEA安装阿里代码规范插件

https://blog.csdn.net/weixin_39220472/article/details/80077803

2019-08-16 15:53:03 102

原创 springboot + shiro事务失效

springboot2+shiro事务失效

2019-08-07 14:26:16 197

原创 springboot启动时卡住问题

springboot启动后,一直卡住

2019-07-16 11:21:44 7038

原创 NLTK安装

1、安装nltk、numpy pip install nltk pip install numpy2、进入pythonimport nltknltk.download()然后选择d,之后输入all开始下载nltk语料库(下载巨慢):4、验证nltkfrom nltk.corpus import brownwords = brown.words()print(words...

2019-07-08 15:44:28 317

原创 scrapy动态user-agent

scrapy默认的user-agent类似:User-Agent: b'Scrapy/1.6.0 (+https://scrapy.org)'一般会自己设置动态user-agent,预防被反爬。步骤:1、修改setting.pyUSER_AGENTS = [ 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHT...

2019-07-04 11:22:41 1139 1

原创 Permissions 0664 for 'mykeypair.pem' are too open.

运行ssh -i mykeypair.pem user@ip 时遇到:@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ WARNING: UNPROTECTED PRIVATE KEY FILE! @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@...

2019-07-02 10:02:23 2252 1

原创 scrapy爬取亚马逊商品评论

这一篇使用scrapy爬虫框架实现亚马逊商品评论的抓取。1、创建一个爬虫项目:scrapy startproject MySpiderTest2、item.py中定义数据item:import scrapyfrom scrapy.item import Field, Itemclass ItcastItem(Item): # define the fields for you...

2019-07-01 10:50:30 3394 1

flink-1.10.0-bin-scala_2.11.tgz

flink-1.10.0-bin-scala_2.11.tgz安装包下载,适用于flink 1.10,scala2.11版本。

2020-05-05

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除