- 博客(10)
- 资源 (14)
- 收藏
- 关注
RSS订阅原创 编译flink源码（flink1.9.2 hadoop 2.7.2）
为什么要编译Flink源码根据flink官方文档，flink在1.8以后就不提供on hadoop的二进制包了，所以如果需要部署flink on yarn，官方虽然不支持了，但是提供了重新编译on hadoop的flink的二进制安装包的方法，首先我们来梳理一下编译思路。（P.S.:这篇blog主要说的是maven编译flink的操作步骤）：准备摘自 Project Template for...
2020-03-19 01:03:44
2498
1
原创 在Centos7下安装CDH6.X
1 安装流程概述在安装之前我们先来梳理下安装的思路，根据官方安装1 文档：Step1 配置一个Cloudra Manager本地Yum2仓库Step2 安装oracle 1.8+ openjdk 11+Step3 安装Cloudra Manager ServerStep4 安装数据库Step5&...
2020-03-05 02:42:31
1528
原创 ES写入优化
ES索引数据简述：logstash（或其他的ES client）通过调用index（单条）或bulk（批量）接口将数据导入到ESES收到请求首先将数据存入index buffer，为了保证数据完整性和异常恢复，将数据同时写入translog（默认配置为同步写入，即条记录会进行一次写磁盘），此时数据不能够被检索到index buffer根据不同索引配置的refresh时间（默认1s），定时或...
2020-03-05 02:41:45
774
原创 Filebeat工作原理
反思先上官网链接 How Filebeat Works首先感谢filebeat的默认配置很给力，我们的日志收集系统使用Filebeat来收集日志文件，部署时并没有多想，只配置了一下监控的日志文件名。上线测试，日志采集这块从没出过问题。自己就没有深入考虑过Filebeat工作原理，只知道filebeat是根据文件系统文件名关联到inode信息，根据inode信息进行日志文件的监听的。并没有深入的...
2020-03-03 16:48:44
1860
原创 在Centos7下离线安装mysql5.7
1 安装概述1.1 安装流程下载离线安装包并上传服务器检查并删除centos自带的MariaDB安装MySQL配置数据库1.2 版本信息操作系统：Centos7MySQL版本： 5.7.282 安装步骤2.1下载离线安装包并上传服务器历史版本下载方式历史版本下载链接：https://downloads.mysql.com/archives/community/历史版本...
2020-03-02 01:39:57
423
原创 Linux Yum源创建与配置（Centos 7为例）
1 概述在我们的日常工作中经常会遇到系统自带的yum源下载安装包速度慢，或因为网络原因导致无法使用系统自带的yum源的问题。本篇文章就是跟大家分享下如何在Centos下创建或配置yum源信息。什么是Yum？Yum（全称为 Yellow dog Updater, Modified）是一个在Fedora和RedHat以及CentOS中的Shell前端软件包管理器。基于RPM包管理，能够从指定的服...
2020-02-28 23:44:28
952
原创 ElasticSearch DSL 详解
ElasticSearch DSL 详解学前必读1 基本概念SELECTWHERElogical operatorfilterGROUP BYmetricbucketsnestedHAVINGORDER BYLIMIT案例分析在学习之前首先你要弄懂下面这条sql的每个部分的意义，以及它能干什么？因为这条sql就是我们这次内容的提纲。SELECT FIELD1, AVG(FIELD2...
2019-04-01 19:33:18
6691
1
原创 ElasticSearch入门
1 简介Elasticsearch是为了搜索食谱诞生的一个高度可扩展的、开源的、基于 Lucene 的全文搜索和多级缓存的分析引擎。它允许您快速，近实时地存储，搜索和分析大量数据，并支持多租户。Elasticsearch使用Java开发并使用 Lucene 作为其核心来实现所有索引和搜索的功能，但是它的目的是通过简单的 RESTful API 来隐藏 Lucene 的复杂性，从而让全文搜索变得...
2019-02-14 08:53:26
280
原创 Elasticsearch部署文档-从单点到集群
Elasticsearch部署文档-从单点到集群1 独立部署1.1 安装jdk1.3 安装elasticsearch1.4修改elasticsearch配置1.5修改系统配置1.6启动服务2 集群部署集群规划2.1 安装elasticsearch2.2 创建日志和数据文件目录2.3 进行集群配置2.4 配置jvm启动参数2.5 启动elasticsearch2.6 确认集群节点1 独立部署1....
2019-01-25 15:12:27
902
转载 关于Oracle数据库导入导出数据
oracle数据库导入导出命令！Oracle数据导入导出imp/exp功能：Oracle数据导入导出imp/exp就相当与oracle数据还原与备份。大多情况都可以用Oracle数据导入导出完成数据的备份和还原（不会造成数据的丢失）。 Oracle有个好处，虽然你的电脑不是服务器，但是你装了oracle客户端，并建立了连接 （通过Net Configuration Assist
2011-10-30 00:26:58
471
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.zip.002
2020-03-25
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.zip.001
2020-03-25
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.z01
2020-03-24
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.zip
2020-03-24
flink-1.9.2.z01
2020-03-24
flink-1.9.2.zip
2020-03-24
es_script.txt
2019-11-15
elastalert-kibana-plugin.zip
2019-10-30
C语言入门（二级C教程)
2011-10-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人