- 博客(13)
- 资源 (2)
- 收藏
- 关注
RSS订阅
原创 实时数仓、基于Flink1.11的SQL构建实时数仓（待完善）
实时数仓、基于Flink1.11的SQL构建实时数仓目录实时数仓、基于Flink1.11的SQL构建实时数仓环境说明
2020-12-15 15:53:57
577
原创 爱心厨房建设方案
爱心厨房建设方案附语：方案原件是word文档，复制到CSDN后格式消失了，有兴趣的可联系我邮箱：[email protected]获取原件，也可以在 https://download.csdn.net/download/ddyun/19104221 这个网址下载。 方案包括两部分：爱心厨房的建设和爱心厨房站点。1 方案寄语受南昌爱心厨房的鼓舞，我作为一个IT从业者，也希望能为正在遭受病痛磨难的患者和患者家属做点力所能及的实事，心中萌发出这样一个爱心厨房的方案，希望能够形成一个良性的爱心方案，能够让需要关爱
2021-05-26 22:48:47
2039
转载 Centos7.3安装和配置Mysql5.7
第一步：获取mysql YUM源进入mysql官网获取RPM包下载地址https://dev.mysql.com/downloads/repo/yum/点击 下载右击 复制链接地址https://dev.mysql.com/get/mysql57-community-release-el7-11.noarch.rpm得到这个 这个就是Yum仓库的rpm包 其实就是一个下载地址第二步：下载和安装mysql源先下载 mysql源安装包[r...
2021-04-23 11:30:43
179
原创 激活的windows 打了补丁后变成未激活的解决办法
前几天我的电脑打了正版验证补丁后,结果可想而知,变回未激活.这时再用软件激活也激活不了,原因是微软在电脑中值入了两个程序,可以在c盘查找synchost.exe .是负责盗取用户是否正版的信息的。清除方法清除方法：由于SyncHost.exe是隐藏文件且是受系统保护的文件，你要选"Show hidden files, folders, and drives" 并取消勾选"Hide protected operating system files (Recommended)"。然后搜索C盘，会在syst
2021-04-15 10:08:54
1483
原创 实时数据仓库之客户行为分析
实时数据仓库之客户行为分析项目背景：前端收集客户从各个渠道下载、注册、登陆、操作菜单、浏览页面等信息，统一发到日志数据收集服务器，日志收集服务器统一转发到大数据平台做客户行为分析。项目目标：实现与设计：采集日志格式：-- --------------------------- ods 日志信息-- Kafka Source-- -------------------------CREATE TABLE ods_hxd_log(sdate varchar ,...
2021-02-07 17:36:07
224
原创 centos 下RTNETLINK answers: File exists的解决方案 Failed to start LSB: Bring up/down networking
重启网卡时 出现 :RTNETLINK answers: File exists 提示12月 29 16:10:38 kafka01 network[5294]: 正在打开接口 enp0s8： RTNETLINK answers: File exists12月 29 16:10:39 kafka01 network[5294]: [ 确定 ]12月 29 16:10:39 kafka01 network[5294]: RTNETLINK answers: File exists12月 ...
2020-12-29 16:17:29
2121
原创 实时数仓、基于Flink1.11的SQL构建实时数仓 之建表脚本
mysql源库建表：-- 订单表（order_info）CREATE TABLE `order_info` (`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '编号',`consignee` varchar(100) DEFAULT NULL COMMENT '收货人',`consignee_tel` varchar(20) DEFAULT NULL COMMENT '收件人电话',`total_amount` decimal(1.
2020-12-24 14:36:11
438
转载 实时数据仓库简述（转）
“数据智能” (Data Intelligence) 有一个必须且基础的环节，就是数据仓库的建设，同时，数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务。从智能商业的角度来讲，数据的结果代表了用户的反馈，获取结果的及时性就显得尤为重要，快速的获取数据反馈能够帮助公司更快的做出决策，更好的进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。一、实时数仓建设的背景传统意义上的数据仓库主要处理T+1数据（即：今天产生的数据分析结果明天才能看到）随着互联网的发展，越来越多的业务指标需要实
2020-12-24 14:19:08
834
原创 实时数仓、基于Flink1.11的SQL构建实时数仓 之hive ha集群搭建
实时数仓、基于Flink1.11的SQL构建实时数仓 之hive集群一.准备环境jdk1.8hadoop环境zookeeper环境mysql集群规划192.168.137.121m1192.168.137.122m2详见：实时数仓、基于Flink1.11的SQL构建实时数仓环境说明二.下载安装包及配置2.1 下载：https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-3.1.2/安装包：apache...
2020-12-23 12:17:22
262
原创 实时数仓、基于Flink1.11的SQL构建实时数仓 之搭建flink集群
实时数仓、基于Flink1.11的SQL构建实时数仓 之搭建flink集群目录实时数仓、基于Flink1.11的SQL构建实时数仓 之搭建flink集群一. 环境准备二.安装配置三.启动集群一. 环境准备jdk1.8hadoop环境zookeeper环境集群规划192.168.137.123 s1192.168.137.124 s2192.168.137.125 s3详见：实时数仓、基于Flink1.11的SQL构建实时数仓环境说明二.安装配置...
2020-12-16 10:46:22
636
原创 实时数仓、基于Flink1.11的SQL构建实时数仓 之kafka集群搭建
实时数仓、基于Flink1.11的SQL构建实时数仓 之kafka集群搭建目录一：环境准备二：安装配置1.下载安装包：2.上传安装包到 m1节点 并解压到：/opt/3.配置 server.properties4. 配置 zookeeper.properties5.分发到m2s1三.启动集群：一：环境准备jdk1.8kafka_2.11-2.4.1集群规划详见：实时数仓、基于Flink1.11的SQL构建实时数仓 环境说明zookeepe...
2020-12-15 18:26:09
521
2
原创 实时数仓、基于Flink1.11的SQL构建实时数仓 之 zookeeper集群搭建
zookeeper-3.6.2集群安装目录zookeeper-3.6.2集群安装集群规划：jdk1.8 配置环境变量关闭防火墙：配置免密：所有主机都执行安装步骤：1.下载zookeeper2. 安装并配置Zookeeper3 群起脚本集群规划：详见上一篇博客：实时数仓、基于Flink1.11的SQL构建实时数仓 中环境说明jdk1.8 配置环境变量vi /etc/profileexport JAVA_HOME=/opt/software/jdk..
2020-12-15 17:22:15
261
原创 实时数仓、基于Flink1.11的SQL构建实时数仓 之搭建hadoop HA集群
目录hadoop3.2.1集群安装一：准备环境：1.配置Java环境 2.打通ssh3.修改hosts文件4.安装zookeeper集群5.配置时间同步（略）6.关闭防火墙（略）二：上传安装包解压修改配置文件配置 core-site.xml配置hdfs-site.xml配置hadoop-env.sh配置：mapred-site.xml配置 yarn-site.xml配置datanode节点编辑 works把安装包分发到所有节点：所有...
2020-12-15 16:53:04
551
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人