- 博客(44)
- 资源 (5)
- 收藏
- 关注
原创 Davinci 连接mongodb数据源
Davinci 连接mongodb数据源资料很少,找到一篇相对不错的文章,内有有多种方式:参考链接:本文采用mongo-bi连接器 mongo官方没有提供mongo的JDBC驱动,但是提供了mongo-bi-connector,允许使用所选的BI工具通过标准SQL查询对MongoDB数据进行可视化。BI Connector 可以使用 SQL 或 ODBC 数据源方式直接访问 MongoDB,MongoDB 早期版本直接使用 Postgresql FDW 来实现 SQL 到 MQL 的转换,后来实
2021-03-18 16:52:27 584
原创 flume-1.5.2 安装和测试
flume-1.5.2 安装和测试#解压到当前目录 tar -xf apache-flume-1.5.2-bin.tar.gz 修改目录名称mv apache-flume-1.5.2-bin flume切换到目录cd flume/conf/新建一个配置文件vi flume.conf加入下列配置# 指定Agent的组件名称a1.sources = r1a1.sinks = k1a1.channels = c1# 指定Flume source(要监听的路径)a1.sourc
2021-03-11 15:48:00 169
原创 hbase 1.4.10 HA高可用集群安装(全)
hbase 1.4.10 HA高可用集群安装(全)上传压缩包并解压tar -xf hbase-1.4.10-bin.tar.gz修改文件夹名称 mv hbase-1.4.10 hbase cd hbase修改配置文件1cd conf/vi hbase-env.sh禁用内部zk修改配置文件2 vi hbase-site.xml<configuration> <property> <name&
2021-03-09 18:17:39 231
原创 redis 3.2.4 安装(亲测有效!)
redis 3.2.4 安装(亲测有效!) 2021-03一、redis安装1 下载redis下载链接:https://download.redis.io/releases/选择你需要的版本2 下载并解压wget http://download.redis.io/releases/redis-3.2.4.tar.gztar -xf redis-3.2.4.tar.gz3 编译cd redis-3.2.4make make insta
2021-03-08 13:08:34 398
原创 hive3.1.0 安装和连接
hive3.1.0 安装和连接前言:安装hive之前一定确保MySQL已安装启动和hdfs启动ps -ef|grep mysqljps1 下载cd /opt/apps/serverswget http://archive.apache.org/dist/hive/hive-3.1.0/apache-hive-3.1.0-bin.tar.gz2 解压tar -xf apache-hive-3.1.0-bin.tar.gz3 修改名称 mv apache-hive-3.1.
2021-03-05 12:11:34 661 1
原创 Lifecycle
maven的Lifecycle1.maven clean。清理项目的target目录2.maven validate验证项目的正确性以及所有必要的信息是否可用验证工程是否正确,所需的信息是否完整3.maven compile编译项目4.maven test编译项目后,再执行Junit测试方法5.maven package编译项目后,再执行Junit测试方法,再把项目打包到target目录6.maven verify对集成测试进行检查以保证满足质量标准检查package是否有效、符
2020-06-24 16:17:03 118
原创 HDFS 命令大全
概要用户命令dfs 命令追加文件内容查看文件内容得到文件的校验信息修改用户组修改文件权限修改文件所属用户本地拷贝到 hdfshdfs 拷贝到本地获取目录,文件数量及大小hdfs 内拷贝createSnapshot 创建快照deleteSnapshot 删除快照显示空闲空间显示文件和目录大小清空回收站查找文件显示目录或文件的访问控制列表显示文件或目录的扩展信息...
2019-12-27 18:34:32 437
转载 zookeeper
如果有人问你ZooKeeper是什么,就把这篇文章发给他。 提到ZooKeeper,相信大家都不会陌生。Dubbo,Kafka,Hadoop等等项目里都能看到它的影子。但是你真的了解 ZooKeeper 吗?如果面试官让你给他讲讲 ZooKeeper 是个什么东西,你...
2019-10-10 15:58:58 86
原创 springboot1.4.1整合logback 遇到的问题
springboot1.4.1整合logback 遇到的问题项目使用了springboot1.4.1整合logback,然而设置的过期时间15 并没有生效,2GB达到2G自动删除也没有生效,仅仅实现了按大小分割。经过查看pom 父工程内的源码发现是默认的logback版本是1.1.7,而过期时间配置是在logback 1.1.8以后才支持的。不得不说这是springboot1.4.1 的b...
2019-10-08 15:40:55 465
原创 Eclipse 工具使用的技巧
Eclipse 工具使用的技巧一、常用快捷键:Ctrl+F11 运行Ctrl+Shift+/ 在代码窗口中加入/* … /注释Ctrl+Shift+\ 消除/ … */注释Ctrl+Shift+O 将缺少的import语句加入Ctrl+1 快速修复(最经典的快捷键,就不用多说了)Ctrl+L 定位在某行 (对于程序超过100的人就有福音了) ...
2019-08-16 19:08:53 142
原创 Eclipse 常用快捷键
Eclipse 常用快捷键Eclipse的编辑功能非常强大,掌握了Eclipse快捷键功能,能够大大提高开发效率。Eclipse中有如下一些和编辑相关的快捷键。1. 【ALT+/】此快捷键为用户编辑的好帮手,能为用户提供内容的辅助,不要为记不全方法和属性名称犯愁,当记不全类、方法和属性的名字时,多体验一下【ALT+/】快捷键带来的好处吧。2. 【Ctrl+O】显示类中方法和属性的大纲...
2019-08-16 19:08:13 61
原创 Eclipse实用教程
Eclipse实用教程一、Eclipse介绍Eclipse 教程Eclipse 是一个开放源代码的、基于 Java 的可扩展开发平台。Eclipse 是 Java 的集成开发环境(IDE),当然 Eclipse 也可以作为其他开发语言的集成开发环境,如C,C++,PHP,和 Ruby 等。Eclipse 附带了一个标准的插件集,包括Java开发工具(Java Development Ki...
2019-08-16 19:07:36 706
原创 redis操作命令锦集
redis操作命令锦集本章节给大家规整一下redis中常用的操作命令redis中五种数据类型字符串 String ----重点特点: 存储所有的字符和字符串应用场景: 做缓存使用哈希 hash特点: 相当于java中hashMap集合应用场景: 可以存储javaBean对象, 此种使用场景不多,可被String替代list集合特点: ...
2019-08-15 22:48:25 78
原创 NOSQL数据库-Redis
NOSQL数据库-Redis目标能够理解nosql的概念能够说出redis的常用数据类型能够使用redis的string操作命令能够使用redis的hash操作命令能够使用redis的list操作命令能够使用redis的set操作命令能够使用jedis对redis进行操作反馈:NOSQL概述2.1 什么是NOSQLNoSQL(NoSQL = Not Only S...
2019-08-15 22:45:12 178
原创 redis的数据类型及操作
redisRedis的概念Redis是一款由C语言编写, 基于内存的持久化的数据库, 其中数据是以KEY-VALUE的形式存储的, Redis提供了丰富的数据类型Redis的特点Redis将数据存储到内存当中, 所以Redis的读写效率非常高: 读 11w/s 写 8w/sredis提供了丰富的数据类型: string , hash , list ,set...
2019-08-15 22:43:39 95
转载 mysql和oracle的区别
MySQL和Oracle都是流行的关系数据库管理系统(RDBMS),在世界各地广泛使用;大多数数据库以类似的方式工作,但MySQL和Oracle的这里和那里总是存在一些差异的。本篇文章就给大家比较Oracle和MySQL,介绍Oracle和MySQL之间的区别,希望对你们有所帮助。MySQL和Oracle有什么区别?两个数据库的特性是不同的,所以与Oracle相比,MySQL的使用方式不同;与M...
2019-05-12 18:32:50 684
原创 HQL
–创建数据库create database if not exists mydb;–删除数据库 如果数据库里有表则报错drop database if not exists mydb;–更改数据库属性 表名 表位置无法更改alter database mydb set dbproperties(‘createtime’=‘20190506’);–创建表–创建数据库表语法CREATE...
2019-05-06 18:08:50 160
转载 HDFS常用命令
HDFS常用命令 在 hdfs 文件系统上创建一个 input 文件夹 bin/hdfs dfs -mkdir -p /user/anna/input将测试文件内容上传到文件系统上 bin/hdfs dfs -put wc.input /user/anna/input查看上传的文件是否正确 bin/hdfs dfs -cat /user/anna/inpu...
2019-04-25 15:49:23 206
转载 Linux下安装Maven
Linux下安装Maven Maven是基于项目对象模型(pom),可以通过一小段描述信息来完成复杂项目的构建,另外还有报告和文档功能,是一种强大的项目管理工具,接下来就基于Linux安装Maven 安装Maven之前,首先要正确安装JDK,JDK确认无误后,首先进入Apache maven官网:https://maven.apache.org/,然后...
2019-03-31 12:13:44 69
转载 Linux history命令
Linux history命令 Outline:查看— history查看显示时间戳— export HISTTIMEFORMAT=’%F %T ’清除历史-- history -c查看后5 条-- history 5 history命令主要用于显示历史命令, 重新执行历史命令。 Linux系统当你在shell(控制台)中输入并执行命令时,shell会自动把你的命令记录到...
2019-03-27 17:00:06 141
转载 hive分析窗口函数 NTILE,ROW_NUMBER,RANK,DENSE_RANK
本文中介绍前几个序列函数,NTILE,ROW_NUMBER,RANK,DENSE_RANK,下面会一一解释各自的用途。Hive版本为 apache-hive-0.13.1注意: 序列函数不支持WINDOW子句。(什么是WINDOW子句)数据准备:cookie1,2015-04-10,1cookie1,2015-04-11,5cookie1,2015-04-12,7cookie1,2...
2019-03-27 10:31:57 107
转载 OLAP、OLTP的介绍和比较
OLAP、OLTP的介绍和比较OLTP与OLAP的介绍数据处理大致可以分成两大类:联机事务处理OLTP(on-line transaction processing)、联机分析处理OLAP(On-Line Analytical Processing)。OLTP是传统的关系型数据库的主要应用,主要是基本的、日常的事务处理,例如银行交易。OLAP是数据仓库系统的主要应用,支持复杂的分析操作,侧重决...
2019-03-26 20:01:09 104
转载 五十款阿里开源软件说明介绍
五十款阿里开源软件说明介绍 以下文章从开源中国汇总而来:http://www.oschina.net/project/alibaba1.JDBC连接池、监控组件 Druid Druid是一个JDBC组件,它包括三部分:(1) DruidDriver 代理Driver,能够提供基于Filter-Chain模式的插件体系;(2)DruidDataSo...
2019-03-19 20:20:08 829
转载 数据仓库基本概念
数据仓库基本概念 一、度量、指标、指标器度量和维度构成OLAP的主要概念,对于在事实表或者一个多维立方体里面存放的数值型的、连续的字段,就是度量。这符合上面的意思,有标准,一个度量字段肯定是统一单位,例如元、户数。如果一个度量字段,其中的度量值可能是欧元又有可能是美元,那这个度量没法汇总。在OLAP中还有计算度量的说法,用一个总费用除以用户数,得到每户平均...
2019-03-10 19:37:47 650
转载 你必备的39个大数据可视化工具
你必备的39个大数据可视化工具 数据可视化无处不在,而且比以前任何时候都重要,无论是在行政演示中为数据点创建一个可视化进程,还是用可视化概念来细分客户,数据可视化都显得尤为重要,本文将推荐39个可用于处理大数据的可视化工具(排名不分先后)。 作者:Andy Lurie 翻...
2019-01-26 08:44:38 1524
转载 servlet面试常考
servlet面试常考 (转载)1、说一说Servlet生命周期(非常重要)Servlet生命周期包括三部分:初始化:Web容器加载servlet,调用init()方法处理请求:当请求到达时,运行其service()方法。service()自动派遣运行与请求相对应的doXXX(doGet或者doPost)方法。销毁:服务结束,web容器会调用servlet的distroy()方法销毁se...
2019-01-25 22:23:31 84
原创 redis的启动和数据库客户端操作
1.>redis 启动命令cd /export/servers/redis/bin/./redis-server …/conf/redis_6379.conf2> 查看 redis数据库及删减/export/servers/redis/bin[root@node3 bin]# ./redis-cli -h 192.168.72.131192.168.72.131:6379...
2019-01-22 19:53:32 161
转载 C++之父:C++ 的五个普遍误解
C++之父:C++ 的五个普遍误解 总结一下提到的五点:1. “要理解C++,你必须先学习C”2. “C++是一门面向对象的语言”3. “为了软件可靠性,你需要垃圾回收”4. “为了效率,你必须编写底层代码”5. “C++只适用于大型、复杂的程序”表达一下个人愚见:1.“要理解C++,你必须先学习C”不先学c的好处是,有些c的坑,可以不跳...
2019-01-18 19:54:32 148
转载 CentOS克隆后配置静态IP
我们在工作中,肯定要用到多台服务器。不太可能一台台的去安装。这样既浪费时间,而且还得重新配置。这时可以使用vmware中的克隆功能克隆流程注:下图为克隆的过程简图登录后查看ip[root@localhost ~]# ipconfig #发现只有io[root@localhost ~]# ipconfig -...
2019-01-18 11:07:45 86
转载 linux防火墙开启和关闭详解
以下两种方法一、暂时开启和关闭防火墙 1种 service方式查看防火墙状态: [root@centos6 ~]# service iptables statusiptables:未运行防火墙。开启防火墙(即时生效,重启后失效):[root@centos6 ~]# service i...
2019-01-17 20:19:09 211
转载 七层协议和四层协议
七层协议和四层协议 OSI 七层模型通过七个层次化的结构模型使不同的系统不同的网络之间实现可靠的通讯,因此其最主要的功能就是帮助不同类型的主机实现数据传输 。完成中继功能的节点通常称为中继系统。一个设备工作在哪一层,关键看它工作时利用哪一层的数据头部信息。网桥工作时,是以MAC头部来决定转发端口的,因此显然它是数据链路层的设备。具体说:物...
2019-01-13 22:07:41 1288 1
转载 安装Hue后的一些功能的问题解决干货总结(博主推荐)
不多说,直接上干货! 我的集群机器情况是 bigdatamaster(192.168.80.10)、bigdataslave1(192.168.80.11)和bigdataslave2(192.168.80.12) 然后,安装目录是在/home/hadoop/app下。 官方建议在master机器上安装Hue,我这里也不例外。...
2018-12-26 18:46:59 3585 3
转载 思维导图学Linux《鸟哥的Linux私房菜基础篇-第三版》
原文链接:http://www.jianshu.com/p/ec06e1ace0bd说明使用思维导图 Mindjet MindManager 制作的《鸟哥的Linux私房菜基础篇-第三版》学习笔记。整体结构个人计算机架构Linux distributionLinux管理模式切换关机程序管理vim编辑器数据流重定向文本格式化处理Linux目录和文件档案权限和目录配置Linux文件系统shell...
2018-12-21 18:21:24 256
转载 鸟哥的 Linux 私房菜学习总结(超赞!!!)
我是技术搬运工,好东西当然要和大家分享啦.原文地址常用操作以及概念求助1. --help指令的基本用法与选项介绍。2. manman 是 manual 的缩写,将指令的具体信息显示出来。当执行 man date 时,有 DATE(1) 出现,其中的数字代表指令的类型,常用的数字及其类型如下:代号类型1用户在 ...
2018-12-21 18:15:03 222
转载 windows 系统的 cmd 命令大全
#CMD命令cmd是command的缩写.即命令提示符(CMD),是在OS / 2 , Windows CE与Windows NT平台为基础的操作系统(包括Windows 2000和XP中, Vista中,和Server 2003 )下的“MS-DOS 方式”。中文版Windows XP 中的命令提示符进一步提高了与DOS 下操作命令的兼容性,用户可以在命令提示符直接输入中文调用文件。##概念...
2018-12-20 22:11:18 275
转载 马云:未来制造业要的不是石油 最大的能源是数据
马云:未来制造业要的不是石油 最大的能源是数据我今天早上来之前在网上查了一下,看到很多线下小店说在打折,在关店,都说了一个事,“都是马云惹的祸,都是淘宝惹的祸”。其实我在想,13年以前我们在推广整个电子商务的时候,我们说互联网会影响生产、制造、销售,互联网将会影响社会的方方面面,电子商务将会对很多的行业带来巨大冲击,很多人并不以为然。今天我也可以这么讲,十年以后,很多人会说,中国的经济也好,...
2018-12-20 18:58:52 161
转载 如何快速转载CSDN中的博客
前言 对于喜欢逛CSDN的人来说,看别人的博客确实能够对自己有不小的提高,有时候看到特别好的博客想转载下载,但是不能一个字一个字的敲了,这时候我们就想快速转载别人的博客,把别人的博客移到自己的空间里面,当然有人会说我们可以收藏博客啊,就不需要转载,(⊙o⊙)… 也对。。实现 因为我...
2018-12-20 17:33:41 71
原创 题目:古典问题:有一对兔子,从出生后第3个月起每个月都生一对兔子,小兔子长到第三个月后每个月又生一 对兔子,假如兔子都不死,问每个月的兔子总数为多少?
题目:古典问题:有一对兔子,从出生后第3个月起每个月都生一对兔子,小兔子长到第三个月后每个月又生一对兔子,假如兔子都不死,问每个月的兔子总数为多少?![java代码] ...
2018-12-18 19:04:30 342
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人