Cloud_Leung-CSDN博客

原创 Graylog日志收集分析系统部署记录

一.框架描述框架使用rsylog+kafka+graylog+elasticsearch技术，其中rsyslog作为日志转发和分解工具，kafka作为日志暂存队列和缓存工具，graylog则作为日志流处理以及查询工具，elasticsearch作为日志索引和存储。首先，rsyslog可以通过不同的输入组件来抓取或接收日志，目前提供的并且有可能使用到的方式包括：tcp、u...

2018-06-25 09:40:24 4075 1

原创 Hadoop+Kylin集群部署过程和问题

一.Hadoop安装初始化工作版本:hadoop：2.7.1hbase：1.3.1hive：2.3.0 kylin：2.0.0 jdk：1.8.01.新建用户和组> groupadd hadoop> useradd -d /home/hadoop -g hadoop -m -s /bin/bash hadoop> passwd hadoop2.为该用户设置ssh免密登陆&gt...

2018-06-25 09:35:10 1392

转载算法仓库（三）决策树分类

决策树是一种树形结构，为人们提供决策依据，决策树可以用来回答yes和no问题，它通过树形结构将各种情况组合都表示出来，每个分支表示一次选择（选择yes还是no），直到所有选择都进行完毕，最终给出正确答案。本文介绍决策树如何来实现分类，并用来预测结果。先抛出问题。现在统计了14天的气象数据(指标包括outlook，temperature，humidity，windy)，并已知这些天气

2017-12-19 15:06:36 959

为什么要提出信息增益率这种评判划分属性的方法？信息增益不是就很好吗？其实不然，用信息增益作为评判划分属性的方法其实是有一定的缺陷的，书上说，信息增益准则对那些属性的取值比较多的属性有所偏好，也就是说，采用信息增益作为判定方法，会倾向于去选择属性取值比较多的属性。那么，选择取值多的属性为什么就不好了呢？举个比较极端的例子，如果将身份证号作为一个属性，那么，其实每个人的身份证号都是不相同的，也就是说，

2017-12-18 17:40:49 1185

转载算法仓库（一）什么是信息增益

文章是转载的，这篇文章网络上各处转载实在太多，而且几乎所有转载都是直接复制而没进行过处理，导致其中的重要部分：数据丢了。我在查看了各个文章后，把数据部门进行了补全，希望能为自己以后保留一个记录，也希望能带给后来人一些帮助，文章末尾会标明转载的来源，虽然我也不清楚这到底是不是最终的源头。—————————————————————————————————分割线———————————

2017-12-18 15:36:19 2009

原创工作心得(三)——初识RabbitMQ,RabbitMQ的安装和集群配置

最近被公司派去研究新技术，RabbitMQ队列服务，用来替换公司正在使用的Redis队列，至于为什么准备使用RabbitMQ而要弃用redis，这里我就不细说了，网上自己去查查资料吧，萝卜白菜各有所爱。总之，在一系列的查看资料，查文档，上谷歌求助等等，终于我封装的RabbitMQ框架就要上线生产了(预计11.15日上线，经过三轮测试)，我没有使用Spring提供的rabbitmq框架，而是自己

2016-11-09 16:31:00 2913

原创工作心得(二)——如何将Nexus本地仓库和Maven结合起来

这篇文章承接上一篇文章，接下来讲如何将Nexus本地仓库和Maven结合起来，实现maven去本地仓库中获取jar包，而不是去中央仓库；实现将自己的jar包发布到本地仓库中，本文只介绍如何搭建这样的环境，并不讲解这种环境的适用范围。----------------------------------------------------------------------------------

2016-01-16 22:07:31 2580 1

原创工作心得(一)——如何搭建本地的maven仓库

一眨眼工作了两年多了，大概两年前我写过第一篇技术文章，是个关于easyui tree的，刚才回去翻看了一下。。。。不忍直视，我心里只有一句话：这特么是什么玩意！呵呵，相信大家也有这样的经历，工作一段时间后，再去看曾经写的代码啊，文章啊，都会吐槽自己，怎么当年写的这么垃圾。。。好了不说废话了。我在这个新公司工作了快一年了，公司用了很多技术，我最近会抽时间把这些东西一点点整理出来，在跟大家分享

2016-01-16 12:54:34 4191

原创 easyui tree 的异步加载前台的编写方法和后台的json数据格式组装方法

这是本人第一个技术文章，首先声明，我其实是一个菜鸟，工作也才不到三个月，从认识java到现在也才刚刚一年。写这篇文章呢，也主要是为了把自己的心得记录下来，也为了以后可以翻阅。同时也希望可以分享出来与大家一起探讨。写的不好，请轻喷，有什么不对的地方，指出来大家一起探讨一下。------------------------------------------------------

2013-11-23 18:08:20 6136

Tomoyolq的专栏