u010867462的博客

原创 Hadoop-Pig介绍

Hadoop-Pig常用函数介绍1.Pig简介：Pig在这个地方并不是指“猪”(我也不知道这个开发者的命名是什么想法)，是指的一种数据处理工具，常用于配合Hadoop使用，用于处理大数据的分析与处理(数据批处理)。 因为Pig有一套专属的语法(与MySQL类似)，所以相比于MapReduce来说，更适合做一些复杂度不高的数据筛选处理工作，只需要简单几行命令就可以获得可能几百行MapReduce代码带

原创 机器学习入门

机器学习介绍 机器学习应用简介 机器学习常见操作 机器学习入门学习步骤 机器学习图谱 机器学习相关书籍推荐 参考资料1. 机器学习介绍机器学习是近20多年兴起的一门多领域交叉学科，涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。机器学习理论主要是设计和分析一些让计算机可以自动“学习”的算法。机器学习算法是一类从数据中自动分析获得规律，并利用规律对未知数据进行预测的算法。因为学习算

原创 机器学习常用模型概览

原创 hadoop搭建(2.6.4)

1. 环境准备安装软件如下 - jdk安装 (1.8.0_101) - hadoop安装 (2.6.4)1-1. jdk安装 a. 官方下载jdk： http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html b. 下载rpm包直接安装(注意区分i586和x64版本，我这边系统都

原创 机器学习值决策树算法(下)-ID3实现

决策树展示 决策树分类 决策树存储 总结 参考1.决策树展示 决策树展示 上一篇文章，我们介绍了决策树的基本概念，信息基本概念以及如何通过选择最优分类生成决策树，本篇文章首先介绍如何根据决策树通过matplotlib库来实现决策树图的展现。matplotlib介绍 matplotlib是一个相对来说比较庞大的库，常用于机器学习中，用于直观的展示数据，例如本次的决策树展示，本章中介绍如何用该库创建树枝

原创 机器学习值决策树算法(上)-ID3实现

决策树算法(上)决策树算法上 决策树算法简介 决策树算法特点及应用 信息概念介绍 生成决策树 总结 1.决策树算法简介 决策树概念介绍 决策树算法是监督学习算法的其中一种，用于根据已有数据训练数据针对未知数据进行分类的一种算法，该算法的核心理念是通过不断的判断，递归，判断，来计算数据的分类。举例说明 概念可能不大好理解，举例就会清楚直观了，相信大多数人都有过生病的体验，找医生看病的时候，医生就会让你

原创 machine_learning-knn算法详解(近邻算法)

近邻算法是机器学习算法中的入门算法，该算法用于针对已有数据集对未知数据进行分类。 该算法核心思想是通过计算预测数据与已有数据的相似度推测结果。 举例： 假设有如下一组数据(在以下我们统一把该数据作为训练数据): 身高 年龄 国籍 170 23 中国 180 21 美国 185 22 俄国 175 24 中国