- 博客(13)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 HashMap源码解析
一.HashMap的类图原理解释：https://blog.csdn.net/qq_40645822/article/details/911392151.Map接口定义了多个方法待实现类去实现public interface Map<K,V> { boolean isEmpty(); boolean containsKey(Object key); boolean containsValue(Object value); V g
2020-09-24 11:46:40
100
原创 docker使用
1.docker安装1.命令查看你当前的内核版本uname -r2. yum 包更新到最新yum -y update3. 卸载旧版本yum remove docker docker-common docker-selinux docker-engine4. 安装需要的软件包yum install -y yum-utils device-mapper-persistent-dat...
2019-05-13 18:34:49
203
转载 机器学习原理及入门之R语言
1.机器学习语言--R语言 R是用于统计分析、绘图的语言和操作环境。R是属于GNU系统的一个自由、免费、源代码开放的软件，它是一个用于统计计算和统计制图的优秀工具。具有面向对象的血统；机器学习为什么需要R语言呢？因为这是统计学家的语言，我们需要借助其中的方法来训练机器；2.R官网下载3.1.3 3.IDE开发环境使用Rstudio4.重点--如何使用R数据结构来...
2018-10-25 20:13:01
1728
原创 hbase的练习和phonenix的使用
1.进入hbase的操作./hbase shelllist 展示 所有表格此时hdfs上可以查询到hbase上设置的t1 java代码连接zookeeper控制hbase代码import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.*;import org.apache...
2018-10-25 19:06:22
325
原创 hbase安装
单机版安装1.上传文件2.解压文件进入conftar -zxvf hbase-1.1.3-bin.tar.gzcd hbase-1.1.3cd conf/3.hbase-env.sh中配置JAVA_HOME和export HBASE_MANAGES_ZK=false（如果你启动了zookeeper集群 避免冲突）4.配置hbase-site.xml /bin/st...
2018-10-23 16:58:04
107
原创 hbase的基本原理
HBase是一个分布式的、面向列的开源数据库，该技术来源于 FayChang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系数...
2018-10-20 18:28:06
496
原创 hadoop案列之微博推荐计算--mapReduce
根据微博的内容记录通过分词计算哪些用户对哪些产品喜欢 运行代码：FirstJobpackage com.laoxiao.mr.tf;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;i...
2018-10-19 16:54:09
415
原创 beeline,hiveServer2和hiveJDBC的具体使用
两种启动方式：启动 hiveserver2占用10000端口启用beeline 之前创建的表成功展示 连接成功--类似jdbc连接新建java项目连接 hive 运行项目通过hive的正则表达式使用-- 需要了解正则表达式正则表达式基本讲解--可以看懂上面的正则：...
2018-10-18 18:31:43
421
原创 hive使用说明DDL和DML
Hive的数据类型和DDL重点是hive 的建表语句和分区https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL建表 最简单的列子CREATE TABLE people( id STRING, name STRING, likes ARRAY<string...
2018-10-18 16:32:38
274
原创 hive搭建详细--安装mysql及hive搭建
1.安装mysql检查是否安装过：yum list installed | grep mysql删除安装的mysql：yum -y remove mysql-libs.x86_64安装mysql：yum install mysql-server启动mysql：service mysqld start获取mysql密码：grep "password" /var/log/...
2018-10-18 14:33:16
599
翻译 安装Hive--需要大数据hadoop集群已经搭建起来
1.要求： 运行hadoop集群 安装一个关系型数据，（mysql）：yum install mysql-server2.配置环境变量：HADOOP_HOME；HIVE_HOME；3.修改HADOOP_HOME\lib目录下的jline-*.jar 变成HIVE_HOME\lib下的jline-2.12.jar--解决兼容性问题4.修改hive...
2018-10-16 10:18:13
436
原创 hive浅析架构--需要了解hadoop相关知识后阅读
1.Hive的产生: –非java编程者对hdfs的数据做mapreduce操作 2.数据仓库.解释器，编译器，优化器等3.Hive运行时，元数据存储在关系型数据库里面4.架构：用户接口主要有三个：CLI，Client 和 WUI ，cli 接入方式最为普遍，driver:将sql翻译为mapReduce,meta（元数据） 放入hive内置关系型数据库，解释器、编译器、优化器完...
2018-10-16 10:12:23
90
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人