自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

学大数据的小学生

初学者记录每天学习的知识,一起进步

  • 博客(5)
  • 资源 (1)
  • 收藏
  • 关注

原创 hive_通过yyyymm格式的变量,获取前12个月以及每月最后一天的日期变量

通过yyyymm格式的变量,获取前12个月以及每月最后一天的日期变量--获得12个月的维表(每月+每月最后一天)drop table temp_dual1;create table temp_dual1 (id string);insert into temp_dual1 values(${month_id}||'01');drop table temp_purchase_RESERVE_${month_id};create table temp_purchase_RESERVE_${month

2020-05-20 18:12:23 3499

原创 sehll删除只读变量

sehll删除只读变量使用>cat << EOF| gdb>attach $$>call unbind_variable("只读变量名")>detach>EOF如果gdb无法使用,请先安装sudo yum install gdb实例操作如下:[bian@hadoop01 ~]$ readonly bian=1[bian@hadoop01 ~]$ echo $bian1[bian@hadoop01 ~]$ bian=2-bash: bi

2020-05-19 21:30:15 255

原创 hadoop日记2.2:hdfs编程实践

Hdfs shell接口 一、 Hdfs编程实践 1. Hadoop提供了关于HDFS在Linux操作系统上进行文件操作的常用Shell命令以及Java API。同时还可以利用Web界面查看和管理Hadoop文件系统 2. Hadoop安装成功后,已经包含HDFS和MapReduce,不需要额外安装。而HBase等其他组件,则需要另外下载安装。 3. 在学习HDFS编程实践前,我们...

2018-09-10 18:40:51 500

原创 hadoop日记2.1:hdfs设计思想和基础概念

Hdfs HDFS设计思想与基础概念 一、 概念: HDFS是分布式文件系统,HDFS有高容错性的特点,并且设计用来部署在低廉的硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集的应用程序。 应用场景是海量数据(视频、网页)的可靠性存储、数据归档(视频监控领域)。 二、 Hdfs设计目标: 1. 将硬件故障当作常态而不是异常 ...

2018-09-07 14:35:33 659

原创 hadoop日记1:hadoop伪分布式安装

Hadoop伪分布式安装 实验环境: 操作系统:ubantu18 Jdk版本:1.8 Hadoop版本:2.7.2 Vmware workstation:14.1.3 新建一个用户 安装hadoop环境 前提:已经安装好jdk,注意修改环境变量路径userdel hadoop //删除原来的用户 groupadd hadoop //新建一个hadoop组usera...

2018-09-07 10:16:55 132

hadoop日记2.1:hdfs设计思想和基础概念

这是hdfs的基础知识,适合初学者了解hdfs是怎么分布式存储数据和怎么写入、读出的等等

2018-09-07

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除