自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(4)
  • 问答 (1)
  • 收藏
  • 关注

原创 大数据学习之HDFS基础

一、HDFS介绍 基本介绍 HDFS的全称是Hadoop Distributed File System ,Hadoop的 分布式 文件 系统 是一种允许文件通过网络在多台主机上分享的文件系统,可以让多台机器上的多个用户分享文件和存储空间 HDFS是一种适合大文件存储的分布式文件系统,不适合小文件存储 设计思想 二、HDFS基础操作 HDFS的shell 命令格式:bin/hdfs dfs -xxx scheme://authority/path 使用hadoop bin目录的hdf

2022-02-26 10:01:51 848

原创 大数据之Hadoop基础与集群搭建

Hadoop框架主要解决海量数据的分布式存储和分布式计算问题 一、发行版介绍 原生Hadoop:开源,无技术支持 CDH:Cloudera Hadoop,商业版,收费,提供技术支持和界面操作,方便运维管理 HDP:HortonWorks,开源,提供界面操作 二、Hadoop版本演变 版本架构: Hadoop 1.x:HDFS+MapReduce HDFS:分布式存储 MapReduce:资源管理+分布式计算 Hadoop 2.x:HDFS+YARN+MapReduce HDFS.

2022-02-26 09:59:31 1307

原创 大数据学习之Linux基础(二)

一、Linux高级配置 配置静态IP 配置文件地址:/etc/sysconfig/network-scripts/ifcfg-ens33 修改内容: BOOTPROTO值由“dhcp”修改为:static 增加:【值的设置参考VMware虚拟网络编辑器内容】 IPADDR GATEWAY DNS1 设置主机名 临时设置:立即生效 命令:hostname 主机名 [root@localhost ~]# hostname bigdata01 [root@local

2022-02-25 08:56:08 438

原创 大数据学习之Linux基础(一)

一、虚拟机安装 VMware 15安装 centOS 7 安装 远程连接:SecureCRT 二、Linux命令使用 基础命令 文件查看相关 pwd:列出当前目录的路径 [root@localhost ~]# pwd /root ls:列出当前目录下的所有文件 [root@localhost ~]# ls anaconda-ks.cfg ll(ls -l缩写):列出当前目录下的文件(带文件信息) [root@localhost ~]# ll total 4 //“total”,是指

2022-02-22 22:03:17 485

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除