自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(4)
  • 问答 (1)
  • 收藏
  • 关注

原创 大数据学习之HDFS基础

一、HDFS介绍基本介绍HDFS的全称是Hadoop Distributed File System ,Hadoop的 分布式 文件 系统是一种允许文件通过网络在多台主机上分享的文件系统,可以让多台机器上的多个用户分享文件和存储空间HDFS是一种适合大文件存储的分布式文件系统,不适合小文件存储设计思想二、HDFS基础操作HDFS的shell命令格式:bin/hdfs dfs -xxx scheme://authority/path使用hadoop bin目录的hdf

2022-02-26 10:01:51 850

原创 大数据之Hadoop基础与集群搭建

Hadoop框架主要解决海量数据的分布式存储和分布式计算问题一、发行版介绍原生Hadoop:开源,无技术支持CDH:Cloudera Hadoop,商业版,收费,提供技术支持和界面操作,方便运维管理HDP:HortonWorks,开源,提供界面操作二、Hadoop版本演变版本架构:Hadoop 1.x:HDFS+MapReduceHDFS:分布式存储MapReduce:资源管理+分布式计算Hadoop 2.x:HDFS+YARN+MapReduceHDFS.

2022-02-26 09:59:31 1307

原创 大数据学习之Linux基础(二)

一、Linux高级配置配置静态IP配置文件地址:/etc/sysconfig/network-scripts/ifcfg-ens33修改内容:BOOTPROTO值由“dhcp”修改为:static增加:【值的设置参考VMware虚拟网络编辑器内容】IPADDRGATEWAYDNS1设置主机名临时设置:立即生效命令:hostname 主机名[root@localhost ~]# hostname bigdata01[root@local

2022-02-25 08:56:08 438

原创 大数据学习之Linux基础(一)

一、虚拟机安装VMware 15安装centOS 7 安装远程连接:SecureCRT二、Linux命令使用基础命令文件查看相关pwd:列出当前目录的路径[root@localhost ~]# pwd/rootls:列出当前目录下的所有文件[root@localhost ~]# lsanaconda-ks.cfgll(ls -l缩写):列出当前目录下的文件(带文件信息)[root@localhost ~]# lltotal 4 //“total”,是指

2022-02-22 22:03:17 486

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除