自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

zhangsheng的博客

"hello world"

  • 博客(14)
  • 资源 (2)
  • 问答 (2)
  • 收藏
  • 关注

原创 hbase bulkload 出现 Retry attempted x times without completing, bailing out解决

hbase bulkload Retry attempted x times without completing, bailing out异常解决

2022-12-02 17:24:17 710

原创 spark编写wordcount程序

object WordCount { def main(args: Array[String]): Unit = { val lines = Array("hello tom hello jerry", "hello kitty hello tom", "hello tom tom") //按空格切割行成词,形成RDD(Array(),Array(),...),在flat...

2019-09-17 15:32:22 320

原创 spark累加器Accumulator

1 使用累加器的背景spark在调度任务时,master会挑选一个worker成为driver。在使用spark的action算子时,会触发job任务,开始计算。此时,开始切分,driver分发Task给相应的executor,每个executor是相对独立的。对应在action算子范围内的变量会各自独立。如果在action算子代码内使用driver算子代码范围的变量,会形成在每个exe...

2019-09-17 15:18:32 193

原创 hadoop的HA安装配置

1 安装配置zookeeper1、https://archive.apache.org/dist/zookeeper/2、上传压缩文件到集群 拖之3、解压 tar -zxvf xxx.tar.gz -C /path4、修改配置文件进入conf目录:cd ZKHOME/conf```> mv zoo_sample.cfg zoo.cfg -- 改名> vim zoo.cf...

2019-08-27 15:44:13 177

原创 hadoop完全分布式安装教程

1 网络配置如果是配虚拟机,记得到计算机管理—》服务,打开以下服务,要不然上不了网。1.1编辑网络配置文件vim /etc/sysconfig/network-scripts/ifcfg-ens33TYPE=EthernetPROXY_METHOD=noneBROWSER_ONLY=noBOOTPROTO=staticDEFROUTE=yesIPV4_FAILURE_FATAL=...

2019-08-27 15:30:21 421

原创 模拟登录问题

请教各位如何才能实现模拟登录?问题描述在模拟学校教务处登录时,已知用户名和密码。密码会与服务器给的随机字符串进行SHA1加密。如何在一次http连接中即获得这个随机字符串,又能发送用户名和密码,。一次http连接中不可能先获取随机字符串,再发送用户名和密码,这样会报错。因为一次http连接总是先发送数据,才能获取信息。网站登录流程1、登录时在网站上将用户名、密码输入,...

2019-04-20 19:02:09 352

原创 java.lang.NullPointerException

出现如下问题有几种请情况: hadoop.tmp.dir没有配置,配置如下:        <property>            <name>hadoop.tmp.dir</name>            <value>file:/D:/install_document/hadoop-2.7.3/data/tmp</val...

2018-10-15 10:53:57 410

原创 集合框架各类的特点

List ArrayList 线程不安全 动态数组 LinkedList 链表 线程不安全 Vector 线程安全 动态数组 Set HashSet 无序性 元素不重复性 可以添加null值,但是只能有一个 线程不安全 LInkedHashSet 有序性(按照输入顺序) 元素不重复性 可以添加null值,但是只能有...

2018-07-31 09:34:37 727

原创 java包装类

基本数据类型是不具备对象的特性的,不能调用方法,简单所以每一个基本数据类型都提供了一个包装类,可以通过创建对象的方式操作数据             byte Byte             short Short             int Integer             long Long             float Float             do...

2018-07-31 08:47:30 163

原创 内存中的区域(对象的底层理解)

引用文章:https://blog.csdn.net/qq_36747738/article/details/70909796#commentsedit栈(stack):放置局部变量,局部变量执行完毕就会被回收堆(heap):放置对象(属性),数组,分配的空间(malloc  calloc  realloc)未初始化段(bss):没有初始化全局变量和(成员变量)和静态变量(类变量),初...

2018-07-21 11:58:23 224

原创 Java关于不同数据类型的数组开辟空间后为初始化时的值

1、(int  byte short long)整型数组开辟空间后未初始化时,int[] arr = new int[10];此时的arr里面的值是02、(double  float  )浮点型型数组开辟空间后未初始化时,float[] arr = new float[10];此时的arr里面的值是0.03、(String  之类的引用类型)字符型数组开辟空间后未初始化...

2018-07-20 15:27:53 764

原创 java的导包需要的几条注意事项

导入包的语法: import packagename.classname 1.当要使用不同包中的类名相同的类,只能使用全限定名来创建对象如com.baidu.www.classname2、包的域名要 反写com.baidu,www3、如果导入的类与当前包中的类重名,那么创建对象时,导入的类的优先级高于当前的包的类。即使用的是导入的包的类。 ...

2018-07-20 15:18:52 1906

原创 Linux学习总结

课程:Linux操作系统与应用 参考书:Linux从入门到精通、unix环境高级编程 学习linux之前必须要做好心理准备: 第一,要明白学好linux不是一件一蹴而就的事,一定要能坚持使用它,特别是在使用初期,由于在linux中,用户权限很大,做任何事情都很自由,所以,你往往需要知道你做的每一步在干什么,系统做了些什么,这需要时间去掌握,(背命令不是一件好的学习方法,相信我你一定会在你背完之前全...

2018-05-23 21:37:16 29307 3

原创 编译原理学习小结_0

编译器简介编译器是一个翻译程序。将一种程序翻译成另一种语言(如汇编或其他语言)。作为翻译的重要组成部分,编译器能够向用户报告编译的源程序的出现的错误。编译器分类一遍编译器多遍编译器装入并执行编译器调试编译器优化编译器等编译器模型——分析-综合模型编译有两部分组成:分析和综合。分析部分将源程序切分成一些基本快并形成源程序的中间表示,综合部分将源程序的中间表示转换为所需的目标程序。编译器的前驱和后缀源...

2018-05-23 21:32:12 450

Hadoop安装教程.docx

hadoop的完全分布式安装配置流程,没有关于HA机制的描述,如果不想要下载,我在我的博客也有相关内容的描写,可以直接访问我的博客进行访问。

2019-08-27

The_C_programming_Language(中文版).pdf

2016-08-20

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除