nie_hw-CSDN博客

原创 hdfs,hive,hbase,与kerberos 的java 操作

import java.io.IOException; import java.net.URI; import java.net.URISyntaxException;import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.

2017-02-17 16:32:44 1611 1

原创为什么使用Base64加密

base64加密方式。这种加密方式很容易就可以进行解密，并不存在安全性，为什么还要使用呢？是为了数据在网络间能够正常的传输。曾经写过一个获取秘钥，然后解密密文。然而这个方法让我很纠结，有的时候密文可以被解开，有的时候解密失败。查了很久是秘钥长度不对。秘钥/assffc12jjd30/ds2.我使用的是C语言的strcopy方法，这个方法，遇见0/就结束复制。当然还有很多隐形字符传输的过程中也

2016-11-17 15:52:39 708

原创 kylin1.15.4.1 /usr/local/hadoop-2.6.0/contrib/capacity-scheduler/*.jar

kylin1.15.4.1部署遇见的问题： Failed to scan [file:/usr/local/hadoop-2.6.0/contrib/capacity-scheduler/*.jar] from classloader hierarchy 24 java.io.FileNotFoundException: /usr/local/hadoop-2.6.0/contrib/capa

2016-10-29 17:38:22 2019 1

原创 shell 适合非运维人员的shell编程

贫僧工作3年3月有余，行事开发。察shell编程，下方实例与开发者差强人意。 1:文件开头#!/bin/sh 2:打印里面的变量echo “${name}” 4:函数 function 函数名(){可以没返回，返回则必须是数字，外面程序通过$？获取return 18 }传参利用位置变量1,1,2,$$-pid,$*-参数数组,$@-参数数组,$#-参数个数5:if ,while ,cas

2016-08-21 23:20:43 629

原创 Python 8种基本数据类型简单实例

1:字符串类型字符串里面有单引号就使用双引号括，字符串里面存在但引号，就是用双引号括三个但引号，即所见即所得 str1=”sb1’” str2=’sb2”’ str3=”’sb3’ ”’ print str1,str2,str3 print type(str2) 2：布尔类型 flag= False 3:整数 num =20 print num print typ

2016-08-08 19:48:19 1574

原创为什么Int类型的取值范围是2的31次方减1

今天在无意中想到这个问题，因此记录一下。嘘嘘，莫笑。数据在计算机里面以2进制存储。正整数就是以二进制存储。负整数以补码存储。一个Int类型数据占据空间4字节。每个字节8位，共32位。因此最大存储2的31次方（从2的0次方开始）。但32位的第一位是符号位。所以2的31次方减1.简单说Int类型占据4字节，所以是这个取值范围。

2016-08-04 20:24:38 22449 15

原创 Python基础进阶1

1:import sys sys.exit([arg])//退出程序 import sys import os import webbrowser as web #web浏览器 pathname =os.environ#获取系统变量os.system(r’E:\Ksoftware\liebao\liebao.exe’)#可以执行的命令,带空格的文件夹需要用双引号引起来os.startfil

2016-08-03 19:22:15 207

原创 Python里面的文件操作和类

36：深浅拷贝 import copy c=copy.copy(a) //a和c的地址不一样，内容一样 n=m //m和n的地址空间一样，内容一样,d=copy.deepcopy(a) //深拷贝，子空间也拷贝出来一份37：文件的操作 r只读 r+读写 w先删，没有就创建，再写 w+ 先删，没有就创建，再读写 a :写入，再文件末尾追加新的内容，文件不存在就

2016-08-03 19:10:24 289

原创 Python里面的正则

Python里面的正则，服从普通正则特性。需要注意的是Python自己的方法。 34:python的正则 import rere.findall(“s”,”dfssssssssssssssddf”) Match对象的mctch()方法 Match对象还有 group() : 输出匹配字符 start（）：返回匹配开始的位置 end（）：返回匹配结束的位置 span() 返回元组

2016-08-03 19:07:40 283

原创 Python关于实现包和创建包

30:引入包日历方法包import calendar 31:本程序调用和他程序调用的区分 if name == “main“: add(“”,”“) name == “cal” // 包的名字32：包的导入先在当前目录下面找。33：建包创建一个包名的目录包下面创建一个init.py 可以存放脚本文件，已编译的，子包 import 包名.脚本名 import csvs.c

2016-08-03 19:04:37 438

原创 Python 基本数据类型及变量的使用

欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件这里写代码片这里写代码片1：开始Python2：变量python里面不需要提前定义变量的类型。即使是

2016-08-02 20:56:15 420

原创 Linux 之路

今天开启linux之路。新生之路，就像早晨的太阳

2016-06-21 23:20:40 204

1 安装Linux 3 1.1 安装wmware11 3 1.1.1 待补充 3 1.2 安装centos6.5 3 1.2.1 注意安装细节 3 1.2.2 设置VIM 命令 3 1.2.3 配置仅主机连网 4 1.2.4 配置网络出现的问题 5 1.2.5 设置桥接上网 6 1.2.6 设置nat上网 12 2 安装基本工具 15 2.1 SSH免登陆配置 15 2.2 SUDO配置 15 3 单机安装Hadoop 17 3.1 hdfs和yarn单机安装 17 3.1.1 配置主机和防火墙 17 3.2 hadoop基本shell命令 19 3.3 简单JAVA实例 20 4 伪分布式部署spark 20 4.1 下载spark 20 4.2 解压安装 20 4.3 安装scala. 20 4.4 配置spark的启动参数 21 4.5 启动并验证spark是否配置 21 5 搭建zookeeper集群 23 5.1 下载解压 23 5.2 参数配置 23 5.2.1 23 5.2.2 23 5.2.3 24 5.2.4 24 5.2.5 24 5.2.6 启动验证 24 6 KAFKA安装 25 6.1 下载 25 6.2 安装 25 6.2.1 修改server.properties 25 6.2.2 配置参数说明 25 6.2.3 拷贝到其他的环境 26 6.2.4 启动 26 6.2.5 验证 26 6.2.6 基本命令 26

2016-06-29

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

nie_hw的博客