- 博客(14)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 模仿分布计算
学习spark的时候先学的做了一个小实例用来模仿分布计算项目结构就是5个文件创建一个数据结构package bigdata.sparkCore.sparkTest01/** * 数据结构 */class dataStructure extends Serializable { //数据 val datas=List(1,2,3,4) //计算逻辑 val logic:(Int) =>Int=_*2}创建一个任务package bigdata.spark
2021-01-27 16:18:56
100
原创 log4j.properties配置
log4j.properties配置############## 输出到控制台############## log4j.rootLogger日志输出类别和级别：只输出不低于该级别的日志信息DEBUG < INFO < WARN < ERROR < FATAL# WARN：日志级别 CONSOLE：输出位置自己定义的一个名字 logfile：输出位置自己定义的一个名字log4j.rootLogger=WARN,CONSOLE,logfile# 配置C
2021-01-27 10:12:14
90
原创 spark基础实例wordCount
spark基础实例wordCount基础配置完成之后，写代码更方便基础配置idea创建spark项目创建maven项目名字和地址写合适自己的创建好了之后把src删了然后创建spark文件夹，因为学习的话可能还有别的组件，放在一个项目里呗，当然不删除也行，看自己了创建spark文件夹的方法：项目名称，点击右键然后新建一个module然后下载scala插件，如果有的话就不用了下载了，没有的话点击file 然后点击 setting，然后点击plugins 里面搜索 scala点击
2021-01-26 11:04:21
578
原创 CDH安装flink
CDH安装flinkflink 下载https://archive.cloudera.com/csa/1.0.0.0/csd/这里下载jar包https://archive.cloudera.com/csa/1.0.0.0/parcels/这里下载需要的parcel创建 flink_parcels文件接部署CDH的文章https://blog.csdn.net/weixin_44677459/article/details/112235802在/var/www/html下创建一个parce
2021-01-22 18:33:45
274
原创 Linux部署azkaban
Linux部署azkaban前置：部署jdk，部署GIT克隆项目git clone https://github.com/azkaban/azkaban.git 编译cd azkaban/ ./gradlew build installDist 创建一个文件夹用来放azkaban的web项目cd ../mkdir azikaban-3.85.0然后把克隆的项目中的压缩包复制到当前的web项目文件夹中,并解压cd root/azkaban/azkaban-exec-se
2021-01-22 18:02:54
270
原创 tomcat8中文乱码
使用tomcat8的时候，可能会出现日志中文乱码的情况要解决的话，可以打开tomcat8的目录，找到conf文件夹，也就是配置所在的文件夹一般解决中文乱码的方式，是修改server.xml中的编码集，改为utf-8即可但有时，我们发现server.xml中编码集设置的是utf-8但是控制台日志依旧会出现中文乱码的情况，此时我们可以修改logging.properties文件可以看到java.util.logging.ConsoleHandler.encoding = UTF-8，默认的是
2021-01-22 14:28:16
1211
原创 js格式化json
js格式化json<!DOCTYPE html><html lang="en"><head> <meta charset="UTF-8"> <title>js格式化json</title> <script src="http://apps.bdimg.com/libs/jquery/2.1.4/jquery.min.js"></script></head><
2021-01-22 14:20:05
587
原创 Linux安装Redis
Linux安装Redisredis下载地址:https://redis.io/download下载稳定版本下载好了之后 把安装包上传到linux服务器，然后解压安装包然后解压安装包 我是解压到我source文件夹下了#解压安装包tar -zvxf redis-6.0.9.tar -C ../source#进入到安装包里cd ../source/redis-6.0.9#需要 安装gcc套装yum install cppyum install binutilsy..
2021-01-22 11:33:32
78
原创 Windows部署JDK
Windows部署JDK直接从官网上下载JDK然后点击下一步安装即可选择安装目录 安装过程中会出现两次 安装提示 。第一次是安装 jdk ，第二次是安装 jre 。建议两个都安装在同一个java文件夹中的不同文件夹中。（默认就好了，一般不会修改这个路径）（不能都安装在java文件夹的根目录下，jdk和jre安装在同一文件夹会出错）安装完JDK后配置环境变量 计算机→属性→高级系统设置→高级→环境变量系统变量→新建 JAVA_HOME 变量变量值填写jdk的安装目录（本人是 C:\Pro
2021-01-21 17:59:16
177
原创 Linux部署JDK
Linux部署JDK准备安装包openJDK下载安装包yum -y list java*yum install -y java-1.8.0-openjdk-devel.x86_64oracleJDK直接从网上下载安装包解压安装包tar -zxvf 文件名.tar.gz -C 目标路径 配置环境变量vi /etc/profile#给配置文件添加export JAVA_HOME=/home/zdicc/source/jdk1.8.0_144export JRE_HOM
2021-01-21 17:53:57
61
原创 配置mysql数据库外网访问
配置mysql数据库外网访问#登陆mysql，输入密码`mysql -u root -p`#进入到mysqluse mysql;#查询host值select user,host from user;#修改root的访问权限update user set host='%' where user='root';#刷新权限flush privileges;#退出quit...
2021-01-21 15:54:49
163
原创 mysql 常用语句系列
mysql 常用语句系列去重语句select * from peoplewhere people_no in (select people_no from people group by people_no having count(people_no) > 1);根据数据库名获取到表和表备注SELECT TABLE_NAME,TABLE_COMMENT FROM information_schema.TABLESWHERE table_schema='datacenter';
2021-01-21 15:36:12
51
原创 mysql 自定义函数系列----------日历函数
mysql 自定义函数系列日历函数BEGINDECLARE num int DEFAULT -1;CREATE TEMPORARY TABLE under_日历 ( yyyy int, q int, mm int, dd VARCHAR(15), w INT, wd VARCHAR(15) ); lp:LOOP set num = num+1;
2021-01-21 15:23:43
112
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人