- 博客(20)
- 收藏
- 关注
RSS订阅原创 MySQL8.0.22 安装及配置
MySQL8.0.22 安装及配置下载下载1.从网上下载MySQL8.0.22版本，下载地址：https://dev.mysql.com/downloads/mysql/2.下载完成后解压我解压的路径是：D:\Java\mysql-8.0.22-winx643.配置文件新建一个my.ini[mysqld] # 设置3306端口 port=3306 # 设置mysql的安装目录 basedir=D:\Java\mysql-8.0.12-winx64 # 设置mysql数据库的数据的存放
2020-10-27 21:33:56
3178
3
原创 常用组件
excel导入导出excelmagic基于注解的Excel导入导出开源组件https://gitee.com/mirrors/magical-excel
2020-10-27 14:40:16
119
原创 python开发环境安装
网上看了很多教程，在搭建python环境时，都只说安装python，对python开发涉及到的工具包之类的都没有提及，所以整理一份完全小白的安装文档下载python及相关环境在官网下载python3.7.3https://www.python.org/ftp/python/3.7.3/python-3.7.3-amd64.exepywin32pywin32是一个第三方模块库，主要的作用是...
2019-05-16 20:06:22
133
原创 Rocketmq 双Master环境搭建
服务器及环境IP别名模式192.168.11.12rocketmq-nameserver1、rocketmq-master1Master192.168.11.13rocketmq-nameserver2、rocketmq-master2Master修改/etc/hostsvi /etc/hosts 添加如下内容192.168.11.12 rock...
2019-04-15 14:13:02
115
原创 wiki异常
由于wiki访问越来越慢，所以增加了wiki的jvm内存，但增加之后，怎么写启不起来，刚开始出现权限异常，在通过chown -R confluence1.confluence .设置了wiki操作权限后，正常启动之后，出现下面异常：Mar 25, 2019 4:11:52 PM org.apache.catalina.core.StandardHostValve customSEVERE...
2019-03-25 17:01:33
759
原创 Cloudera Manager安装CDH
一、环境主机名称IPCPU内存hnode1192.168.11.702核16Ghnode2192.168.11.712核16Ghnode3192.168.11.722核16G二、环境配置1、网络配置设置主机名和配置静态IP，所有节点vi /etc/hosts192.168.11.70 hnode1192.168.11.71 ...
2019-03-04 10:22:44
106
原创 Mysql安装
下载yum源wget http://repo.mysql.com/mysql-community-release-el6-5.noarch.rpm安装源，安装之后， /etc/yum.repos.d/目录下会产生两个文件：mysql-community-source.repo、mysql-community.repo。sudo rpm -ivh mysql-community-releas...
2019-02-22 09:58:14
152
原创 Hive创建内部表
启动Hivehive内部表建表create table test1(id int,name string) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE;创建完成后使用 show tables; 查看是否创建成功.show tables;hive> show tables;OKs...
2019-02-20 10:53:11
5454
原创 HBase集群部署
完全分布式基于hadoop集群和Zookeeper集群。所以在搭建之前保证hadoop集群和Zookeeper集群可用。hadoop集群与Zookeeper集群搭建方式，请参考我的其他博客。1、下载HBasehttps://archive.apache.org/dist/hbase/1.2.0/hbase-1.2.0-bin.tar.gz为了兼容我之前的部署的大数据环境，所以这里使用了1.2...
2019-02-19 15:21:29
433
原创 Hive安装
一、下载安装包http://mirror.bit.edu.cn/apache/hive/hive-2.3.4/这里以hive-2.3.4版本为例，hive对应hadoop版本请参考hive官网二、解压tar -xvf apache-hive-2.3.4-bin.tar.gz三、配置环境变量vi ~/.bash_profile添加如下内容export HIVE_HOME=/opt...
2019-01-29 15:12:59
237
原创 Impala安装
MySQL或PostgreSQL，充当Impala和Hive的Metastore数据库。安装和配置Hive Metastore是Impala的要求。没有Metastore数据库，Impala不起作用下载地址：http://archive.cloudera.com/cdh5/redhat/6/x86_64/cdh/5.13.1/RPMS/x86_64/http://archive.cloud...
2019-01-29 13:35:39
847
原创 Apache Kudu集群安装
安装Kudu集群必须是奇数的集群，建议用一个主节点（无容错）或者三个主节点（可以允许容错一个），双主机部署无法容忍任何故障。一、下载安装包http://archive.cloudera.com/cdh5/redhat/6/x86_64/cdh/5.13.1/RPMS/x86_64/kudu-1.5.0+cdh5.13.1+0-1.cdh5.13.1.p0.3.el6.x86_64.rpm ...
2019-01-28 16:15:15
1076
原创 NTP同步服务器搭建
一、安装ntpyum -y install ntp二、设置开机启动chkconfig ntpd on三、配置内网Ntp Server1、修改ntp.conf vi /etc/ntp.conf第一种配置：允许任何IP的客户机都可以进行时间同步 将restrict default kod nomodify notrap nopeer noquery这行修改成：restri...
2019-01-28 15:24:10
370
原创 Tengine+Lua+Kafka收集日志
下载解压Openrestywget https://openresty.org/download/openresty-1.9.7.4.tar.gz tar -xzf openresty-1.9.7.4.tar.gz /opt/nginx/编译安装./configure --with-luajit --without-http_redis2_module --with-http_iconv...
2019-01-17 16:17:42
517
原创 Tengine+Lua插件编译安装
由来Nginx 整体采用模块化设计，有丰富的模块库和第三方模块库，配置灵活。其中模块化设计是Nginx的一大卖点，甚至http服务器核心功能也是一个模块。要注意的是：nginx的模块是静态的，添加和删除模块都要对nginx进行重新编译。所以淘宝对Nginx做了二次开发，也就是Tengine。 Tengine 支持官方所有的 HTTP 模块动态加载而不必重新编译 Nginx，除非是第三方模块才需...
2019-01-17 10:55:14
2237
原创 Kafka集群部署
1、下载Kafkahttps://archive.apache.org/dist/kafka/1.1.0/kafka_2.11-1.1.0.tgz2、解压tar -xvf kafka_2.11-1.1.0.tgz3、修改config/server.properties注意，只有broker.id 和listerners的要和具体的节点相对应，剩下的是直接相同的############...
2019-01-16 10:37:04
103
原创 Spark集群安装配置
配置日志vim conf/spark-default.confspark.eventLog.enabled=true #true表示打开 spark.eventLog.dir= #hdfs路径 配置日志查看服务History-server
2019-01-08 10:48:36
853
原创 Spark编译
1、下载组件1.1下载mavenhttp://mirrors.shu.edu.cn/apache/maven/maven-3/3.3.9/binaries/1.2、下载JDK Oracle官网下载1.7+版本1.3、下载Scalahttps://www.scala-lang.org/download/2.11.8.html1.4、下载Spark包https://archive....
2019-01-07 19:09:16
221
原创 zookeeper部署
1、单机部署1.1 下载进入要下载的版本的目录，选择.tar.gz文件下载下载链接：http://archive.apache.org/dist/zookeeper/1.2 安装使用tar解压要安装的目录即可，以3.4.8版本为例这里以解压到/home/kafka，实际安装根据自己的想安装的目录修改（注意如果修改，那后边的命令和配置文件中的路径都要相应修改）tar -zxf zook...
2019-01-03 18:06:11
179
原创 cdh hadoop ha环境安装
网上找了关于搭建HA环境的很多文章，但都不全，所以自己写一个记录一下。虽然不是傻瓜式的，但基本上所有的点都有涉及到了。准备三台服务器192.168.11.70192.168.11.71192.168.11.721、下载组件首先去CDH网站上下载hadoop组件http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.13.1.t...
2019-01-03 17:31:47
1347
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人